KR20130105270A - Method and apparatus for determining content type of video content - Google Patents

Method and apparatus for determining content type of video content Download PDF

Info

Publication number
KR20130105270A
KR20130105270A KR1020120125698A KR20120125698A KR20130105270A KR 20130105270 A KR20130105270 A KR 20130105270A KR 1020120125698 A KR1020120125698 A KR 1020120125698A KR 20120125698 A KR20120125698 A KR 20120125698A KR 20130105270 A KR20130105270 A KR 20130105270A
Authority
KR
South Korea
Prior art keywords
pixel
color component
received frame
value
component characteristic
Prior art date
Application number
KR1020120125698A
Other languages
Korean (ko)
Inventor
미하일 리카고브
세르게이 스도우너프
쎈니아 페트로바
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130008212A priority Critical patent/KR102014443B1/en
Priority to US13/795,716 priority patent/US20130237317A1/en
Priority to PCT/KR2013/001966 priority patent/WO2013137613A1/en
Publication of KR20130105270A publication Critical patent/KR20130105270A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • H04N5/93Regeneration of the television signal or of selected parts thereof
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/40Analysis of texture
    • G06T7/41Analysis of texture based on statistical description of texture
    • G06T7/44Analysis of texture based on statistical description of texture using image operators, e.g. filters, edge density metrics or local histograms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G06V20/42Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57Control of contrast or brightness

Abstract

PURPOSE: A method for determining whether a field game is included according to a frame of a video content and an apparatus for the same are provided to rapidly find a content type of the video content frame by frame. CONSTITUTION: A frame of a video content is received (S101). A pixel-by-pixel color component characteristic of a received frame is detected (S103). A content type indicates whether the received frame according to the pixel-by-pixel color component characteristic includes a content reproducing a scene of a predetermined genre. The content type is determined (S105). [Reference numerals] (AA) Start; (BB) End; (S101) Receive a video content's frames; (S103) Detect pixel-specific pixel color component characteristics; (S105) Determine the type of the content according to the pixel-specific pixel color component characteristics

Description

비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법 및 장치 {Method and apparatus for determining content type of video content}Method and apparatus for determining the content type of video content {Method and apparatus for determining content type of video content}

본 발명은 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법 및 장치에 관한 것으로, 더욱 상세하게는, 비디오 컨텐츠의 프레임별로 필드 게임을 포함하는지 여부를 결정하는 방법 및 장치에 대한 것이다.The present invention relates to a method and apparatus for determining a content type of video content, and more particularly, to a method and apparatus for determining whether to include a field game for each frame of video content.

비디오 컨텐츠는 디스플레이에 표시되기 전에 밝기, 대비 또는 선명도 강화 등의 처리 과정을 거칠 수 있다. 이때 비디오 컨텐츠의 장르 또는 타입을 고려하여 처리될 수 있다.The video content may undergo processing such as brightness, contrast, or sharpening before being displayed on the display. In this case, the video content may be processed in consideration of the genre or type of video content.

비디오 컨텐츠의 오디오적 특징을 이용하여 비디오 컨텐츠의 타입을 검출하는 방법이 존재하나, 비디오와 오디오 트랙이 각각 따로 저장되어 있는 경우에는 사용될 수 없다는 문제점이 있다.There exists a method of detecting the type of video content by using the audio feature of the video content, but there is a problem that it cannot be used when the video and audio tracks are stored separately.

또한, 세그먼트별로 비디오 컨텐츠의 타입을 검출하는 방법이 존재하나, 세그먼트에 포함된 하나 이상의 프레임들을 고려하여 비디오 컨텐츠의 타입을 검출하여야 하므로 시간이 너무 오래 걸린다는 문제점이 있다.In addition, there is a method of detecting the type of video content for each segment, but there is a problem that it takes too long because the type of the video content must be detected in consideration of one or more frames included in the segment.

따라서, 비디오 컨텐츠의 타입을 프레임별로(frame by frame) 빠르게 검출하는 방법이 요구된다.Accordingly, there is a need for a method of quickly detecting a type of video content frame by frame.

본 발명은 비디오 컨텐츠의 프레임별로 비디오 컨텐츠의 타입을 결정하는 방법에 관한 것으로, 자세하게는 비디오 컨텐츠의 프레임별로 필드 게임을 포함하는지 여부를 결정하는 방법에 관한 것이다.The present invention relates to a method for determining a type of video content for each frame of video content, and more particularly, to a method for determining whether a field game is included for each frame of video content.

위와 같은 과제를 해결하기 위한 본 발명의 일 실시예는, 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법에 있어서, 상기 비디오 컨텐츠의 프레임을 수신하는 단계 상기 수신한 프레임의 픽셀별 컬러 성분 특성을 검출하는 단계 상기 검출한 픽셀별 컬러 성분 특성에 따라 상기 수신한 프레임이 소정 장르의 씬을 재생하는 컨텐츠를 포함하는지를 나타내는 컨텐츠 타입을 결정하는 단계를 포함하는 것을 특징으로 한다.In one embodiment of the present invention for solving the above problems, in the method of determining the content type of the video content, the step of receiving the frame of the video content detecting the color component characteristics of each pixel of the received frame And determining a content type indicating whether the received frame includes content for reproducing a scene of a predetermined genre according to the detected color component characteristic of each pixel.

더하여, 상기 수신한 프레임과 이전 프레임이 동일한 씬인 경우, 이전 프레임의 결정된 컨텐츠 타입에 따라 상기 수신한 프레임의 컨텐츠 타입을 결정하는 단계를 더 포함하는 것을 특징으로 한다.In addition, when the received frame and the previous frame is the same scene, determining the content type of the received frame according to the determined content type of the previous frame.

더하여, 상기 수신한 프레임의 픽셀별 컬러 성분 특성을 검출하는 단계는 상기 수신한 프레임에 포함된 복수 개의 픽셀의 휘도와 채도를 검출하는 단계 상기 검출된 휘도 및 채도와 각 픽셀의 RGB 채널 값을 이용하여 픽셀별 컬러 성분 특성을 검출하는 단계 상기 검출된 휘도값을 이용하여 각 픽셀의 휘도의 변화도를 검출하는 단계 및 상기 검출된 각 픽셀의 휘도의 변화도와 픽셀별 컬러 성분 특성을 이용하여 상기 수신한 프레임의 통계학적 분석값을 검출하는 단계를 포함하는 것을 특징으로 한다.In addition, detecting a color component characteristic of each pixel of the received frame may include detecting luminance and saturation of a plurality of pixels included in the received frame using the detected luminance and saturation and RGB channel values of each pixel. Detecting color component characteristics of each pixel by using the detected luminance value and detecting the degree of change of luminance of each pixel using the detected luminance value and the reception using the variation of luminance of each detected pixel and the color component characteristics of each pixel. Detecting a statistical analysis value of one frame.

더하여, 상기 수신한 프레임의 통계학적 분석값을 검출하는 단계는 상기 수신한 프레임에 포함된 픽셀의 통계학적 분석값을 검출하는 단계 및 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 픽셀의 통계학적 분석값을 검출하는 단계를 포함하는 것을 특징으로 한다.In addition, detecting a statistical analysis value of the received frame may include detecting a statistical analysis value of a pixel included in the received frame, and statistics of a pixel of which the color component characteristic of each pixel among the received frames is green. Detecting the chemical analysis value.

더하여, 상기 수신한 프레임에 포함된 픽셀의 통계학적 분석값을 검출하는 단계는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율을 검출하는 단계 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율을 검출하는 단계 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율을 검출하는 단계 및 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율을 검출하는 단계를 포함하는 것을 특징으로 한다.In addition, detecting a statistical analysis value of the pixels included in the received frame may include detecting a ratio of pixels in which the color component characteristic of each pixel of the received frame is white. Detecting a ratio of pixels having high luminance and high saturation detecting a ratio of pixels having a color component characteristic of each pixel of the received frame being green and a ratio of pixels having a color component characteristic of each pixel of the received frame having skin color; Characterized in that it comprises the step of detecting.

더하여, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 픽셀의 통계학적 분석값을 검출하는 단계는 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 휘도값을 검출하는 단계 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 채도값을 검출하는 단계 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 B 채널 값을 검출하는 단계 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 휘도 변화값을 검출하는 단계 및 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 G 채널에 대한 히스토그램을 검출하는 단계를 포함하는 것을 특징으로 한다.In addition, detecting a statistical analysis value of a pixel whose color component characteristic of each pixel is green among the received frames may include detecting an average luminance value of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green. Detecting an average saturation value of a plurality of pixels of which the color component characteristic of each pixel is green among the received frames. Detecting an average luminance change value of a plurality of pixels of which the color component characteristic of each pixel is green among the received frames, and detecting a histogram of the G channel of the plurality of pixels of which the color component characteristic of each pixel among the received frames is green; Characterized in that it comprises a step.

더하여, 상기 분석한 특징에 따라 상기 수신한 프레임의 컨텐츠 타입을 결정하는 단계는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이하인 경우, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이하인 경우, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 B 채널의 평균값이 기준값 이상인 경우, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값 또는 평균 휘도값이 기준값 이하인 경우, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 제1 기준값과 제2 기준값 사이의 값이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 히스토그램에서 그래프의 폭이 기준값 이상인 경우, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 히스토그램에서 그래프의 폭이 기준값 이하인 경우 및 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 휘도의 평균 변화값이 기준값 이하인 경우 중에서 적어도 하나에 해당하는 경우, 상기 수신한 프레임의 컨텐츠 타입은 필드 게임이 아닌 것으로 결정하는 단계를 포함하는 것을 특징으로 한다.In addition, the determining of the content type of the received frame according to the analyzed feature may include determining a color component of each pixel of the received frame when the ratio of pixels having a green color characteristic of each pixel of the received frame is less than or equal to a reference value. If the average saturation value of the pixel whose characteristic is green is less than or equal to the reference value, the color saturation value of the pixel of which the color component of the received frame is green is less than or equal to the reference value, and the color component characteristic of each pixel of the received frame is green. When the average value of the B channel of the pixel is greater than or equal to the reference value, if the color saturation characteristic of the pixel of the received frame is less than or equal to the reference value, the average color saturation value or average luminance value of the pixel that is green is less than or equal to the reference value. The average saturation value of a pixel is a value between a first reference value and a second reference value, and the pixel-by-pixel color of the received frame. If the width of the graph is greater than or equal to the reference value in the histogram of the pixel having the minute characteristic, the average color saturation value of the pixel with the color component characteristic of the pixel of the received frame is greater than or equal to the reference value, and the color component characteristic of the pixel of the received frame is greater than or equal to the reference value. When the width of the graph is less than or equal to the reference value in the histogram of the green pixel and the average color saturation value of the pixel whose color component characteristic of the pixel of the received frame is green is greater than or equal to the reference value, the color component characteristic of each pixel of the received frame is green. If the average change value of the luminance of the in-pixel is at least one of the reference value, characterized in that it comprises the step of determining that the content type of the received frame is not a field game.

더하여, 상기 분석한 특징에 따라 상기 수신한 프레임의 컨텐츠 타입을 결정하는 단계는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율 또는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율이 기준값 이하인 경우 및 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율 또는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율이 기준값 이하인 경우 중에서 적어도 하나에 해당하는 경우, 상기 수신한 프레임의 컨텐츠 타입은 필드 게임인 것으로 결정하는 단계를 포함하는 것을 특징으로 한다.In addition, the determining of the content type of the received frame according to the analyzed feature may include a ratio of pixels having a color component characteristic of each pixel of the received frame to be less than or equal to a reference value, and the color component of each received pixel of the received frame. The ratio of pixels having high luminance and high saturation is equal to or greater than a reference value, and the ratio of pixels having color component characteristic of each pixel of the received frame is white or that of pixels whose color component characteristic of pixel of the received frame is skin color is less than the reference value. And the ratio of the pixel in which the color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the ratio of the pixel in which the color component characteristic of each pixel of the received frame is high luminance and high saturation is less than or equal to the reference value, and the received frame The pixel component of the color component property of the pixel that is white or the pixel property of the pixel of the received frame. If the attribute is available for the at least one of not more than a ratio of the pixel color reference value, the received content type of the frame is characterized in that it comprises the step of determining to be a game field.

도 1은 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법을 나타낸 순서도이다.
도 2는 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 픽셀별 컬러 성분 특성을 검출하는 방법을 나타낸 순서도이다.
도 3은 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 하나의 프레임에 포함된 통계학적 분석값을 검출하는 방법을 나타낸 순서도이다.
도 4는 본 발명의 다른 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법을 나타낸 순서도이다. 본 발명의 다른 실시 예에 의하면, 이전 프레임의 컨텐츠 타입에 따라 현재 프레임의 컨텐츠 타입이 결정될 수 있다.
도 5는 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 컨텐츠 타입 결정 장치의 구조를 나타낸 블록도이다.
도 6은 본 발명의 다른 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 컨텐츠 타입 결정 장치의 구조를 나타낸 블록도이다.
도 7은 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 장치의 픽셀별 컬러 성분 특성 검출부의 구조를 나타낸 블록도이다.
도 8은 본 발명의 일 실시 예에 의한 픽셀별 컬러 성분 특성 검출부의 픽셀 분류부의 구조를 나타낸 블록도이다.
도 9는 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 장치의 타입 검출부의 구조를 나타낸 블록도이다.
도 10은 본 발명의 다른 실시 예에 의한 컨텐츠 타입 결정 장치의 씬 변경 검출부의 구조를 나타낸 블록도이다.
도 11은 본발명의 다른 실시 예에 의한 컨텐츠 타입 결정 장치의 최종 타입 검출부의 구조를 나타낸 블록도이다.
도 12는 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 시스템을 나타낸 블록도이다.
도 13은 발명의 일 실시 예에 있어서, 필드 게임 에피소드를 포함할 수 있는 그래프의 영역을 나타낸 것이다.
도 14는 본 발명의 일 실시 예에 있어서, 픽셀이 흰색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.
도 15는 본 발명의 일 실시 예에 있어서, 픽셀이 피부색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.
도 16은 본 발명의 일 실시 예에 있어서, 픽셀이 노란색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.
도 17은 본 발명의 일 실시 예에 있어서, 픽셀이 녹색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.
도 18은 본 발명의 일 실시 예에 있어서, 녹색 픽셀들의 휘도 값을 그래프로 나타낸 것이다.
1 is a flowchart illustrating a method of determining a content type of video content according to an embodiment of the present invention.
2 is a flowchart illustrating a method of detecting color component characteristics of each pixel of video content according to an exemplary embodiment.
3 is a flowchart illustrating a method of detecting a statistical analysis value included in one frame of video content according to an embodiment of the present invention.
4 is a flowchart illustrating a method of determining a content type of video content according to another embodiment of the present invention. According to another embodiment of the present invention, the content type of the current frame may be determined according to the content type of the previous frame.
5 is a block diagram illustrating a structure of a content type determination device for determining a content type of video content according to an exemplary embodiment.
6 is a block diagram illustrating a structure of a content type determination device for determining a content type of video content according to another exemplary embodiment.
7 is a block diagram illustrating a structure of a color component characteristic detection unit for each pixel of the content type determination apparatus according to an exemplary embodiment.
8 is a block diagram illustrating a structure of a pixel classification unit of a color component characteristic detection unit for each pixel according to an exemplary embodiment.
9 is a block diagram illustrating a structure of a type detection unit of a content type determination device according to an embodiment of the present invention.
10 is a block diagram illustrating a structure of a scene change detection unit of a content type determination device according to another embodiment of the present invention.
11 is a block diagram illustrating a structure of a final type detection unit of a content type determination device according to another embodiment of the present invention.
12 is a block diagram illustrating a content type determination system according to an embodiment of the present invention.
FIG. 13 illustrates an area of a graph that may include field game episodes according to one embodiment of the invention.
14 is a graph illustrating a range of RGB channel data values that may be determined to be white pixels according to an embodiment of the present invention.
FIG. 15 is a graph illustrating a range of RGB channel data values in which a pixel may be determined to be a skin color pixel according to an exemplary embodiment.
16 is a graph illustrating a range of RGB channel data values that may be determined as being a yellow pixel according to an embodiment of the present invention.
FIG. 17 is a graph illustrating a range of RGB channel data values that may be determined to be a green pixel according to an embodiment of the present invention.
18 is a graph illustrating luminance values of green pixels according to an embodiment of the present invention.

이하 본 발명의 바람직한 실시 예를 첨부한 도면을 참조하여 상세히 설명한다. 다만, 하기의 설명 및 첨부된 도면에서 본 발명의 요지를 흐릴 수 있는 공지 기능 또는 구성에 대한 상세한 설명은 생략한다. 또한, 도면 전체에 걸쳐 동일한 구성 요소들은 가능한 한 동일한 도면 부호로 나타내고 있음에 유의하여야 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the following description and the accompanying drawings, detailed description of well-known functions or constructions that may obscure the subject matter of the present invention will be omitted. It should be noted that the same constituent elements are denoted by the same reference numerals as possible throughout the drawings.

이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위한 용어로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형 예들이 있을 수 있음을 이해하여야 한다.The terms and words used in the present specification and claims should not be construed in an ordinary or dictionary sense, and the inventor shall properly define the terms of his invention in the best way possible It should be construed as meaning and concept consistent with the technical idea of the present invention. Therefore, the embodiments described in the present specification and the configurations shown in the drawings are merely the most preferred embodiments of the present invention, and not all of the technical ideas of the present invention are described. Therefore, It is to be understood that equivalents and modifications are possible.

본 발명은 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법, 자세히 말하면 비디오 컨텐츠의 필드 게임 에피소드가 포함되었는지 여부를 검출하는 방법에 관한 것이다.The present invention relates to a method of determining a content type of video content, and more particularly, to a method of detecting whether a field game episode of video content is included.

본 발명에 의한 컨텐츠 타입 검출은 필드 게임 에피소드를 포함하지 않은 다른 컨텐츠와 비교해볼 때, 필드 게임 에피소드를 포함한 컨텐츠의 녹색 픽셀의 비율이 상대적으로 높은 점을 기초로 하여 컨텐츠의 타입을 검출할 수 있다.Content type detection according to the present invention can detect the type of content based on the fact that the ratio of the green pixels of the content including the field game episode is relatively high, compared to other content not including the field game episode. .

일반적으로, 필드 게임 에피소드를 포함한 컨텐츠는 컨텐츠의 프레임에 포함된 녹색 픽셀의 채도(saturation) 또는 녹색 픽셀의 비율이 필드 게임 에피소드를 포함하지 않은 컨텐츠와 비교해볼 때 상대적으로 높다. In general, content that includes field game episodes is relatively high when compared to content that does not contain field game episodes, the saturation of the green pixels or the percentage of green pixels included in the frame of the content.

그러나, 필드 게임 에피소드를 포함하는 컨텐츠임에도 녹색 픽셀의 채도가 필드 게임 에피소드를 포함하지 않은 컨텐츠보다 낮은 경우도 존재할 수 있다. 즉, 녹색 픽셀의 채도가 높다고 하여 필드 게임 에피소드를 포함하고 있다고 절대적으로 판단될 수는 없다. 이때, 사람(human)은 녹색 픽셀의 채도가 상대적으로 낮은 필드 게임 에피소드를 포함하는 컨텐츠를 상기 컨텐츠의 녹색 픽셀의 채도가 낮음에도 필드 게임 에피소드를 포함하고 있다고 쉽게 판단할 수 있는데, 이 때 픽셀의 파란색 요소(blue component)가 상기 판단에 큰 역할(key role)을 할 수 있다. 이것은 파란색이 픽셀이 녹색과 거의 비슷하기 때문이다. 그러므로, 녹색 픽셀의 영역(green area)에서의 B 채널의 평균값이 비디오 컨텐츠의 필드 게임 에피소드가 포함되었는지 여부를 검출하는 컨텐츠 타입 검출에 이용될 수 있다. 녹색 픽셀의 영역은 해당 픽셀값이 사람에 의해 녹색으로 인식될 수 있는 범위에 속하는 픽셀들을 의미할 수 있다.However, even if the content includes the field game episode, there may be a case where the saturation of the green pixel is lower than the content not including the field game episode. In other words, the high saturation of the green pixels cannot be absolutely determined to include field game episodes. In this case, a human may easily determine that the content including the field game episode having a relatively low green pixel saturation includes the field game episode even though the green pixel of the content has low saturation. The blue component may play a key role in the determination. This is because blue is almost the same pixel as green. Therefore, the average value of the B channel in the green area of the green pixel can be used for content type detection to detect whether a field game episode of video content is included. The area of the green pixel may mean pixels belonging to a range in which the corresponding pixel value can be recognized as green by a person.

또한, 컨텐츠의 프레임의 평균 휘도(luminance) 값도 필드 게임 에피소드의 포함 여부 판단 시 이용될 수 있는데, 스포츠 이벤트들은 주로 밝은 장소에서 열릴(held) 수 있기 때문이다.In addition, the average luminance value of the frame of the content may also be used when determining whether the field game episode is included, since sports events may be held mainly in a bright place.

필드 게임 에피소드를 포함한 컨텐츠는 각 픽셀의 녹색 영역에서의 G 채널의 분포(histograms of green channel)가 상대적으로 좁은 편이다. 필드 게임에서는 균일한 색의 잔디밭이 사용될 수 있기 때문이다. 따라서, 필드 게임 에피소드 포함 여부 판단 시 프레임의 각 픽셀의 G 채널의 분포가 이용될 수 있다.Content including field game episodes has a relatively narrow histograms of green channel in the green region of each pixel. This is because a uniformly colored lawn can be used in a field game. Therefore, when determining whether the field game episode is included, the distribution of the G channel of each pixel of the frame may be used.

필드 게임 에피소드를 포함한 컨텐츠는 녹색 픽셀의 영역에 속한 각 픽셀의 휘도 값의 변화도(gradient values of luminance)가 상대적으로 큰 편이다. 필드 게임에서는 경계선인 플레이어의 유니폼 색이 주로 눈에 잘띄는 색이므로 잔디밭과의 경계가 명확하기 때문이다. 따라서, 필드 게임 에피소드 포함 여부 판단 시 프레임의 각 픽셀의 휘도 값의 변화도가 이용될 수 있다.Content including field game episodes tend to have relatively high gradient values of luminance of each pixel in the green pixel region. This is because in the field game, the boundary color of the lawn is clear because the uniform color of the player's uniform line is conspicuous. Therefore, when determining whether the field game episode is included, the degree of change in the luminance value of each pixel of the frame may be used.

도 13은 본 발명의 일 실시 예에 있어서, 필드 게임 에피소드를 포함할 수 있는 그래프의 영역을 나타낸 것이다.FIG. 13 illustrates an area of a graph that may include field game episodes according to an embodiment of the present invention.

도 13을 참조하면, 컨텐츠의 프레임에 포함된 녹색 픽셀의 채도가 낮거나, 녹색 픽셀의 상대적인 수가 낮은 경우에는 컨텐츠의 프레임이 필드 게임 에피소드를 포함하지 않을 가능성이 높다. 녹색 픽셀은 픽셀의 RGB 채널 데이터의 값이 사람에 의해 녹색으로 인식될 수 있는 영역에 속하는 픽셀을 포함할 수 있다.Referring to FIG. 13, when the saturation of the green pixels included in the frame of the content is low or the relative number of the green pixels is low, the frame of the content may not include the field game episode. The green pixel may include a pixel belonging to an area in which the value of the RGB channel data of the pixel may be recognized as green by a person.

본 발명에 있어서, 하나의 프레임이 필드 게임 에피소드로 판단될 수 있는 경우는 크게 세 가지로 분류할 수 있으며, 먼 거리 뷰(far view)인 경우, 클로즈업 뷰(close-up view)의 경우, 이전 프레임이 필드 게임 에피소드로 판단되었을 때, 씬 변경이 일어나지 않은 경우로 분류될 수 있다.In the present invention, one frame can be determined as a field game episode can be largely classified into three types, in the case of a far view, in the case of a close-up view, When the frame is determined to be a field game episode, it may be classified as a case where no scene change occurs.

녹색 픽셀의 수가 상대적으로 많고, 밝기와 채도가 높은 픽셀의 수가 적고, 흰색 픽셀 또는 피부색 픽셀의 수가 0보다 크거나 적은 경우, 다시 말하면, 프레임의 녹색 픽셀의 비율이 기준값 이상이고, 고휘도 및 고채도인 픽셀의 비율이 기준값 이하이고, 흰색 픽셀의 비율 또는 피부색 픽셀의 비율이 기준값 이하인 경우, 프레임의 컨텐츠 타입은 먼 거리 뷰의 필드 게임 에피소드로 판단될 수 있다. 이때, 녹색 픽셀은 필드 게임의 잔디밭의 색, 휘도(luminance)와 채도가 높은 픽셀 및 흰색 픽셀은 플레이어의 유니폼 색과 대응될 수 있다. 또한 피부색 픽셀은 플레이어의 피부색과 대응될 수 있다.If the number of green pixels is relatively large, the number of bright and saturated pixels is small, and the number of white or skin color pixels is greater than or less than zero, that is, the ratio of green pixels in the frame is above the reference value, When the ratio of pixels is equal to or less than the reference value and the ratio of white pixels or the ratio of skin color pixels is equal to or smaller than the reference value, the content type of the frame may be determined to be a field game episode of a distant view. In this case, the green pixel may correspond to the color of the lawn of the field game, the pixel having high luminance and saturation, and the white pixel correspond to the uniform color of the player. In addition, the skin color pixel may correspond to the skin color of the player.

녹색 픽셀의 수가 상대적으로 적고, 밝기와 채도가 높은 픽셀의 수가 많고, 흰색 픽셀의 수가 적고, 피부색 픽셀(skin tone pixel)의 수가 0보다 크거나 적은 경우, 다시 말하면, 녹색 픽셀의 비율이 기준값 이하이고, 고휘도 및 고채도인 픽셀의 비율이 기준값 이상이고, 흰색 픽셀의 피율 또는 피부색 픽셀의 비율이 기준값 이하인 경우, 프레임의 컨텐츠 타입은 클로즈업 뷰의 필드 게임 에피소드로 판단될 수 있다. 클로즈업 뷰인 경우에는 플레이어를 중심으로 하여 플레이어가 크게 표시될 수 있으므로 상기와 같이 판단될 수 있다.If the number of green pixels is relatively small, the number of bright and saturated pixels is large, the number of white pixels is small, and the number of skin tone pixels is greater or less than zero, that is, the ratio of the green pixels is below the reference value. When the ratio of pixels having high luminance and high saturation is greater than or equal to the reference value, and the ratio of skin pixels or skin color pixels is less than or equal to the reference value, the content type of the frame may be determined to be a field game episode of the close-up view. In the case of the close-up view, since the player may be displayed largely around the player, it may be determined as described above.

씬 변경이 이루어졌는지 여부에 따라서 프레임의 컨텐츠 타입은 필드 게임 에피소드로 판단될 수 있는데, 이전 프레임이 필드 게임 에피소드로 분류되었고, 씬 변경이 일어나지 않은 경우에 현재 프레임은 필드 게임 에피소드를 포함하는 것으로 판단될 수 있다.Depending on whether or not a scene change has been made, the content type of a frame may be determined to be a field game episode. If a previous frame is classified as a field game episode and a scene change has not occurred, the current frame is determined to include a field game episode. Can be.

한편, 본 발명에 있어서 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있는 경우는 7가지로 분류할 수 있다. Meanwhile, according to the present invention, seven types of cases may be determined that the content type of the frame is not a field game episode.

프레임에 포함된 녹색 픽셀의 비율이 낮은 경우, 녹색 픽셀의 평균 휘도값이 낮은 경우 또는 녹색 픽셀의 평균 채도값이 매우 낮은 경우, 앞서 언급한 바와 같이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다. 프레임에 포함된 녹색 픽셀의 비율이 낮은 경우 또는 녹색 픽셀의 평균 채도값이 매우 낮은 경우는 도 13의 그래프에서 필드 게임 에피소드가 아닌 것으로 판단될 수 있는 영역 이외의 영역에 포함될 수 있다.When the ratio of the green pixels included in the frame is low, when the average luminance value of the green pixel is low or when the average saturation value of the green pixel is very low, it may be determined that the field game episode is not mentioned as mentioned above. The case where the ratio of the green pixels included in the frame is low or the average saturation value of the green pixels is very low may be included in an area other than the area that may be determined not to be a field game episode in the graph of FIG. 13.

프레임에 포함된 녹색 픽셀의 평균 채도값이 낮고, 녹색 픽셀의 B 채널의 평균값이 높으면, 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다.If the average saturation value of the green pixel included in the frame is low and the average value of the B channel of the green pixel is high, it may be determined that the content type of the frame is not a field game episode.

프레임에 포함된 녹색 픽셀의 평균 채도값이 중간 정도이고, 녹색 픽셀의 G 채널 값의 히스토그램에서 그래프 너비가 넓은 경우, 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다.When the average saturation value of the green pixels included in the frame is medium and the graph width is wide in the histogram of the G channel value of the green pixel, it may be determined that the content type of the frame is not a field game episode.

프레임에 포함된 녹색 픽셀의 평균 채도값이 매우 높고, 녹색 픽셀의 G 채널 값의 히스토그램에서 그래프 너비가 매우 좁은 경우, 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다.When the average saturation value of the green pixels included in the frame is very high and the graph width is very narrow in the histogram of the G channel value of the green pixel, it may be determined that the content type of the frame is not a field game episode.

프레임에 포함된 녹색 픽셀의 평균 채도값이 높고, 녹색 픽셀의 휘도값의 변화도의 평균값이 매우 낮은 경우, 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다.When the average saturation value of the green pixels included in the frame is high and the average value of the variance of the luminance values of the green pixels is very low, it may be determined that the content type of the frame is not a field game episode.

상기 7가지의 경우에 속하지 않고, 필드 게임 에피소드로 판단될 수 있는 경우에 속하는 경우에는 프레임의 컨텐츠 타입이 필드 게임 에피소드로 판단될 수 있다.In case of not belonging to the above seven cases and belonging to the case where it can be determined as the field game episode, the content type of the frame may be determined to be the field game episode.

상기 7가지의 경우와 필드 게임 에피소드로 판단될 수 있는 경우에모두 속하지 않는 경우에는 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다.In the case of the seven cases and the case where it may be determined that the field game episode is not included, it may be determined that the content type of the frame is not the field game episode.

상기 7가지의 경우에 속하는 경우, 필드 게임 에피소드로 판단될 수 있는 경우에 속하더라도 프레임의 컨텐츠 타입이 필드 게임 에피소드가 아닌 것으로 판단될 수 있다.In the case of the above seven cases, the content type of the frame may not be determined to be a field game episode, even though the case may be determined to be a field game episode.

도 1은 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법을 나타낸 순서도이다.1 is a flowchart illustrating a method of determining a content type of video content according to an embodiment of the present invention.

도 1을 참조하면, 컨텐츠 타입 결정 장치가 외부로부터 비디오 컨텐츠의 프레임을 수신하면(S101), 수신한 프레임에 포함된 각 픽셀의 컬러 성분 특성을 검출할 수 있다(S103). 각 픽셀의 컬러 성분 특성은 채도, 휘도, 휘도 변화도(value of gradient in luminance channel), 흰색, 피부색, 노란색, 녹색, 고휘도 및 고채도(bright and saturated)를 포함할 수 있다.Referring to FIG. 1, when the content type determination apparatus receives a frame of video content from the outside (S101), the color component characteristic of each pixel included in the received frame may be detected (S103). The color component characteristics of each pixel may include saturation, luminance, value of gradient in luminance channel, white, skin color, yellow, green, high luminance and bright and saturated.

그리고 컨텐츠 타입 결정 장치는 검출된 픽셀별 컬러 성분 특성에 따라 컨텐츠 타입을 결정할 수 있다(S105). 이때 컨텐츠 타입은 프레임 별로 결정될 수 있으며, 컨텐츠가 필드 게임을 포함하는지 포함하지 않는지 여부에 따라 결정될 수 있다.The content type determination device may determine the content type according to the detected color component characteristic of each pixel (S105). In this case, the content type may be determined for each frame and may be determined depending on whether the content includes a field game or not.

도 2는 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 픽셀별 컬러 성분 특성을 검출하는 방법을 나타낸 순서도이다.2 is a flowchart illustrating a method of detecting color component characteristics of each pixel of video content according to an exemplary embodiment.

도 2를 참조하면, 컨텐츠 타입 결정 장치는 비디오 컨텐츠의 하나의 프레임에 포함된 각 픽셀의 휘도 및 채도를 검출한다(S202). 그리고, 컨텐츠 타입 결정 장치는 검출된 각 픽셀의 휘도 및 채도값과 각 픽셀의 RGB 채널값을 이용하여 픽셀별로 컬러 성분 특성을 검출하고(S203), 검출된 각 픽셀의 휘도값을 이용하여 각 픽셀의 휘도의 변화도를 검출할 수 있다(S204). 상기 각 픽셀의 컬러 성분 특성은 각 픽셀의 휘도, 채도 및 RGB 채널값에 따라 검출될 수 있으며, S203 단계에서 해당 픽셀이 각 픽셀의 컬러 성분 특성으로서 흰색, 피부색, 노란색, 녹색, 고휘도 및 고채도 픽셀(bright and saturated pixel)의 특성을 가지는지 여부가 결정될 수 있다.Referring to FIG. 2, the content type determination apparatus detects luminance and saturation of each pixel included in one frame of video content (S202). The content type determination apparatus detects color component characteristics for each pixel by using the detected luminance and saturation values of each pixel and the RGB channel value of each pixel (S203), and uses each pixel by using the detected luminance value of each pixel. The degree of change in luminance can be detected (S204). The color component characteristics of each pixel may be detected according to the luminance, saturation, and RGB channel value of each pixel. In step S203, the pixel is a color component characteristic of each pixel, and is a white, skin color, yellow, green, high luminance, and high saturation pixel. (bright and saturated pixel) can be determined whether or not.

또한, 컨텐츠 타입 결정 장치는 단계 S203에서 검출된 픽셀별 컬러 성분 특성 및 단계 S204에서 검출된 각 픽셀의 휘도의 변화도를 이용하여 비디오 컨텐츠의 하나의 프레임에 포함된 픽셀들의 통계학적 분석값을 검출할 수 있다(S205). 단계 S205의 통계학적 분석값은 각 픽셀의 특성을 이용하여 프레임 전체의 특성을 분석한 값을 의미하며, 통계학적 분석값은 하나의 프레임의 녹색 픽셀의 수, 피부색픽셀의 수, 평균 휘도값, 고휘도 및 고채도인 픽셀의 수 및 흰색 픽셀의 수를 포함할 수 있다. 본 발명의 일 실시 예에 의하면, 단계 S205에서 검출된 하나의 프레임의 통계학적 분석값에 따라 비디오 컨텐츠의 하나의 프레임에 대한 컨텐츠 타입이 결정될 수 있다.In addition, the content type determination apparatus detects statistical analysis values of the pixels included in one frame of the video content by using the color component characteristic of each pixel detected in step S203 and the degree of change in luminance of each pixel detected in step S204. It may be (S205). The statistical analysis value of step S205 means a value obtained by analyzing the characteristics of the entire frame using the characteristics of each pixel, the statistical analysis value is the number of green pixels, the number of skin color pixels, the average luminance value, And the number of pixels that are high brightness and high saturation and the number of white pixels. According to an embodiment of the present disclosure, the content type of one frame of video content may be determined according to a statistical analysis value of one frame detected in step S205.

도 3은 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 하나의 프레임에 포함된 통계학적 분석값을 검출하는 방법을 나타낸 순서도이다.3 is a flowchart illustrating a method of detecting a statistical analysis value included in one frame of video content according to an embodiment of the present invention.

도 3을 참조하면, 컨텐츠 타입 결정 장치는 하나의 프레임에 포함된 픽셀들의 통계학적 분석값을 검출하고(S305), 하나의 프레임에 포함된 픽셀들 중 녹색에 속하는 픽셀들에 대한 통계학적 분석값을 검출(S306)함으로써, 비디오 컨텐츠의 하나의 프레임에 포함된 하나 이상의 통계학적 분석값들을 검출할 수 있다. 녹색 픽셀들에 대한 통계학적 분석값은 녹색 픽셀의 휘도 값의 변화도의 평균, 녹색 픽셀의 평균 채도값, 녹색 픽셀의 평균 밝기값, 녹색 픽셀의 B채널 값의 평균값 및 녹색 픽셀들에 대한 휘도 히스토그램의 상대적인 너비값을 포함할 수 있다.Referring to FIG. 3, the apparatus for determining a content type detects a statistical analysis value of pixels included in one frame (S305) and statistical analysis value of pixels belonging to green among pixels included in one frame. By detecting (S306), one or more statistical analysis values included in one frame of video content may be detected. The statistical analysis on green pixels is the average of the gradient of the luminance value of the green pixel, the average saturation value of the green pixel, the average brightness value of the green pixel, the average value of the B channel value of the green pixel, and the luminance of the green pixels. It can include the relative width of the histogram.

도 4는 본 발명의 다른 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법을 나타낸 순서도이다. 본 발명의 다른 실시 예에 의하면, 이전 프레임의 컨텐츠 타입에 따라 현재 프레임의 컨텐츠 타입이 결정될 수 있다.4 is a flowchart illustrating a method of determining a content type of video content according to another embodiment of the present invention. According to another embodiment of the present invention, the content type of the current frame may be determined according to the content type of the previous frame.

도 4를 참조하면, 컨텐츠 타입 결정 장치가 외부로부터 비디오 컨텐츠의 프레임을 수신하면(S401), 수신한 프레임에 포함된 픽셀들의 컬러 성분 특성을 검출하고 검출된 픽셀별 컬러 성분 특성에 따라 현재 프레임의 컨텐츠 타입을 검출할 수 있다(S403). 그리고, 컨텐츠타입 결정 장치는 현재 프레임이 이전 프레임(previous frame)과 동일한 씬(scene)인 경우(S405), 이전 프레임의 컨텐츠 타입에 따라 수신한 프레임의 컨텐츠 타입을 결정할 수 있다(S409). 반면, 현재 프레임이 이전 프레임(previous frame)과 동일하지 않은 경우(S405), 즉, 씬이 변경된 경우, S403 단계에서 검출된 컨텐츠 타입에 따라 현재 프레임의 컨텐츠 타입이 최종 결정될 수 있다(S407).Referring to FIG. 4, when the content type determination apparatus receives a frame of video content from the outside (S401), the color component characteristic of the pixels included in the received frame is detected, and the detected color component characteristic of the current frame is determined. The content type may be detected (S403). When the current frame is the same scene as the previous frame (S405), the content type determination apparatus may determine the content type of the received frame according to the content type of the previous frame (S409). In contrast, when the current frame is not the same as the previous frame (S405), that is, when the scene is changed, the content type of the current frame may be finally determined according to the content type detected in step S403 (S407).

도 5는 본 발명의 일 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 컨텐츠 타입 결정 장치의 구조를 나타낸 블록도이다.5 is a block diagram illustrating a structure of a content type determination device for determining a content type of video content according to an exemplary embodiment.

도 5를 참조하면, 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 장치(500)는 프레임 버퍼(510), 픽셀별 컬러성분 특성 검출부(520) 및 타입 검출부(530)를 포함할 수 있다.Referring to FIG. 5, the content type determination apparatus 500 according to an embodiment of the present invention may include a frame buffer 510, a color component characteristic detection unit 520 for each pixel, and a type detection unit 530.

프레임 버퍼(510)는 외부로부터 비디오 컨텐츠를 수신하여 픽셀별 컬러 성분 특성 검출부(520)로 1 프레임씩 전송할 수 있다.The frame buffer 510 may receive the video content from the outside and transmit the frame to the color component characteristic detector 520 for each pixel.

픽셀별 컬러 성분 특성 검출부(520)는 프레임 버퍼(510)로부터 비디오 컨텐츠를 1 프레임씩 수신하여, 수신한 프레임에 포함된 각 픽셀의 컬러 성분 특성을 검출할 수 있다.The pixel component detection unit 520 for each pixel may receive the video content from the frame buffer 510 by one frame and detect color component characteristics of each pixel included in the received frame.

타입 검출부(530)는 픽셀별 컬러 성분 특성 검출부(520)에 의해 검출된 픽셀별 컬러 성분 특성에 따라 컨텐츠 타입을 결정할 수 있다. 이때 컨텐츠 타입은 프레임 별로 결정될 수 있으며, 컨텐츠가 필드 게임을 포함하는지 포함하지 않는지 여부에 따라 결정될 수 있다. 타입 검출부(530)가 컨텐츠 타입을 결정하는 방법에 대하여, 이하 도 9를 참조하여 자세히 후술하기로 한다.The type detector 530 may determine the content type according to the color component characteristic of each pixel detected by the color component characteristic detection unit 520 of each pixel. In this case, the content type may be determined for each frame and may be determined depending on whether the content includes a field game or not. A method of determining the content type by the type detector 530 will be described later in detail with reference to FIG. 9.

도 6은 본 발명의 다른 실시 예에 의한 비디오 컨텐츠의 컨텐츠 타입을 결정하는 컨텐츠 타입 결정 장치의 구조를 나타낸 블록도이다. 6 is a block diagram illustrating a structure of a content type determination device for determining a content type of video content according to another exemplary embodiment.

본 발명의 다른 실시 예에 의하면, 이전 프레임의 컨텐츠 타입에 따라 현재 프레임의 컨텐츠 타입이 결정될 수 있다. 도 6의 컨텐츠 타입 결정 장치(600)는 도 5의 컨텐츠 타입 결정 장치(500)와 대응될 수 있다.According to another embodiment of the present invention, the content type of the current frame may be determined according to the content type of the previous frame. The content type determination apparatus 600 of FIG. 6 may correspond to the content type determination apparatus 500 of FIG. 5.

도 6을 참조하면, 본 발명의 다른 실시 예에 의한 컨텐츠 타입 결정 장치(600)는 프레임 버퍼(610), 픽셀별 컬러성분 특성 검출부(620), 타입 검출부(630), 씬 변경 검출부(640) 및 최종 타입 검출부(650)를 포함할 수 있다. 상기 프레임 버퍼(610), 픽셀별 컬러성분 특성 검출부(620) 및 타입 검출부(630)는 도 5의 프레임 버퍼(510), 픽셀별 컬러성분 특성 검출부(520) 및 타입 검출부(530)와 대응되는 것으로서 중복되는 내용은 생략하기로 한다.Referring to FIG. 6, the content type determination apparatus 600 according to another exemplary embodiment of the present disclosure may include a frame buffer 610, a color component characteristic detector 620 for each pixel, a type detector 630, and a scene change detector 640. And a final type detector 650. The frame buffer 610, the color component characteristic detector 620, and the type detector 630 of the pixel correspond to the frame buffer 510, the color component characteristic detector 520, and the type detector 530 of FIG. 5. Duplicate contents will be omitted.

씬 변경 검출부(640)는 현재 프레임이 이전 프레임(previous frame)과 동일한 씬(scene)인 경우, False 값을 출력하고, 현재 프레임이 이전 프레임(previous frame)과 동일하지 않은 경우, True 값을 출력함으로써, 씬 변경 여부에 대한 값을 출력할 수 있다.The scene change detection unit 640 outputs a False value when the current frame is the same scene as the previous frame, and outputs a True value when the current frame is not the same as the previous frame. By doing so, a value of whether or not to change the scene can be output.

최종 타입 검출부(650)는 씬 변경 검출부(640)의 출력값에 따라 현재 프레임의 컨텐츠 타입을 검출할 수 있다. 씬 변경 검출부(640)에서 출력될 수 있는 값이 True 또는 False 값이고, True가 씬이 변경되었을 때, False를 씬이 변경되지 않았을 때 출력되는 값일 수 있다. 이경우 최종 타입 검출부(650)는 씬 변경 검출부(640)의 출력값이 True이면, 현재 프레임에 대하여 검출된 컨텐츠 타입 값을 출력하고, 씬 변경 검출부(640)의 출력값이 False이면, 이전 프레임에 대하여 검출된 컨텐츠 타입 값을 출력할 수 있다.The final type detector 650 may detect the content type of the current frame according to the output value of the scene change detector 640. A value that may be output from the scene change detection unit 640 may be a True or False value, and when True is changed in the scene, False may be a value output when the scene is not changed. In this case, when the output value of the scene change detection unit 640 is True, the final type detector 650 outputs the content type value detected for the current frame. If the output value of the scene change detection unit 640 is False, the last type detection unit 650 detects the previous frame. The content type value can be displayed.

도 7은 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 장치의 픽셀별 컬러 성분 특성 검출부의 구조를 나타낸 블록도이다. 7 is a block diagram illustrating a structure of a color component characteristic detection unit for each pixel of the content type determination apparatus according to an exemplary embodiment.

도 7의 픽셀별 컬러 성분 특성 검출부(720)는 도 5 및 도 6의 픽셀별 컬러 성분 특성 검출부(520, 620)와 대응될 수 있다.The color component characteristic detector 720 of FIG. 7 may correspond to the color component characteristic detectors 520 and 620 of FIGS. 5 and 6.

도 7을 참조하면, 본 발명의 일 실시 예에 의한 픽셀별 컬러 성분 특성 검출부(720)는 채도 검출부(721), 휘도 검출부(722), 픽셀 분류부(723), 휘도 변화도 검출부(724) 및 통계학적 분석부(725)를 포함할 수 있다.Referring to FIG. 7, the color component characteristic detector 720 for each pixel according to an exemplary embodiment of the present disclosure may include a saturation detector 721, a luminance detector 722, a pixel classifier 723, and a luminance gradient detector 724. And a statistical analysis unit 725.

채도 검출부(721)는 픽셀별 컬러 성분 특성 검출부(720)로 수신된 하나의 프레임에 포함된 적어도 하나 이상의 픽셀에 대한 채도(saturation)를 검출할 수 있다. 채도 검출부(721)는 각 픽셀의 RGB 채널 데이터(R, G, B)를 이용하여 각 픽셀의 채도를 검출할 수 있다. 이때, 검출될 수 있는 채도 값(S)은 아래 수학식 1에 따라 검출될 수 있다.The saturation detector 721 may detect saturation of at least one or more pixels included in one frame received by the color component characteristic detector 720 for each pixel. The saturation detector 721 may detect the saturation of each pixel using the RGB channel data R, G, and B of each pixel. In this case, the detectable saturation value S may be detected according to Equation 1 below.

Figure pat00001
Figure pat00001

상기 수학식 1에서 M0는 픽셀의 RGB 채널 데이터 중 최소 채널값을 의미하고, M1은 픽셀의 RGB 채널 데이터 중 최대 채널값을 의미할 수 있다.In Equation 1, M0 may mean the minimum channel value among the RGB channel data of the pixel, and M1 may mean the maximum channel value among the RGB channel data of the pixel.

휘도 검출부(722)는 픽셀별 컬러 성분 특성 검출부(720)로 수신된 하나의 프레임에 포함된 적어도 하나 이상의 픽셀에 대한 휘도(luminance)를 검출할 수 있다. 휘도 검출부(722)는 각 픽셀의 RGB 채널 데이터(R, G, B)를 이용하여 각 픽셀의 휘도를 검출할 수 있다. 이때, 각 픽셀의 휘도 값(Y)은 아래 수학식 2에 따라 검출될수 있다.The luminance detector 722 may detect luminance of at least one or more pixels included in one frame received by the color component characteristic detector 720 for each pixel. The luminance detector 722 may detect the luminance of each pixel by using the RGB channel data R, G, and B of each pixel. In this case, the luminance value Y of each pixel may be detected according to Equation 2 below.

Figure pat00002
Figure pat00002

픽셀 분류부(723)는 픽셀별 컬러 성분 특성 검출부(720)로 수신된 하나의 프레임에 포함된 적어도 하나 이상의 픽셀을 픽셀별로 그 특성에 따라 분류할 수 있다. 픽셀 분류부(723)는 각 픽셀의 RGB 채널 데이터(R, G, B)와 채도 검출부(721) 및 휘도 검출부(722)에 의해 검출된 각 픽셀의 채도(S) 및 휘도(Y) 값을 이용하여 픽셀을 분류할 수 있다. 예를 들면, 픽셀이 흰색, 고휘도 및 고채도 픽셀, 피부색, 노란색, 녹색에 속하는지가 판단될 수 있다. 픽셀 분류부(723)가 픽셀을 그 특성에 따라 분류하는 방법은 이하 도 8과 관련된 설명에서 자세히 설명하기로 한다.The pixel classifier 723 may classify at least one or more pixels included in one frame received by the color component characteristic detector 720 for each pixel according to their characteristics. The pixel classifier 723 may determine the RGB channel data R, G, and B of each pixel, and the chroma (S) and luminance (Y) values of each pixel detected by the chroma detector 721 and the luminance detector 722. Can be used to classify pixels. For example, it may be determined whether the pixels belong to white, high brightness and high saturation pixels, skin color, yellow, green. How the pixel classifier 723 classifies pixels according to their characteristics will be described in detail later with reference to FIG. 8.

도 8은 본 발명의 일 실시 예에 의한 픽셀별 컬러 성분 특성 검출부의 픽셀 분류부의 구조를 나타낸 블록도이다. 8 is a block diagram illustrating a structure of a pixel classification unit of a color component characteristic detection unit for each pixel according to an exemplary embodiment.

도 8의 픽셀 분류부(800)는 도 7의 픽셀 분류부(723)와 대응될 수 있다.The pixel classifier 800 of FIG. 8 may correspond to the pixel classifier 723 of FIG. 7.

픽셀 분류부(800)는 흰색 픽셀 검출부(810), 고휘도 및 고채도 픽셀 검출부(820), 피부색 픽셀 검출부(830), 노란색 픽셀 검출부(840) 및 녹색 픽셀 검출부(850)를 포함할 수 있다.The pixel classifier 800 may include a white pixel detector 810, a high luminance and high chroma pixel detector 820, a skin color pixel detector 830, a yellow pixel detector 840, and a green pixel detector 850.

흰색 픽셀 검출부(810)는 픽셀의 RGB 채널 데이터 값을 이용하여 픽셀값이 흰색에 해당되는지 판단할 수 있다. 이때, 흰색 픽셀 검출부(810)는 이하 수학식 3을 이용하여 픽셀이 흰색 픽셀인지 여부를 결정할 수 있다. 상기 결정에 따라 흰색 픽셀 검출부(810)는 True 또는 False 값을 출력할 수 있다.The white pixel detector 810 may determine whether the pixel value corresponds to white by using the RGB channel data value of the pixel. In this case, the white pixel detector 810 may determine whether the pixel is a white pixel by using Equation 3 below. According to the determination, the white pixel detector 810 may output a True or False value.

Figure pat00003
Figure pat00003

수학식 3에서

Figure pat00004
는 교집합을 의미하는 것으로,
Figure pat00005
의 조건과
Figure pat00006
의 조건을 모두 만족하는 픽셀이 흰색 픽셀인 것으로 결정될 수 있고, 출력되는 값 W 는 true일 수 있다. 반면, 흰색 픽셀이 아닌 것으로 결정되는 경우, W는 false 값으로 출력될 수 있다.In Equation 3,
Figure pat00004
Means the intersection,
Figure pat00005
Conditions and
Figure pat00006
The pixel satisfying all of the conditions may be determined to be a white pixel, and the output value W may be true. On the other hand, if it is determined that it is not a white pixel, W may be output as a false value.

도 14는 본 발명의 일 실시 예에 있어서, 픽셀이 흰색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.14 is a graph illustrating a range of RGB channel data values that may be determined to be white pixels according to an embodiment of the present invention.

고휘도 및 고채도 픽셀 검출부(820)는 픽셀의 RGB 채널 데이터 값을 이용하여 픽셀이 고휘도 및 고채도 픽셀에 해당되는지 판단할 수 있다. 이때, 고휘도 및 고채도 픽셀 검출부(820)는 이하 수학식 4를 이용하여 픽셀이 고휘도 및 고채도 픽셀에 해당되는지 결정할 수 있다. 상기 결정에 따라 고휘도 및 고채도 픽셀 검출부(820)는 True 또는 False 값을 출력할 수 있다.The high luminance and high saturation pixel detector 820 may determine whether a pixel corresponds to a high luminance and high saturation pixel by using the RGB channel data values of the pixel. In this case, the high luminance and high saturation pixel detection unit 820 may determine whether the pixel corresponds to the high luminance and high saturation pixel by using Equation 4 below. According to the determination, the high luminance and high saturation pixel detector 820 may output a True or False value.

Figure pat00007
Figure pat00007

수학식 4에서

Figure pat00008
의 조건과
Figure pat00009
의 조건을 모두 만족하는 픽셀이 고휘도 및 고채도 픽셀인 것으로 결정될 수 있고, 출력되는 값
Figure pat00010
는 true 값일 수 있다. 반면, 고휘도 및 고채도 픽셀이 아닌 것으로 결정되는 경우,
Figure pat00011
는 false 값으로 출력될 수 있다.In Equation 4,
Figure pat00008
Conditions and
Figure pat00009
The pixel that satisfies all of the conditions may be determined to be a high luminance and high chroma pixel, and the output value
Figure pat00010
May be a true value. On the other hand, if it is determined that it is not high brightness and high saturation pixels,
Figure pat00011
May be output as a false value.

피부색 픽셀 검출부(830)는 픽셀의 RGB 채널 데이터 값을 이용하여 픽셀값이 피부색에 해당되는지 판단할 수 있다. 이때, 피부색 픽셀 검출부(830)는 이하 수학식 5를 이용하여 픽셀이 피부색 픽셀에 해당되는지 결정할 수 있다. 상기 결정에 따라 피부색 픽셀 검출부(830)는 True 또는 False 값을 출력할 수 있다.The skin color pixel detector 830 may determine whether the pixel value corresponds to the skin color by using the RGB channel data value of the pixel. In this case, the skin color pixel detector 830 may determine whether the pixel corresponds to the skin color pixel by using Equation 5 below. According to the determination, the skin color pixel detector 830 may output a True or False value.

Figure pat00012
Figure pat00012

수학식 5에서

Figure pat00013
,
Figure pat00014
,
Figure pat00015
,
Figure pat00016
,
Figure pat00017
의 조건을 모두 만족하는 픽셀이 피부색 픽셀인 것으로 결정될 수 있고, 출력되는 값
Figure pat00018
는 true 값일 수 있다. 반면, 피부색 픽셀이 아닌 것으로 결정되는 경우,
Figure pat00019
는 false 값으로 출력될 수 있다.In Equation (5)
Figure pat00013
,
Figure pat00014
,
Figure pat00015
,
Figure pat00016
,
Figure pat00017
The pixel satisfying all of the conditions may be determined to be a skin color pixel, and the output value
Figure pat00018
May be a true value. On the other hand, if it is determined that it is not a skin pixel,
Figure pat00019
May be output as a false value.

도 15는 본 발명의 일 실시 예에 있어서, 픽셀이 피부색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.FIG. 15 is a graph illustrating a range of RGB channel data values in which a pixel may be determined to be a skin color pixel according to an exemplary embodiment.

노란색 픽셀 검출부(840)는 픽셀의 RGB 채널 데이터 값을 이용하여 픽셀값이 노란색에 해당되는지 판단할 수 있다. 이때, 노란색 픽셀 검출부(840)는 이하 수학식 6을 이용하여 픽셀이 노란색 픽셀에 해당되는지 결정할 수 있다. 상기 결정에 따라 노란색 픽셀 검출부(840)는 True 또는 False 값을 출력할 수 있다.The yellow pixel detector 840 may determine whether the pixel value corresponds to yellow by using the RGB channel data value of the pixel. In this case, the yellow pixel detector 840 may determine whether the pixel corresponds to the yellow pixel by using Equation 6 below. According to the determination, the yellow pixel detector 840 may output a True or False value.

Figure pat00020
Figure pat00020

수학식 6에서

Figure pat00021
는 픽셀의 RGB 채널 데이터 값의 G 채널 값 및 R 채널 값 중 더 큰 값,
Figure pat00022
은 G 채널 값 및 R 채널 값 중 더 작은 값을 의미한다.In Equation (6)
Figure pat00021
Is the greater of the G and R channel values of the pixel's RGB channel data values,
Figure pat00022
Is the smaller of the G channel value and the R channel value.

수학식 6에서,

Figure pat00023
,
Figure pat00024
,
Figure pat00025
,
Figure pat00026
,
Figure pat00027
의 조건을 모두 만족하는 픽셀이 노란색 픽셀인 것으로 결정될 수 있고, 출력되는 값
Figure pat00028
는 true 값일 수 있다. 반면, 노란색 픽셀이 아닌 것으로 결정되는 경우,
Figure pat00029
는 false 값으로 출력될 수 있다.In Equation (6)
Figure pat00023
,
Figure pat00024
,
Figure pat00025
,
Figure pat00026
,
Figure pat00027
The pixel that satisfies all of the conditions may be determined to be a yellow pixel, and the output value
Figure pat00028
May be a true value. On the other hand, if it is determined not to be a yellow pixel,
Figure pat00029
May be output as a false value.

도 16은 본 발명의 일 실시 예에 있어서, 픽셀이 노란색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.16 is a graph illustrating a range of RGB channel data values that may be determined as being a yellow pixel according to an embodiment of the present invention.

녹색 픽셀 검출부(850)는 노란색 픽셀 검출부(840)에 의해 노란색에 해당하는 것으로 판단된 픽셀 중에서 픽셀의 RGB 채널 데이터 값을 이용하여 픽셀값이 녹색에 해당되는지 판단할 수 있다. 이때, 녹색 픽셀 검출부(840)는 이하 수학식 7을 이용하여 픽셀이 녹색 픽셀에 해당되는지 결정할 수 있다. 상기 결정에 따라 녹색 픽셀 검출부(850)는 True 또는 False 값을 출력할 수 있다.The green pixel detector 850 may determine whether the pixel value corresponds to green using the RGB channel data value of the pixel among the pixels determined to be yellow by the yellow pixel detector 840. In this case, the green pixel detector 840 may determine whether the pixel corresponds to the green pixel by using Equation 7 below. According to the determination, the green pixel detector 850 may output a True or False value.

Figure pat00030
Figure pat00030

수학식 7에서

Figure pat00031
는 픽셀의 RGB 채널 데이터 값의 R 채널 값 및 B 채널 값 중 더 큰 값을 의미하며,
Figure pat00032
는 합집합을 의미한다.In equation (7)
Figure pat00031
Means the larger of the R channel value and B channel value of the RGB channel data value of the pixel.
Figure pat00032
Means union.

수학식 7에서

Figure pat00033
,
Figure pat00034
,
Figure pat00035
,
Figure pat00036
,
Figure pat00037
=1의 조건을 모두 만족하는 픽셀이 녹색 픽셀인 것으로 결정될 수 있고, 출력되는 값
Figure pat00038
는 true 일 수 있다. 반면, 녹색 픽셀이 아닌 것으로 결정되는 경우,
Figure pat00039
은 false 값으로 출력될 수 있다.In equation (7)
Figure pat00033
,
Figure pat00034
,
Figure pat00035
,
Figure pat00036
,
Figure pat00037
The pixel that satisfies all the conditions of = 1 may be determined to be a green pixel, and the output value
Figure pat00038
May be true. On the other hand, if it is determined not to be a green pixel,
Figure pat00039
May be output as a false value.

도 17은 본 발명의 일 실시 예에 있어서, 픽셀이 녹색 픽셀인 것으로 결정될 수 있는 RGB 채널 데이터 값의 범위를 그래프로 나타낸 것이다.FIG. 17 is a graph illustrating a range of RGB channel data values that may be determined to be a green pixel according to an embodiment of the present invention.

다시 도 7에 대한 설명을 계속하면, 도 7의 휘도 변화도 검출부(724)는 휘도 검출부(722)에 의해 검출된 각 픽셀의 휘도(Y) 값을 이용하여 각 픽셀의 휘도값의 변화도를 검출할 수 있다. 이때, 각 픽셀의 휘도값의 변화도(

Figure pat00040
)는 커널
Figure pat00041
를 이용하여 각 픽셀의 휘도값 Y를 필터링함으로써 검출될 수 있다. 7, the luminance gradient detector 724 of FIG. 7 uses the luminance Y value of each pixel detected by the luminance detector 722 to calculate the gradient of the luminance value of each pixel. Can be detected. At this time, the degree of change in the luminance value of each pixel (
Figure pat00040
) The kernel
Figure pat00041
It can be detected by filtering the luminance value Y of each pixel using.

자세히 설명하면, 1 X 7의 배열의 픽셀에서 커널을 이용하여 계산된 각 값의 평균값이 각 픽셀의 휘도값의 변화도(

Figure pat00042
)가 될 수 있다. In detail, the average value of each value calculated using the kernel in the pixels of the array of 1 X 7 is the degree of change in the luminance value of each pixel (
Figure pat00042
Can be

통계학적 분석부(725)는 픽셀별 컬러 성분 특성 검출부(720)로 수신된 하나의 프레임에 포함된 픽셀들의 컬러 성분 특성에 따라 상기 프레임의 특성을 분석할 수 있다. 통계학적 분석부(725)는 픽셀 분류부(723)에 의해 검출된 각 픽셀의 분류된 특성과 휘도 변화도 검출부(724)에 의해 검출된 각 픽셀의 휘도값의 변화도를 이용하여 프레임의 특성을 분석할 수 있다. 이때, 프레임의 특성은 10가지로 분류될 수 있으며, 10가지의 특성은 녹색 픽셀의 수(F1), 피부색 픽셀의 수(F2), 평균 휘도값(F3), 녹색 픽셀의 휘도 값의 변화도의 평균(F4), 고휘도 및 고채도인 픽셀의 수(F5), 녹색 픽셀의 평균 채도값(F6), 흰색 픽셀의 수(F7), 녹색 픽셀의 평균 밝기값(F8), 녹색 픽셀의 B 채널 값의 평균값(F9) 및 녹색 픽셀들에 대한 휘도 히스토그램의 상대적인 너비값(F10)으로 분류될 수 있다. 그리고, 통계학적 분석부(725)의 출력값은

Figure pat00043
으로 나타낼 수 있다.
Figure pat00044
내지
Figure pat00045
은 아래 수학식 8을 이용하여 검출될 수 있다. 수학식8에서 w 는 프레임의 가로길이, h는 프레임의 세로길이, i, j는 픽셀 좌표값을 의미한다.The statistical analyzer 725 may analyze the characteristics of the frame according to the color component characteristics of the pixels included in one frame received by the pixel component characteristic detector 720 for each pixel. The statistical analyzer 725 uses the classification characteristics of each pixel detected by the pixel classifier 723 and the luminance change of the luminance value of each pixel detected by the luminance detector 724. Can be analyzed. In this case, the characteristics of the frame may be classified into ten types, and the ten characteristics may include the number of green pixels (F1), the number of skin color pixels (F2), the average luminance value (F3), and the luminance value of the green pixels. Average (F4) of, high brightness and high saturation of pixels (F5), green pixel average saturation value (F6), white pixel number (F7), green pixel average brightness value (F8), green pixel B channel The average value F9 of the value and the relative width value F10 of the luminance histogram with respect to the green pixels. And, the output value of the statistical analysis unit 725
Figure pat00043
.
Figure pat00044
To
Figure pat00045
May be detected using Equation 8 below. In Equation 8, w denotes the horizontal length of the frame, h denotes the vertical length of the frame, and i and j denote pixel coordinate values.

수학식 8 중

Figure pat00046
에서
Figure pat00047
은 녹색 픽셀들의 휘도 값에 대한 히스토그램이며, D는 상기 히스토그램 그래프의 너비, 즉, 최소값과 최대값의 차이이다.Equation 8
Figure pat00046
in
Figure pat00047
Is the histogram for the luminance values of the green pixels, and D is the width of the histogram graph, i.e. the difference between the minimum and maximum values.

Figure pat00048
Figure pat00048

도 18은 본 발명의 일 실시 예에 있어서, 녹색 픽셀들의 휘도 값을 그래프로 나타낸 것이다.18 is a graph illustrating luminance values of green pixels according to an embodiment of the present invention.

도 18의 그래프는 가로축을 휘도 값, 세로축을 녹색 픽셀들의 수를 나타낸 것이다. 이때, 녹색 픽셀들 중 휘도 값이 최대인 값에서 최소인 값을 뺀 값을 D로 두고, 녹색 픽셀들의 휘도 값의 평균 값을

Figure pat00049
로 정의할 수 있다.The graph of FIG. 18 shows the luminance value on the horizontal axis and the number of green pixels on the vertical axis. At this time, a value obtained by subtracting the minimum value from the maximum luminance value among the green pixels is set to D, and the average value of the luminance values of the green pixels is set to D.
Figure pat00049
.

또한,

Figure pat00050
Figure pat00051
로 정의될 수 있다. 즉,
Figure pat00052
값이 true이면 1,
Figure pat00053
값이 false 이면 0을 의미할 수 있다.Also,
Figure pat00050
The
Figure pat00051
. ≪ / RTI > In other words,
Figure pat00052
1 if the value is true,
Figure pat00053
If the value is false, it can mean 0.

도 9는 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 장치의 타입 검출부의 구조를 나타낸 블록도이다. 도 9의 타입 검출부(900)는 도 5 및 도 6의 타입 검출부(530, 630)와 대응될 수 있다.9 is a block diagram illustrating a structure of a type detection unit of a content type determination device according to an embodiment of the present invention. The type detector 900 of FIG. 9 may correspond to the type detectors 530 and 630 of FIGS. 5 and 6.

타입 검출부(900)는 타입 결정부 A 내지 타입 결정부 M(901~912, 920)을 포함할 수 있다. 타입 결정부 M(920)는 타입 결정부 A 내지K(901~912)에서 출력된 True 또는 False 값을 이용하여 프레임의 컨텐츠 타입을 결정할 수 있다.The type detector 900 may include a type determiner A to type determiner M 901 to 912 and 920. The type determiner M 920 may determine the content type of the frame using the True or False values output from the type determiners A to K 901 to 912.

타입 결정부 A(901)는 녹색 픽셀의 평균 채도값(F6)과 녹색 픽셀의수(

Figure pat00054
)를 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00055
를 검출할 수 있다. 이때 타입 결정부 A(901)는 이하 수학식 9에 따라
Figure pat00056
를 검출할 수 있다.The type determining unit A 901 determines the average saturation value F6 of the green pixels and the number of green pixels (
Figure pat00054
) To determine the type of content
Figure pat00055
Can be detected. At this time, the type determination unit A 901 according to Equation 9 below.
Figure pat00056
Can be detected.

이때, i, j에는 0~4까지의 정수가 삽입될 수 있으며,

Figure pat00057
Figure pat00058
,
Figure pat00059
,
Figure pat00060
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.In this case, an integer of 0 to 4 may be inserted into i and j,
Figure pat00057
The
Figure pat00058
,
Figure pat00059
,
Figure pat00060
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00061
Figure pat00061

타입 결정부 A(901)는

Figure pat00062
의 값을 출력할 수 있으며, 각 출력값은 True 또는 False 값일 수 있다.Type determination unit A (901)
Figure pat00062
You can output the value of, and each output value can be either True or False.

타입 결정부 B(902)는 평균 휘도값(

Figure pat00063
)을 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00064
을 검출할 수 있다. 이때 타입 결정부 B(902)는 이하 수학식 10을 이용할 수 있다.
Figure pat00065
Figure pat00066
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determining unit B 902 has an average luminance value (
Figure pat00063
) To determine the type of content
Figure pat00064
Can be detected. In this case, the type determiner B 902 may use Equation 10 below.
Figure pat00065
silver
Figure pat00066
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00067
Figure pat00067

타입 결정부 B(902)의 출력값인

Figure pat00068
은 True 또는 False 값일 수 있다.Which is an output value of the type determination unit B
Figure pat00068
Can be a True or False value.

타입 결정부 C(903)는 피부색 픽셀의 수(

Figure pat00069
)를 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00070
를 검출할 수 있다. 이때 타입 결정부 C(903)는 이하 수학식 11를 이용할 수 있다.
Figure pat00071
Figure pat00072
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determiner C 903 indicates the number of skin color pixels (
Figure pat00069
) To determine the type of content
Figure pat00070
Can be detected. In this case, the type determiner C 903 may use Equation 11 below.
Figure pat00071
The
Figure pat00072
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00073
Figure pat00073

타입 결정부 C(903)의 출력값인

Figure pat00074
은 True 또는 False 값일 수 있다.The output value of the type determination unit C (903)
Figure pat00074
Can be a True or False value.

타입 결정부 D(904)는 녹색 픽셀의 휘도 값의 변화도의 평균( )을 이용하여 컨텐츠의 타입 결정에 필요한 인자인

Figure pat00076
를 검출할 수 있다. 이때 타입 결정부 D(904)는 이하 수학식 12를 이용할 수 있다.
Figure pat00077
Figure pat00078
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determining unit D 904 is an average of the degree of change of the luminance value of the green pixel ( ) To determine the type of content
Figure pat00076
Can be detected. In this case, the type determiner D 904 may use Equation 12 below.
Figure pat00077
The
Figure pat00078
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00079
Figure pat00079

타입 결정부 D(904)의 출력값인

Figure pat00080
은 True 또는 False 값일 수 있다.Which is an output value of the type determination unit D
Figure pat00080
Can be a True or False value.

타입 결정부 E(905)는 흰색 픽셀의 수(

Figure pat00081
)를 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00082
를 검출할 수 있다. 이때 타입 결정부 E(905)는 이하 수학식 13을 이용할 수 있다.
Figure pat00083
Figure pat00084
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determiner E 905 indicates the number of white pixels (
Figure pat00081
) To determine the type of content
Figure pat00082
Can be detected. In this case, the type determiner E 905 may use Equation 13 below.
Figure pat00083
The
Figure pat00084
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00085
Figure pat00085

타입 결정부 E(905)의 출력값인

Figure pat00086
은 True 또는 False 값일 수 있다.That is the output value of the type determination unit E
Figure pat00086
Can be a True or False value.

타입 결정부 K(911)는 피부색 픽셀의 수(

Figure pat00087
) 및 고휘도 및 고채도인 픽셀의 수(
Figure pat00088
)를 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00089
를 검출할 수 있다. 이때 타입 결정부 K(911)는 이하 수학식 14를 이용할 수 있다.The type determiner K 911 determines the number of skin color pixels (
Figure pat00087
) And the number of pixels with high brightness and high saturation (
Figure pat00088
) To determine the type of content
Figure pat00089
Can be detected. In this case, the type determiner K 911 may use Equation 14 below.

이때, i, j에는 1 또는 2의 정수가 삽입될 수 있으며,

Figure pat00090
Figure pat00091
,
Figure pat00092
,
Figure pat00093
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.In this case, an integer of 1 or 2 may be inserted into i and j,
Figure pat00090
The
Figure pat00091
,
Figure pat00092
,
Figure pat00093
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00094
Figure pat00094

타입 결정부 K(911)는

Figure pat00095
의 값을 출력할 수 있으며, 각 출력값은 True 또는 False 값일 수 있다.Type determination unit K (911)
Figure pat00095
You can output the value of, and each output value can be either True or False.

타입 결정부 L(912)는 평균 휘도값(

Figure pat00096
) 및 고휘도 및 고채도인 픽셀의 수(
Figure pat00097
)를 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00098
을 검출할 수 있다. 이때 타입 결정부 E(905)는 이하 수학식 15를 이용할 수 있다.
Figure pat00099
Figure pat00100
Figure pat00101
는 미리 결정된상수로서 임의로 결정될 수 있다.The type determining unit L912 has an average luminance value (
Figure pat00096
) And the number of pixels with high brightness and high saturation (
Figure pat00097
) To determine the type of content
Figure pat00098
Can be detected. In this case, the type determiner E 905 may use Equation 15 below.
Figure pat00099
Figure pat00100
And
Figure pat00101
May be arbitrarily determined as a predetermined constant.

Figure pat00102
Figure pat00102

타입 결정부 L(912)의 출력값인

Figure pat00103
은 True 또는 False 값일 수 있다.Which is an output value of the type determination unit L 912
Figure pat00103
Can be a True or False value.

타입 결정부 F(906)는 고휘도 및 고채도인 픽셀의 수(

Figure pat00104
)를 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00105
를 검출할 수 있다. 이때 타입 결정부 F(906)는 이하 수학식 16을 이용할 수 있다.
Figure pat00106
Figure pat00107
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determining unit F 906 is a number of pixels having high brightness and high saturation (
Figure pat00104
) To determine the type of content
Figure pat00105
Can be detected. In this case, the type determiner F 906 may use Equation 16 below.
Figure pat00106
The
Figure pat00107
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00108
Figure pat00108

타입 결정부 F(906)의 출력값인

Figure pat00109
은 True 또는 False 값일 수 있다.The output value of the type determination unit F (906)
Figure pat00109
Can be a True or False value.

타입 결정부 G(907)는 녹색 픽셀의 평균 밝기값(

Figure pat00110
)을 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00111
을 검출할 수 있다. 이때 타입 결정부 G(907)는 이하 수학식 17을 이용할 수 있다.
Figure pat00112
Figure pat00113
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determiner G 907 denotes an average brightness value of the green pixel (
Figure pat00110
) To determine the type of content
Figure pat00111
Can be detected. In this case, the type determiner G 907 may use Equation 17 below.
Figure pat00112
The
Figure pat00113
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00114
Figure pat00114

타입 결정부 G(907)의 출력값인

Figure pat00115
은 True 또는 False 값일 수 있다.Which is an output value of the type determination unit G (907)
Figure pat00115
Can be a True or False value.

타입 결정부 H(908)는 녹색 픽셀의 평균 밝기값(

Figure pat00116
)을 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00117
을 검출할 수 있다. 이때 타입 결정부 H(908)는 이하 수학식 18을 이용할 수 있다.
Figure pat00118
Figure pat00119
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determiner H 908 stores an average brightness value of the green pixel (
Figure pat00116
) To determine the type of content
Figure pat00117
Can be detected. In this case, the type determiner H 908 may use Equation 18 below.
Figure pat00118
silver
Figure pat00119
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00120
Figure pat00120

타입 결정부 H(908)의 출력값인

Figure pat00121
는 True 또는 False 값일 수 있다.Which is an output value of the type determination unit H 908
Figure pat00121
Can be a True or False value.

타입 결정부 I(909)는 녹색 픽셀의 B 채널 값의 평균값(

Figure pat00122
)을 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00123
을 검출할 수 있다. 이때 타입 결정부 I(909)는 이하 수학식 19를 이용할 수 있다.
Figure pat00124
Figure pat00125
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determiner I 909 stores the average value of the B channel values of the green pixels (
Figure pat00122
) To determine the type of content
Figure pat00123
Can be detected. In this case, the type determiner I 909 may use Equation 19 below.
Figure pat00124
silver
Figure pat00125
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00126
Figure pat00126

타입 결정부 I(909)의 출력값인

Figure pat00127
는 True 또는 False 값일 수 있다.Which is an output value of the type determination unit I 909
Figure pat00127
Can be a True or False value.

타입 결정부 J(910)는 녹색 픽셀들에 대한 휘도 히스토그램의 너비값(

Figure pat00128
)을 이용하여 컨텐츠의 타입 결정에 필요한 인자인
Figure pat00129
을 검출할 수 있다. 이때 타입 결정부 J(910)는 이하 수학식 20을 이용할 수 있다.
Figure pat00130
Figure pat00131
의 조건을 만족하는 미리 결정된 상수로서 임의로 결정될 수 있다.The type determiner J 910 is a width value of the luminance histogram for the green pixels (
Figure pat00128
) To determine the type of content
Figure pat00129
Can be detected. In this case, the type determination unit J 910 may use Equation 20 below.
Figure pat00130
silver
Figure pat00131
It may be arbitrarily determined as a predetermined constant that satisfies the condition of.

Figure pat00132
Figure pat00132

타입 결정부 J(910)의 출력값인

Figure pat00133
는 True 또는 False 값일 수 있다.Which is an output value of the type determination unit J
Figure pat00133
Can be a True or False value.

타입 결정부 M(920)은 타입 결정부 A 내지 타입 결정부 J(901~910)의 출력값인

Figure pat00134
,
Figure pat00135
,
Figure pat00136
,
Figure pat00137
,
Figure pat00138
,
Figure pat00139
,
Figure pat00140
,
Figure pat00141
,
Figure pat00142
,
Figure pat00143
,
Figure pat00144
Figure pat00145
을 이용하여 프레임의 컨텐츠 타입이 필드 게임인지 여부(R)를 검출할 수 있다. 이때 타입 결정부 M(920)는 이하 수학식 21을 이용할 수 있다. The type determiner M 920 is an output value of the type determiner A to type determiner J 901 to 910.
Figure pat00134
,
Figure pat00135
,
Figure pat00136
,
Figure pat00137
,
Figure pat00138
,
Figure pat00139
,
Figure pat00140
,
Figure pat00141
,
Figure pat00142
,
Figure pat00143
,
Figure pat00144
And
Figure pat00145
R may be detected whether the content type of the frame is a field game. In this case, the type determination unit M 920 may use Equation 21 below.

Figure pat00146
Figure pat00146

타입 결정부 M(920)의 출력값인 R은 True 또는 False 값일 수 있다. 즉, R 값이 True이면 컨텐츠의 프레임은 필드 게임인 것으로 결정되고, False이면 컨텐츠의 프레임은 필드 게임이 아닌 것으로 결정될 수 있다.R, which is an output value of the type determination unit M 920, may be a True or False value. That is, when the R value is True, the frame of the content may be determined to be a field game, and when the R value is False, the frame of the content may be determined not to be a field game.

도 10은 본 발명의 다른 실시 예에 의한 컨텐츠 타입 결정 장치의 씬 변경 검출부의 구조를 나타낸 블록도이다. 도 10의 씬 변경 검출부(1000)는 도 6의 씬 변경 검출부(640)와 대응될 수 있다.10 is a block diagram illustrating a structure of a scene change detection unit of a content type determination device according to another embodiment of the present invention. The scene change detector 1000 of FIG. 10 may correspond to the scene change detector 640 of FIG. 6.

씬 변경 검출부(100)는 클러스터화 모듈(clusterization block)(1010), 지연 모듈(delay line)(1020, 1030), 최소값 추출 모듈(1040), 최대값 추출 모듈(1050), 증폭 모듈(gain block)(1060) 및 뺄셈 모듈(substractor)(1070) 및 판단 모듈(1080)을 포함할 수 있다.The scene change detection unit 100 may include a clustering block 1010, delay lines 1020 and 1030, a minimum value extraction module 1040, a maximum value extraction module 1050, and an amplification module. ) 1060, a subtractor module 1070, and a determination module 1080.

클러스터화 모듈(1010)은 각 픽셀의 RGB 채널 데이터 값에 따라 하나 이상의 픽셀들을 분류함으로써 클러스터화하고, 클러스터된 픽셀 중 클러스터 센터(cluster center)를 이용하여 씬 변경 여부 판단에 이용될 수 있는 에러(cumulative error)를 검출할 수 있다. 클러스터의 수가

Figure pat00147
일 때, 클러스터 센터들(cluster centers),
Figure pat00148
는 수학식 22와 같이 나타낼 수 있다.The clustering module 1010 clusters one or more pixels according to the RGB channel data values of each pixel and clusters them, and uses an error that may be used to determine whether to change the scene using a cluster center among the clustered pixels. cumulative error) can be detected. Number of clusters
Figure pat00147
Cluster centers,
Figure pat00148
May be expressed as in Equation 22.

Figure pat00149
Figure pat00149

수학식 22에서

Figure pat00150
,
Figure pat00151
,
Figure pat00152
는 클러스터 1의 클러스터 센터인 픽셀의 RGB 채널 데이터 값일 수 있다. 클러스터 센터는 하나의 클러스터에 속하는 픽셀 중 하나일 수 있다.In Equation 22
Figure pat00150
,
Figure pat00151
,
Figure pat00152
May be an RGB channel data value of a pixel that is the cluster center of cluster 1. FIG. The cluster center may be one of the pixels belonging to one cluster.

클러스터화 모듈(1010)은 각 픽셀의 클러스터 센터를 이용하여 씬 변경 여부 판단에 이용될 수 있는 에러(cumulative error, E)를 이하 수학식 23과 같이 검출할 수 있다.The clustering module 1010 may detect an error (cumulative error, E) that may be used to determine whether to change the scene using the cluster center of each pixel, as shown in Equation 23 below.

Figure pat00153
Figure pat00153

한편, 갱신된 클러스터 센터들(

Figure pat00154
)은 수학식24와 같이 나타낼 수 있다. 클러스터화 모듈(101)은 갱신된 클러스터 센터들을 씬 변경 여부 판단에 이용될 수 있는 에러(cumulative error, E)를 구하는 데에 이용할 수 있다. 즉, 클러스터화 모듈(101)은 수학식 23에 따라 다음 프레임의 픽셀들에 대한 에러(E)를 갱신된 클러스터 센터들을 이용하여 구할 수 있다.Meanwhile, the updated cluster centers (
Figure pat00154
) May be expressed as in Equation 24. The clustering module 101 may use the updated cluster centers to obtain a cumulative error (E) that can be used to determine whether to change the scene. That is, the clustering module 101 can obtain the error E for the pixels of the next frame using the updated cluster centers according to Equation 23.

Figure pat00155
Figure pat00155

씬 변경 검출부(1000)는 씬 변경 검출여부를 판단하기 위하여 다음 프레임의 에러값과 이전 프레임의 에러값을 이용할 수 있다.The scene change detection unit 1000 may use the error value of the next frame and the error value of the previous frame to determine whether the scene change is detected.

지연 모듈(1030)은 클러스터화 모듈(1010)로부터 수신한 이전 프레임의 에러(E)값을 저장해두고 최소값 추출 모듈(1040) 및 최대값 추출 모듈(1050)로 출력할 수 있다.The delay module 1030 may store the error E value of the previous frame received from the clustering module 1010 and output the same to the minimum value extraction module 1040 and the maximum value extraction module 1050.

최소값 추출 모듈(1040)은 다음 프레임의 에러값과 이전 프레임의 에러값 중 더 작은 값(E_min)을 출력하고, 최대값 추출 모듈(1050)은 다음 프레임의 에러값과 이전 프레임의 에러값 중 더 큰 값(E_max)을 출력할 수 있다. 증폭 모듈(gain block)(1060)은 입력되는 값에 1보다 큰 상수를곱하여 출력할 수 있고, 뺄셈 모듈(substractor)(1070)은 입력되는 값을 이용하여 뺄셈을 수행하고 그 결과값을 출력할 수 있다.The minimum value extraction module 1040 outputs a smaller value E_min between an error value of the next frame and an error value of the previous frame, and the maximum value extraction module 1050 further outputs an error value of the error value of the next frame and the previous frame. A large value E_max can be output. Amplification module (gain block) 1060 may multiply the input value by a constant greater than 1, and the subtraction module 1070 may perform subtraction using the input value and output the result value. Can be.

판단 모듈(1080)은 E_max-a*E_min 값을 소정값과 비교 판단함으로써 씬 변경 검출여부를 판단할 수 있다. * 는 곱셈(multiply)을 의미하고, a는 1보다 큰 상수이다. 예를 들면, E_max-a*E_min 값이 소정값보다 작으면, 씬이 변경되지 않은 것으로 판단될 수 있다. 판단 모듈(1080)은 씬 변경 여부에 따라 True 또는 False 값을 출력할 수 있다.The determination module 1080 may determine whether the scene change is detected by comparing the E_max-a * E_min value with a predetermined value. * Means multiply, a is a constant greater than 1. For example, when the value of E_max-a * E_min is smaller than the predetermined value, it may be determined that the scene has not been changed. The determination module 1080 may output a True or False value depending on whether the scene is changed.

도 11은 본발명의 다른 실시 예에 의한 컨텐츠 타입 결정 장치의 최종 타입 검출부의 구조를 나타낸 블록도이다. 도 11의 최종 타입 검출부(1100)는 도 6의 최종 타입 검출부(650)와 대응될 수 있다.11 is a block diagram illustrating a structure of a final type detection unit of a content type determination device according to another embodiment of the present invention. The final type detector 1100 of FIG. 11 may correspond to the final type detector 650 of FIG. 6.

최종 타입 검출부(1100)는 논리합 블록(disjunction block)(1110), 스위치(1120) 및 지연 유닛(delay line)(1130)을 포함할 수 있다.The final type detector 1100 may include a disjunction block 1110, a switch 1120, and a delay line 1130.

논리합 모듈(1110)은 입력된 값에 True값이 포함되어 있으면 True값을 출력할 수 있고, 지연 유닛(1130)은 이전 프레임에 대하여 검출된 타입 값(1160)을 저장해두고, 현재 프레임에 대하여 타입 값을 검출할 때 저장된 값을 출력할 수 있다.The OR module 1110 may output a True value if the input value includes the True value, and the delay unit 1130 stores the type value 1160 detected for the previous frame, and stores the type for the current frame. When the value is detected, the stored value can be output.

스위치(1120)는 씬 변경 여부를 나타내는 값(1150)에 따라 현재 프레임의 컨텐츠 타입을 검출하여 출력할 수 있다. 씬 변경 여부를 나타내는 값(1150)은 True 또는 False값이 될 수 있고, True가 씬이 변경되었을 때, False를 씬이 변경되지 않았을 때 출력되는 값일 수 있다. 스위치(1120)는 씬 변경 여부를 나타내는 값(1150)이 True이면, 현재 프레임에 대하여 검출된 타입 값(1140)을 출력하고, 씬 변경 검출부(640)의 출력값(1150)이 False이면, 이전 프레임에 대하여 검출된 타입 값(1160)을 출력할 수 있다.The switch 1120 may detect and output the content type of the current frame according to a value 1150 indicating whether the scene is changed. The value 1150 indicating whether the scene is changed may be True or False, and when True is changed, False may be a value that is output when the scene is not changed. The switch 1120 outputs the detected type value 1140 for the current frame when the value 1150 indicating whether or not the scene is changed is true, and the previous frame when the output value 1150 of the scene change detection unit 640 is False. For example, the detected type value 1160 may be output.

도 12는 본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 시스템을 나타낸 블록도이다.12 is a block diagram illustrating a content type determination system according to an embodiment of the present invention.

본 발명의 일 실시 예에 의한 컨텐츠 타입 결정 시스템은 수신기(receiver)(1220), 프레임 버퍼(frame buffer)(1230), 비디오 강화 블록(video enhancement block)(1240), 필드 게임 검출부(field game episodes detector)(1250), 최적화 블록(adaptation block)(1260) 및 디스플레이부(display unit)(1270)을 포함할 수 있다.Content type determination system according to an embodiment of the present invention is a receiver (1220), frame buffer (frame buffer) 1230, video enhancement block (video enhancement block) 1240, field game detection unit (field game episodes) It may include a detector 1250, an adaptation block 1260, and a display unit 1270.

수신기(1220)는 외부로부터 비디오 컨텐츠(1210)를 수신하여 출력할 수 있다. The receiver 1220 may receive and output the video content 1210 from the outside.

프레임 버퍼(1230)는 수신기(1220)로부터 수신한 비디오 컨텐츠(1210)를 저장해두고 1 프레임씩 출력할 수 있다. The frame buffer 1230 may store the video content 1210 received from the receiver 1220 and output one frame at a time.

비디오 강화 블록(1240)은 프레임 버퍼(1230)로부터 수신한 비디오 컨텐츠를 처리할 수 있다. 예를 들면, 비디오 강화 블록(1240)은 비디오 컨텐츠의 노이즈 제거(noise reduction), 대비 강화(contrast enhancement) 또는 선명화(sharpening)를 수행할 수 있다.The video enhancement block 1240 can process the video content received from the frame buffer 1230. For example, the video enhancement block 1240 can perform noise reduction, contrast enhancement, or sharpening of the video content.

필드 게임 검출부(1250)는 수신기(1220)로부터 수신한 비디오 컨텐츠(1210)를 이용하여 프레임별로 필드 게임인지 여부를 판단하여 각 프레임의 컨텐츠 타입을 검출할 수 있다. 이때 필드 게임 검출부(1250)가 각 프레임의 컨텐츠 타입을 검출하는 방법에는 앞서 상술된 컨텐츠 타입 결정 장치(500, 600)에 의한 컨텐츠 타입 결정 방법이 적용될 수 있다.The field game detector 1250 may detect the content type of each frame by determining whether the game is a field game for each frame using the video content 1210 received from the receiver 1220. In this case, the method for detecting the content type of each frame by the field game detection unit 1250 may be applied to the method of determining the content type by the content type determination apparatus 500 or 600 described above.

최적화 블록(1260)은 필드 게임 검출부(1250)에 의해 검출된 컨텐츠 타입에 따라 비디오 강화 블록(1240)이 비디오 컨텐츠를 처리할 수 있도록, 비디오 컨텐츠 처리에 필요한 정보를 비디오 강화 블록(1240)에 제공할 수 있다.The optimization block 1260 provides the video enhancement block 1240 with information necessary for processing the video content so that the video enhancement block 1240 can process the video content according to the content type detected by the field game detection unit 1250. can do.

디스플레이부(1270)는 비디오 강화 블록(1240)에 의해 처리된 비디오 컨텐츠를 디스플레이할 수 있다.The display 1270 may display video content processed by the video enhancement block 1240.

본 발명의 일 실시 예에 의하면, 프레임 별로 컨텐츠 타입을 결정할 수 있으므로, 실시간으로 컨텐츠 타입의 결정이 가능하다.According to an embodiment of the present disclosure, since the content type may be determined for each frame, the content type may be determined in real time.

본 발명의 일 실시 예에 의하면, 사람(human)의 인식과 동일한 수준으로 비디오 컨텐츠의 컨텐츠 타입을 결정할 수 있다.According to an embodiment of the present invention, the content type of the video content may be determined at the same level as human recognition.

본 발명의 일 실시 예에 의하면, 비디오 컨텐츠의 컨텐츠 타입을 결정하는데 사용되는 수식들(functions)이 선형적(linear)이고, 논리적(logical)이므로 단순하고, 빠르게 구동될 수 있으므로, 프레임별로 실시간으로(in real time) 컨텐츠 타입이 결정될 수 있다.According to an embodiment of the present invention, since the functions used to determine the content type of the video content are linear and logical, they can be driven simply and quickly. (in real time) The content type may be determined.

본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터(정보 처리 기능을 갖는 장치를 모두 포함한다)가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장 장치 등이 있다.The present invention can be embodied as code that can be read by a computer (including all devices having an information processing function) in a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of computer-readable recording devices include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage, and the like.

비록 상기 설명이 다양한 실시예들에 적용되는 본 발명의 신규한 특징들에 초점을 맞추어 설명되었지만, 본 기술 분야에 숙달된 기술을 가진 사람은 본 발명의 범위를 벗어나지 않으면서도 상기 설명된 장치 및 방법의 형태 및 세부 사항에서 다양한 삭제, 대체, 및 변경이 가능함을 이해할 것이다. 따라서, 본 발명의 범위는 상기 설명에서보다는 첨부된 특허청구범위에 의해 정의된다. 특허청구범위의 균등 범위 안의 모든 변형은 본 발명의 범위에 포섭된다.
Although the foregoing description has been focused on the novel features of the invention as applied to various embodiments, those skilled in the art will appreciate that the apparatus and method described above without departing from the scope of the invention. It will be understood that various deletions, substitutions, and changes in form and detail of the invention are possible. Accordingly, the scope of the invention is defined by the appended claims rather than in the foregoing description. All modifications within the scope of equivalents of the claims are to be embraced within the scope of the present invention.

Claims (17)

비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법에 있어서,
상기 비디오 컨텐츠의 프레임을 수신하는 단계;
상기 수신한 프레임의 픽셀별 컬러 성분 특성을 검출하는 단계; 및
상기 검출한 픽셀별 컬러 성분 특성에 따라 상기 수신한 프레임이 소정 장르의 씬을 재생하는 컨텐츠를 포함하는지를 나타내는 컨텐츠 타입을 결정하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
In the method of determining the content type of the video content,
Receiving a frame of the video content;
Detecting color component characteristics of each pixel of the received frame; And
And determining a content type indicating whether the received frame includes content for reproducing a scene of a predetermined genre according to the detected color component characteristic of each pixel.
제1항에 있어서,
상기 수신한 프레임과 이전 프레임이 동일한 씬인 경우, 이전 프레임의 결정된 컨텐츠 타입에 따라 상기 수신한 프레임의 컨텐츠 타입을 결정하는 단계를 더 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 1,
If the received frame and the previous frame are the same scene, determining the content type of the received frame according to the determined content type of the previous frame.
제1항에 있어서, 상기 수신한 프레임의 픽셀별 컬러 성분 특성을 검출하는 단계는
상기 수신한 프레임에 포함된 복수 개의 픽셀의 휘도와 채도를 검출하는 단계;
상기 검출된 휘도 및 채도와 각 픽셀의 RGB 채널 값을 이용하여 픽셀별 컬러 성분 특성을 검출하는 단계;
상기 검출된 휘도값을 이용하여 각 픽셀의 휘도의 변화도를 검출하는 단계; 및
상기 검출된 각 픽셀의 휘도의 변화도와 픽셀별 컬러 성분 특성을 이용하여 상기 수신한 프레임의 통계학적 분석값을 검출하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 1, wherein the detecting of the color component characteristic of each pixel of the received frame comprises:
Detecting luminance and saturation of a plurality of pixels included in the received frame;
Detecting color component characteristics of each pixel using the detected luminance and saturation and RGB channel values of each pixel;
Detecting a degree of change in luminance of each pixel by using the detected luminance value; And
And detecting a statistical analysis value of the received frame by using the detected change in luminance of each pixel and color component characteristic of each pixel.
제3항에 있어서, 상기 수신한 프레임의 통계학적 분석값을 검출하는 단계는
상기 수신한 프레임에 포함된 픽셀의 통계학적 분석값을 검출하는 단계; 및
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 픽셀의 통계학적 분석값을 검출하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 3, wherein detecting the statistical analysis value of the received frame comprises:
Detecting a statistical analysis value of a pixel included in the received frame; And
And detecting a statistical analysis value of a pixel of which the color component characteristic of each pixel among the received frames is green.
제4항에 있어서, 상기 수신한 프레임에 포함된 픽셀의 통계학적 분석값을 검출하는 단계는
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율을 검출하는 단계;
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율을 검출하는 단계;
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율을 검출하는 단계; 및
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율을 검출하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 4, wherein detecting the statistical analysis value of the pixel included in the received frame comprises:
Detecting a ratio of pixels whose color component characteristic of each pixel of the received frame is white;
Detecting a ratio of pixels having high luminance and high saturation of color component characteristics of the received frame;
Detecting a ratio of pixels in which the color component characteristic of each pixel of the received frame is green; And
And detecting a ratio of pixels whose color component characteristic of each pixel of the received frame is skin color.
제4항에 있어서, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 픽셀의 통계학적 분석값을 검출하는 단계는
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 휘도값을 검출하는 단계;
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 채도값을 검출하는 단계;
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 B 채널 값을 검출하는 단계;
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 휘도 변화값을 검출하는 단계; 및
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 G 채널에 대한 히스토그램을 검출하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 4, wherein the detecting of the statistical analysis value of the pixel of which the color component characteristic of each pixel of the received frame is green is performed.
Detecting an average luminance value of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green;
Detecting an average saturation value of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green;
Detecting an average B channel value of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green;
Detecting an average luminance change value of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green; And
And detecting a histogram of a G channel of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green.
제1항에 있어서, 상기 분석한 특징에 따라 상기 수신한 프레임의 컨텐츠 타입을 결정하는 단계는
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이하인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이하인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 B 채널의 평균값이 기준값 이상인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값 또는 평균 휘도값이 기준값 이하인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 제1 기준값과 제2 기준값 사이의 값이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 히스토그램에서 그래프의 폭이 기준값 이상인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 히스토그램에서 그래프의 폭이 기준값 이하인 경우 및
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 휘도의 평균 변화값이 기준값 이하인 경우 중에서
적어도 하나에 해당하는 경우, 상기 수신한 프레임의 컨텐츠 타입은 필드 게임이 아닌 것으로 결정하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 1, wherein determining the content type of the received frame according to the analyzed feature
When the ratio of the pixel for which the color component characteristic of each pixel of the received frame is green is less than or equal to the reference value,
When the average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is less than or equal to a reference value,
When the average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is less than or equal to the reference value, and the average value of the B channel of the pixel whose color component characteristic of the pixel of the received frame is green is greater than or equal to the reference value,
When the average color saturation value or the average luminance value of the pixel whose color component characteristic of the received frame is green is less than or equal to the reference value,
In the histogram of a pixel in which the average saturation value of the pixel whose color component characteristic of the received frame is green is a value between a first reference value and a second reference value, and the color component characteristic of the pixel of the received frame is green, If the width is above the reference value,
The average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the width of the graph is less than or equal to the reference value in the histogram of the pixel whose color component characteristic of the pixel of the received frame is green; and
In the case where the average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the average change value of the luminance of the pixel whose color component characteristic of the pixel of the received frame is green is less than or equal to the reference value.
If the at least one, the content type of the received frame comprises the step of determining that it is not a field game.
제1항에 있어서, 상기 분석한 특징에 따라 상기 수신한 프레임의 컨텐츠 타입을 결정하는 단계는
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율 또는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율이 기준값 이하인 경우 및
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율 또는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율이 기준값 이하인 경우 중에서
적어도 하나에 해당하는 경우, 상기 수신한 프레임의 컨텐츠 타입은 필드 게임인 것으로 결정하는 단계를 포함하는 것을 특징으로 하는 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법.
The method of claim 1, wherein determining the content type of the received frame according to the analyzed feature
The ratio of the pixel whose color component characteristic of each pixel of the received frame is green is less than or equal to the reference value, and the ratio of the pixel whose color component characteristic of each pixel of the received frame is high luminance and high saturation is greater than or equal to the reference value, and the pixel of the received frame The ratio of pixels having a white color component characteristic or a pixel whose skin component color is a color component characteristic of the received frame is less than or equal to the reference value; and
The ratio of the pixel whose color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the ratio of the pixel whose color component characteristic of the received frame is high luminance and high saturation is less than or equal to the reference value, and the pixel of the received frame The ratio of pixels having a white color component characteristic or a pixel whose skin component color is a color component characteristic of the received frame is equal to or less than a reference value.
If the at least one, the content type of the received frame comprises the step of determining that the content type of the video content characterized in that it comprises a field game.
비디오 컨텐츠의 프레임을 수신하는 프레임 버퍼;
상기 수신한 프레임의 픽셀별 컬러 성분 특성을 검출하는 픽셀별 컬러 성분 특성 검출부;
상기 검출한 픽셀별 컬러 성분 특성에 따라 상기 수신한 프레임이 소정 장르의 씬을 재생하는 컨텐츠를 포함하는지를 나타내는 컨텐츠 타입을 결정하는 타입 검출부를 포함하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
A frame buffer for receiving a frame of video content;
A color component characteristic detection unit for each pixel detecting a color component characteristic for each pixel of the received frame;
And a type detection unit for determining a content type indicating whether the received frame includes content for reproducing a scene of a predetermined genre according to the detected color component characteristic of each pixel.
제9항에 있어서, 상기 컨텐츠 타입 결정 장치는
상기 수신한 프레임과 이전 프레임이 변경되었는지 여부를 출력하는 씬 변경 검출부; 및
상기 씬 변경 검출부의 출력값에 따라, 이전 프레임의 결정된 컨텐츠 타입 또는 상기 검출한 픽셀별 컬러 성분 특성에 따라 결정된 컨텐츠 타입을 상기 수신한 프레임의 컨텐츠 타입으로 결정하는 최종 타입 검출부를 더 포함하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
The apparatus of claim 9, wherein the content type determination device is
A scene change detector configured to output whether the received frame and the previous frame have been changed; And
And a final type detector configured to determine, as the content type of the received frame, the content type determined according to the determined content type of the previous frame or the detected color component characteristic of each pixel according to the output value of the scene change detector. Device for determining the content type.
제9항에 있어서, 상기 픽셀별 컬러 성분 특성 검출부는
상기 수신한 프레임에 포함된 복수 개의 픽셀의 휘도를 검출하는 휘도 검출부;
상기 수신한 프레임에 포함된 복수 개의 픽셀의 채도를 검출하는 채도 검출부;
상기 검출된 휘도 및 채도와 상기 복수 개의 픽셀값을 이용하여 픽셀별 컬러 성분 특성을 검출하는 픽셀 분류부;
상기 검출된 상기 복수개의 픽셀의 휘도값을 이용하여 각 픽셀의 휘도의 변화도를 검출하는 휘도 변화도 검출부; 및
상기 검출된 각 픽셀의 휘도의 변화도와 상기 픽셀 분류부에 의해 검출된 픽셀별 컬러 성분 특성을 이용하여 상기 수신한 프레임의 통계학적 분석값을 검출하는 통계학적 분석부를 포함하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
10. The method of claim 9, wherein the color component characteristic detection unit for each pixel
A luminance detector detecting luminance of a plurality of pixels included in the received frame;
A saturation detector configured to detect saturation of a plurality of pixels included in the received frame;
A pixel classifier configured to detect color component characteristics of each pixel using the detected luminance and saturation and the plurality of pixel values;
A luminance change detector detecting a change in luminance of each pixel by using the detected luminance values of the plurality of pixels; And
And a statistical analyzer configured to detect a statistical analysis value of the received frame using the change in luminance of each detected pixel and the color component characteristic of each pixel detected by the pixel classifier. Crystal device.
제11항에 있어서, 상기 통계학적 분석부는
상기 수신한 프레임에 포함된 픽셀의 통계학적 분석값을 검출하고, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 픽셀의 통계학적 분석값을 검출하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
The method of claim 11, wherein the statistical analysis unit
And detecting a statistical analysis value of a pixel included in the received frame and detecting a statistical analysis value of a pixel of which the color component characteristic of each pixel is green among the received frames.
제12항에 있어서, 상기 통계학적 분석부는
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율을 검출하고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 높은 휘도 및 채도인 픽셀의 비율을 검출하고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율을 검출하고, 상기 수신한 프레임의 피부색 픽셀의 비율을 검출하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
The method of claim 12, wherein the statistical analysis unit
Detects the ratio of the pixel whose color component characteristic of each pixel of the received frame is white, Detects the ratio of pixels having high luminance and saturation of the color component characteristic of each pixel of the received frame, and Per pixel of the received frame And detecting a ratio of pixels having a color component characteristic of green and a ratio of pixels of a skin color of the received frame.
제12항에 있어서, 상기 통계학적 분석부는
상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 휘도 값을 검출하고, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 채도값을 검출하고, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 B 채널 값을 검출하고, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 평균 휘도 변화값을 검출하고, 상기 수신한 프레임 중 픽셀별 컬러 성분 특성이 녹색인 복수 개의 픽셀의 G 채널에 대한 히스토그램을 검출하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
The method of claim 12, wherein the statistical analysis unit
Detects an average luminance value of a plurality of pixels of which the color component characteristic of each pixel is green among the received frames, and detects an average saturation value of a plurality of pixels of which the color component characteristic of each pixel among the received frames is green, and receives the received signal. Detects an average B channel value of a plurality of pixels whose color component characteristics are green in one frame, detects an average luminance change value of a plurality of pixels whose color component characteristics are green in the received frame, and receives the received signal. And a histogram for a G channel of a plurality of pixels whose color component characteristic of each pixel is green in one frame.
제9항에 있어서, 상기 컨텐츠 타입 결정부는
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이하인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이하인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 B 채널의 평균값이 기준값 이상인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값 또는 평균 휘도값이 기준값 이하인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 제1 기준값과 제2 기준값 사이의 값이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 히스토그램에서 그래프의 폭이 기준값 이상인 경우,
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 히스토그램에서 그래프의 폭이 기준값 이하인 경우 및
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 평균 채도값이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 휘도의 평균 변화값이 기준값 이하인 경우 중에서
적어도 하나에 해당하는 경우, 상기 수신한 프레임의 컨텐츠 타입은 필드 게임이 아닌 것으로 결정하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
The method of claim 9, wherein the content type determination unit
When the ratio of the pixel for which the color component characteristic of each pixel of the received frame is green is less than or equal to the reference value,
When the average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is less than or equal to a reference value,
When the average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is less than or equal to the reference value, and the average value of the B channel of the pixel whose color component characteristic of the pixel of the received frame is green is greater than or equal to the reference value,
When the average color saturation value or the average luminance value of the pixel whose color component characteristic of the received frame is green is less than or equal to the reference value,
In the histogram of a pixel in which the average saturation value of the pixel whose color component characteristic of the received frame is green is a value between a first reference value and a second reference value, and the color component characteristic of the pixel of the received frame is green, If the width is above the reference value,
The average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the width of the graph is less than or equal to the reference value in the histogram of the pixel whose color component characteristic of the pixel of the received frame is green; and
In the case where the average saturation value of the pixel whose color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the average change value of the luminance of the pixel whose color component characteristic of the pixel of the received frame is green is less than or equal to the reference value.
In the case of at least one of the content types, the content type determination device, characterized in that it is determined that the content type of the received frame is not a field game.
제9항에 있어서, 상기 컨텐츠 타입 결정부는
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율 또는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율이 기준값 이하인 경우 및
상기 수신한 프레임의 픽셀별 컬러 성분 특성이 녹색인 픽셀의 비율이 기준값 이상이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 고휘도 및 고채도인 픽셀의 비율이 기준값 이하이고, 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 흰색인 픽셀의 비율 또는 상기 수신한 프레임의 픽셀별 컬러 성분 특성이 피부색인 픽셀의 비율이 기준값 이하인 경우 중에서
적어도 하나 이상에 해당하는 경우, 상기 수신한 프레임의 컨텐츠 타입은 필드 게임인 것으로 결정하는 것을 특징으로 하는 컨텐츠 타입 결정 장치.
The method of claim 9, wherein the content type determination unit
The ratio of the pixel whose color component characteristic of each pixel of the received frame is green is less than or equal to the reference value, and the ratio of the pixel whose color component characteristic of each pixel of the received frame is high luminance and high saturation is greater than or equal to the reference value, and the pixel of the received frame The ratio of pixels having a white color component characteristic or a pixel whose skin component color is a color component characteristic of the received frame is less than or equal to the reference value; and
The ratio of the pixel whose color component characteristic of each pixel of the received frame is green is greater than or equal to the reference value, and the ratio of the pixel whose color component characteristic of the received frame is high luminance and high saturation is less than or equal to the reference value, and the pixel of the received frame The ratio of pixels having a white color component characteristic or a pixel whose skin component color is a color component characteristic of the received frame is equal to or less than a reference value.
In the case of at least one or more, the content type determination device of claim 1, wherein the content type of the received frame is determined to be a field game.
비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체에 있어서, 상기 비디오 컨텐츠의 컨텐츠 타입을 결정하는 방법은,
상기 비디오 컨텐츠의 프레임을 수신하는 단계;
상기 수신한 프레임의 픽셀별 컬러 성분 특성을 검출하는 단계;
상기 검출한 픽셀별 컬러 성분 특성에 따라 상기 수신한 프레임이 소정 장르의 씬을 재생하는 컨텐츠를 포함하는지를 나타내는 컨텐츠 타입을 결정하는 단계를 포함하는 것을 특징으로 하는 기록매체.
A computer-readable recording medium having recorded thereon a program that performs a method of determining a content type of video content, the method of determining the content type of the video content,
Receiving a frame of the video content;
Detecting color component characteristics of each pixel of the received frame;
And determining a content type indicating whether the received frame includes content for reproducing a scene of a predetermined genre according to the detected color component characteristic of each pixel.
KR1020120125698A 2012-03-12 2012-11-07 Method and apparatus for determining content type of video content KR20130105270A (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130008212A KR102014443B1 (en) 2012-03-12 2013-01-24 Method and apparatus for determining content type of video content
US13/795,716 US20130237317A1 (en) 2012-03-12 2013-03-12 Method and apparatus for determining content type of video content
PCT/KR2013/001966 WO2013137613A1 (en) 2012-03-12 2013-03-12 Method and apparatus for determining content type of video content

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
RU2012109119 2012-03-12
RU2012109119/07A RU2526049C2 (en) 2012-03-12 2012-03-12 Method and apparatus for detecting game incidents in field sports in video sequences

Publications (1)

Publication Number Publication Date
KR20130105270A true KR20130105270A (en) 2013-09-25

Family

ID=49182852

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020120125698A KR20130105270A (en) 2012-03-12 2012-11-07 Method and apparatus for determining content type of video content
KR1020130008212A KR102014443B1 (en) 2012-03-12 2013-01-24 Method and apparatus for determining content type of video content

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020130008212A KR102014443B1 (en) 2012-03-12 2013-01-24 Method and apparatus for determining content type of video content

Country Status (2)

Country Link
KR (2) KR20130105270A (en)
RU (1) RU2526049C2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021172713A1 (en) * 2020-02-24 2021-09-02 삼성전자(주) Electronic device and control method therefor

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7317811B2 (en) 2001-11-28 2008-01-08 Sony Electronics Inc. Method to decode temporal watermarks in compressed video
FI117845B (en) * 2004-08-12 2007-03-15 Gurulogic Microsystems Oy Video image processing
JP2008122551A (en) 2006-11-10 2008-05-29 Matsushita Electric Ind Co Ltd Image display device and determining method for image quality adjustment parameter
JP5084615B2 (en) * 2008-06-03 2012-11-28 三菱電機株式会社 Image display device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021172713A1 (en) * 2020-02-24 2021-09-02 삼성전자(주) Electronic device and control method therefor
US11424845B2 (en) 2020-02-24 2022-08-23 Samsung Electronics Co., Ltd. Electronic apparatus and control method thereof

Also Published As

Publication number Publication date
RU2012109119A (en) 2013-09-20
RU2526049C2 (en) 2014-08-20
KR20130105320A (en) 2013-09-25
KR102014443B1 (en) 2019-08-26

Similar Documents

Publication Publication Date Title
US7761491B2 (en) Method for detecting a commercial in a video data stream by evaluating descriptor information
US8305440B2 (en) Stationary object detection using multi-mode background modelling
US6606409B2 (en) Fade-in and fade-out temporal segments
US9514225B2 (en) Video recording apparatus supporting smart search and smart search method performed using video recording apparatus
CN102236796B (en) Method and system for sorting defective contents of digital video
EP2457214B1 (en) A method for detecting and adapting video processing for far-view scenes in sports video
US20020172420A1 (en) Image processing apparatus for and method of improving an image and an image display apparatus comprising the image processing apparatus
Janwe et al. Video shot boundary detection based on JND color histogram
US20200250840A1 (en) Shadow detection method and system for surveillance video image, and shadow removing method
US20170308772A1 (en) Image Classification Method and Image Classification Apparatus
US20110043699A1 (en) Spatio-activity based mode matching
KR101030257B1 (en) Method and System for Vision-Based People Counting in CCTV
US10380452B1 (en) Systems and methods for identifying salient images
JP2017112448A (en) Video scene division device and video scene division program
KR100612842B1 (en) An apparatus and method for deciding anchor shot
US20130237317A1 (en) Method and apparatus for determining content type of video content
KR102014443B1 (en) Method and apparatus for determining content type of video content
EP2904546B1 (en) Method and apparatus for ambient lighting color determination
CA2973492C (en) Detection of solid color frames for determining transitions in video content
KR100488014B1 (en) YCrCb color based human face location detection method
KR101599873B1 (en) Method and apparatus for classifying a sky image using histogram analysis
Shih et al. Real-time camera tampering detection using two-stage scene matching
KR101015646B1 (en) Face detecting apparatus and face detection using the same
CN111402189B (en) Video image color cast detection device and method
Miao et al. Small fire smoke region location and recognition in satellite image