KR101586652B1 - 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치 - Google Patents

동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치 Download PDF

Info

Publication number
KR101586652B1
KR101586652B1 KR1020090014428A KR20090014428A KR101586652B1 KR 101586652 B1 KR101586652 B1 KR 101586652B1 KR 1020090014428 A KR1020090014428 A KR 1020090014428A KR 20090014428 A KR20090014428 A KR 20090014428A KR 101586652 B1 KR101586652 B1 KR 101586652B1
Authority
KR
South Korea
Prior art keywords
luminance
value
regions
skin
difference value
Prior art date
Application number
KR1020090014428A
Other languages
English (en)
Other versions
KR20100095246A (ko
Inventor
박태서
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090014428A priority Critical patent/KR101586652B1/ko
Priority to US12/551,105 priority patent/US8285042B2/en
Publication of KR20100095246A publication Critical patent/KR20100095246A/ko
Application granted granted Critical
Publication of KR101586652B1 publication Critical patent/KR101586652B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/50Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • G06V10/507Summing image-intensity values; Histogram projection analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 동영상 컨텐트에서 음란물을 판단하는 방법에 관한 것으로, 본 발명의 일실시예는 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하고, 그 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출한 후, 움직임 영역에서 피부 추정 영역들이 차지하는 비율에 기초하여 그 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 음란물 판단 방법을 개시한다.

Description

동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치{Method and apparatus for determining sexual stuff in video content}
본 발명은 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치에 관한 것이다.
인터넷의 확산과 동영상의 디지털화가 진행되면서 어린이들이 음란 동영상에 조기 노출되는 문제가 사회적 이슈로 대두되고 있다.
이러한 문제에 대응하기 위해 음란사이트의 URL주소를 데이터베이스화하여 접속을 차단하거나, 접속한 사이트에 포함된 문자열을 분석하여 성과 관련된 특정 어휘의 빈도가 높으면 접속을 제한하는 등의 기술이 제안되어 왔다.
본 발명의 목적은 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치를 제공하는 것이다.
상기 목적을 달성하기 위한 본 발명의 일실시예에 따른 동영상 컨텐트에서 음란물을 판단하는 방법은 상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 단계; 상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 단계; 및 상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 단계를 포함한다.
바람직하게는 상기 피부 추정 영역들을 검출하는 단계는 상기 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할하는 단계; 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성하는 단계; 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성하는 단계; 상기 가로 휘도 차이 값과 상기 세로 휘도 차이 값을 이용하여 상기 픽셀들 각각에 대응되는 휘도 변화 각도(brightness variation angle)를 생성하는 단계; 및
상기 픽셀들 각각에 대응하여 생성된 상기 휘도 변화 각도를 이용하여 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계를 포함한다.
바람직하게는 상기 휘도 변화 각도는 상기 가로 휘도 차이 값의 부호 및 상기 세로 휘도 차이 값의 부호를 참조하여, 상기 세로 휘도 차이 값을 상기 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성된다.
바람직하게는 상기 피부 추정 영역들을 검출하는 단계는 상기 분할된 분석 영역들별로 상기 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 상기 휘도 변화 각도들의 분포를 분석하는 단계; 및 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계를 포함한다.
바람직하게는 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는 상기 분석 영역들별로 분석을 수행한 결과, 상기 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함한다.
바람직하게는 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는 상기 휘도 변화 각도들의 분포 형태를 표시하기 위한 각도 분포 히스토그램을 상기 분할된 분석 영역들별로 생성하는 단계; 및 상기 분석 영역들 중에서 사람의 피부를 나타내는 것으로 판단되었던 분석 영역으로부터 미리 생성된 참조 히스토그램과 유사한 각도 분포 히스토그램을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함한다.
바람직하게는 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계는 상기 가로 휘도 차이 값을 제곱승한 값과 상기 세로 휘도 차이 값을 제곱승 한 값을 합산한 후, 상기 합산된 값에 루트 연산(root operation)을 적용함으로써 생성된 휘도 차이 값의 크기를 더 이용하여 수행될 수 있다.
바람직하게는 상기 피부 추정 영역들을 검출하는 단계는 상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값에 더 기초하여 수행될 수 있다.
바람직하게는 상기 움직임 영역을 검출하는 단계는 상기 복수개의 동영상 프레임들과 상기 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 상기 움직임 영역을 검출할 수 있다.
또한, 상기 목적을 달성하기 위한 본 발명의 일실시예에 따른 동영상 컨텐트에서 음란물을 판단하는 장치는 상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 움직임 영역 검출부;
상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 피부 추정 영역 검출부; 및 상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 음란물 판단부를 포함한다.
또한, 상기 목적을 달성하기 위하여 본 발명의 일실시예는 상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 단계; 상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 단계; 및 상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 단계를 포함하는 음란물 판단 방법을 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.
이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대하여 상세히 설명한다.
도 1은 본 발명에 따라 동영상 컨텐트에서 음란물을 판단하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.
단계 110에서는, 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출한다.
이때, 복수개의 동영상 프레임들과 그 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 움직임 영역이 검출될 수 있다.
예컨대, 동영상 프레임들에서 배경은 고정된 채로 사람만이 움직이고 있다면 동영상 프레임들에서 그 사람을 포함하는 영역이 움직임 영역으로 검출될 것이다.
다만, 움직임 영역을 검출하는 방법은 상기 방법에 한정되지 않고, 움직임 영역을 검출할 수 있는 모든 방법들이 이용될 수 있다.
단계 120에서는, 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출한 다.
이와 같이 본 발명의 일실시예는 복수개의 동영상 프레임들 각각에서 피부 추정 영역들을 검출하는 방법을 이용하여 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단할 수 있게 된다. 즉, 음란물의 경우에 사람 피부의 노출도가 높으므로 피부 추정 영역들이 많이 포함된 동영상 프레임은 음란물이라고 판단할 수 있게 되는 것이다.
한편, 본 발명의 일실시예에 따라 피부 추정 영역들을 검출하는 방법에 대한 구체적인 설명은 도 2 내지 도 4를 참조하여 후술한다.
단계 130에서는, 움직임 영역에서 피부 추정 영역들이 차지하는 비율에 기초하여, 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단한다.
이와 같이 본 발명의 일실시예는 동영상 프레임의 움직임 영역에서 피부 추정 영역들이 차지하는 비율을 이용하므로, 동영상 프레임 전체에서 피부 추정 영역들이 차지하는 비율을 이용하는 종래 기술에 비하여 동영상 프레임이 음란물인지 여부를 판단함에 있어 상대적으로 오류를 줄일 수 있는 장점이 있다.
예컨대, 종래 기술에서는 피부의 노출이 심한 사람이 존재하는 동영상 프레임이라고 할지라도, 그 사람이 크게 표시되어 동영상 프레임에서 그 사람이 차지하는 비율이 높으면 음란물로 판단하게 되지만, 그 사람이 작게 표시되어 동영상 프레임에서 그 사람이 차지하는 비율이 낮으면 음란물로 판단하지 않는 문제점이 있었다.
하지만, 본 발명의 일실시예에 따르면 사람의 크기가 작아서 동영상 프레임 에서 그 사람이 차지하는 비율이 낮더라도, 동영상 프레임의 움직임 영역에서의 피부 추정 영역의 비율이 높으면 음란물로 판단할 수 있기 때문에, 종래 기술에서 발생할 수 있는 오류를 줄일 수 있는 효과가 있다.
본 발명의 일실시예는 일반적으로 음란물에서 배경은 움직이지 않고 사람만이 움직인다는 특징을 이용한 것이다.
도 2는 본 발명에 따라 픽셀들의 휘도 값을 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.
단계 210에서는, 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할한다.
예컨대, 분석 영역은 20 x 20 매트릭스의 픽셀들로 구성되거나 30x30 매트릭스의 픽셀들로 구성될 수 있다. 다만, 이와 같은 분석 영역의 크기는 사용자가 임의로 설정할 수 있고, 상기 예에서와 같이 가로와 세로가 동일한 개수의 픽셀들로 구성될 필요는 없다.
단계 220에서는, 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 그 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성한다.
예컨대, 가로 휘도 차이 값은 수학식 1과 같이 계산될 수 있다.
[수학식 1]
Figure 112009010733861-pat00001
즉, (x, y) 좌표에 위치하는 픽셀이 자신의 휘도 값에서 그 픽셀로부터 우측 방향으로 인접한 (x+1, y) 좌표에 위치하는 픽셀의 휘도 값을 감산함으로써 가로 휘도 차이 값 dx를 계산할 수 있다.
예컨대, 휘도 값이 가장 어두운 값에서 가장 밝은 값까지 0에서 10까지의 값을 가진다고 가정하고, (x, y) 픽셀에서의 휘도 값이 5이고 (x+1, y) 픽셀에서의 휘도 값이 10이라면 (x, y) 픽셀에서의 가로 휘도 차이 값 dx는 -5가 된다. 만일, (x, y) 픽셀에서의 가로 휘도 차이 값 dx를 벡터로 표시한다면 좌측 방향으로 5의 크기를 가지는 벡터로 표시할 수 있을 것이다.
다만, 이때 가로 휘도 차이 값 dx는 (x, y) 픽셀에서의 휘도 값에서 그 픽셀로부터 좌측 방향으로 인접한 (x-1, y) 픽셀에서의 휘도 값을 감산하는 방식으로 계산될 수도 있다.
단계 230에서는, 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 그 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성한다.
예컨대, 세로 휘도 차이 값은 수학식 2와 같이 계산될 수 있다.
[수학식 2]
Figure 112009010733861-pat00002
즉, (x, y) 픽셀에서의 휘도 값에서 그 픽셀로부터 상단 방향으로 인접한 (x, y+1) 픽셀의 휘도 값을 감산함으로써 세로 휘도 차이 값 dy를 계산할 수 있다.
예컨대, 휘도 값이 가장 어두운 값에서 가장 밝은 값까지 0에서 10까지의 값을 가진다고 가정하고, (x, y) 픽셀에서의 휘도 값이 5이고 (x, y+1) 픽셀에서의 휘도 값이 0이라면 (x, y) 픽셀에서의 세로 휘도 차이 값 dy는 5가 된다. 만일, (x, y) 픽셀에서의 세로 휘도 차이 값 dy를 벡터로 표시한다면 상단 방향으로 5의 크기를 가지는 벡터로 표시할 수 있을 것이다.
다만, 이때 세로 휘도 차이 값 dy는 (x, y) 픽셀에서의 휘도 값에서 그 픽셀로부터 하단 방향으로 인접한 (x, y-1) 픽셀에서의 휘도 값을 감산하는 방식으로 계산될 수도 있다.
단계 240에서는, 가로 휘도 차이 값과 세로 휘도 차이 값을 이용하여 픽셀들 각각에 대응되는 휘도 변화 각도(brightness variation angle)를 생성한다.
이때, 휘도 변화 각도는 수학식 3과 같이 계산될 수 있다.
[수학식 3]
Figure 112009010733861-pat00003
즉, 휘도 변화 각도 ang(x, y)는 세로 휘도 차이 값을 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성될 수 있다. 다만, 이때 휘도 변화 각도 ang(x, y)는 가로 휘도 차이 값의 부호 및 세로 휘도 차이 값의 부호를 참조하여 결정된다.
예컨대, (x, y) 픽셀에서 dx가 -5이고 dy가 5라면 (x, y) 픽셀에서의 휘도 변화 각도 ang(x, y)는 135도가 된다.
다만, 휘도 변화 각도 ang(x, y)는 상기 수학식 3의 방법 외에도 다른 방법에 의하여 계산될 수도 있다.
단계 250에서는, 픽셀들 각각에 대응하여 생성된 휘도 변화 각도를 이용하여 분석 영역들 중에서 피부 추정 영역들을 검출한다.
여기서, 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법에 대한 구체적인 설명은 도 3을 참조하여 후술한다.
한편, 피부 추정 영역을 검출할 때 휘도 변화 각도와 함께 휘도 차이 값의 크기도 이용될 수 있다.
이때, 휘도 차이 값의 크기는 수학식 4와 같이 계산될 수 있다.
[수학식 4]
Figure 112009010733861-pat00004
즉, 휘도 차이 값의 크기 mag(x, y)는 가로 휘도 차이 값 dx를 제곱승한 값과 세로 휘도 차이 값 dy를 제곱승한 값을 합산한 후, 그 합산된 값에 루트 연산(root operation)을 적용함으로써 생성될 수 있다.
수학식 4와 같은 방법으로 분석 영역들 각각에 포함된 픽셀들에서의 휘도 차이 값이 계산되면, 그 계산된 휘도 차이 값의 크기가 임계치보다 작은 값을 가지는 픽셀들이 일정 비율 이상 포함된 분석 영역이 피부 추정 영역으로서 검출될 수 있다.
이는 동영상 프레임에서 사람의 피부가 배경이나 다른 물체에 비해서 낮은 텍스쳐(Low texture)를 가지는 경향이 있고, 또한 음란물의 경우에 성적 매력을 극대화하기 위해서 리터칭을 통하여 사람의 피부가 더욱 낮은 텍스쳐를 가지도록 만들어지는 경향이 있는데, 이를 피부 추정 영역의 검출에 이용하기 위한 것이다.
즉, 상기 예에서 휘도 차이 값의 크기가 임계치보다 작은 값을 가지는 픽셀들이 일정 비율 이상 포함된 분석 영역을 피부 추정 영역으로 검출하는 이유는 그와 같은 분석 영역이 낮은 텍스쳐를 가지기 때문이다.
한편, 피부 추정 영역을 검출할 때 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값이 이용될 수도 있다.
예컨대, 사람의 피부를 나타내기 위한 채도 값과 유사한 채도 값을 가지는 픽셀들이 일정 비율 이상 포함된 분석 영역이 피부 추정 영역으로서 검출될 수 있다.
도 3은 본 발명에 따라 픽셀들의 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.
단계 310에서는, 분할된 분석 영역들별로 그 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 휘도 변화 각도들의 분포를 분석한다.
예컨대, 분석 영역들 각각이 3x3 매트릭스의 픽셀들로 구성될 경우에 그와 같이 분할된 분석 영역들 중 어느 하나의 분석 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포가 135도 3개, 120도 2개, 45도 2개, 15도 1개, 0도 1개와 같이 구성될 수 있다.
단계 320에서는, 그 분석 결과에 기초하여 피부 추정 영역들을 검출한다.
예컨대, 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 피부 추정 영역으로서 검출할 수 있다. 이때, 제1 임계치와 제2 임계치는 상대적으로 작은 값으로 결정되어야 한다.
이는 동영상 프레임에서 사람의 피부를 나타내는 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포의 편차가 배경이나 다른 물체를 나타내는 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포의 편차보다 작은 경향이 있는데, 이와 같은 특징을 이용하기 위한 것이다.
한편, 다른 실시예에서는 분석 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포 형태를 이용하여 피부 추정 영역들을 검출할 수도 있다.
도 4는 본 발명에 따라 픽셀들의 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 도면이다.
도 4의 상단에는 동영상 프레임에서의 사람의 팔의 피부에 대응되는 각도 분포 히스토그램(410)이 도시되어 있고, 도 4의 하단에는 동영상 프레임에서의 배경에 대응되는 각도 분포 히스토그램(420)이 도시되어 있다.
도 4에 도시된 것과 같이 사람의 피부에 대응되는 각도 분포 히스토그램(410)은 135도를 중심으로 작은 편차를 가지도록 구성되어 있지만, 배경에 대응되는 각도 분포 히스토그램(420)은 휘도 변화 각도들이 산재되어 있어 매우 큰 편차를 가지도록 구성되어 있다.
한편, 도 4에 도시된 것과 같이 사람의 피부에 대응되는 각도 분포 히스토그 램(410)은 고유의 분포 형태를 가지고 있는데, 팔에 대응되는 각도 분포 히스토그램과 다리에 대응되는 각도 분포 히스토그램은 상호간에 유사한 분포 형태를 가진다. 또한, 도 4에 도시되지 않았지만 사람의 몸통에 대응되는 각도 분포 히스토그램도 고유의 분포 형태를 가지게 된다.
이와 같이 사람의 팔, 다리, 몸통의 피부에 대응되는 각도 분포 히스토그램각각이 고유의 분포 형태를 가지는 이유는, 배경 등은 평평한 형태를 가지지만 사람의 팔, 다리, 몸통 등은 곡면 형태를 가지기 때문이다.
즉, 사람에게 빛이 비춰지게 되면 그 사람의 팔, 다리, 몸통 등의 고유의 곡면을 따라 밝은 부분과 어두운 부분이 생기게 되는데, 동영상 프레임에 포함된 픽셀마다 그 밝은 부분에서 어두운 부분쪽 방향으로 휘도 변화 각도들이 형성되고, 그와 같은 픽셀들로 구성된 분석 영역에서는 그 곡면 고유의 휘도 변화 각도들의 분포 형태가 생기게 되는 것이다.
따라서, 사람의 팔, 다리, 몸통의 피부를 나타내는 것으로 판단된 분석 영역에 대응되는 분포 히스토그램을 참조 히스토그램으로서 데이터베이스화해두었다가, 그 참조 히스토그램과 소정의 분석 영역에 대한 각도 분포 히스토그램을 비교하는 방법을 이용하여 그 분석 영역이 피부 추정 영역인지를 판단할 수 있다.
예컨대, 도 4의 상단의 각도 분포 히스토그램(410)을 사람의 팔에 대응되는 참조 히스토그램으로 저장한 후에, 소정의 분석 영역에 대한 각도 분포 히스토그램을 그 저장된 참조 히스토그램과 비교하여 도 4의 상단의 각도 분포 히스토그램(410)과 유사한 분포 형태를 가지면 그 분석 영역을 피부 추정 영역으로서 검출 할 수 있다.
다만, 상기 예에서는 참조 히스토그램과 각도 분포 히스토그램의 유사도를 이용하여 피부 추정 영역을 검출하는 방법이 기재되었지만, 피부 추정 영역을 검출하는 방법은 이에 한정되지 않고 참조 히스토그램과 각도 분포 히스토그램을 이용하여 피부 추정 영역을 검출할 수 있는 모든 방법이 본 발명에 적용될 수 있다.
도 5는 본 발명에 따라 동영상 컨텐트에서 음란물을 판단하는 장치의 일실시예를 설명하기 위하여 도시한 흐름도이다.
도 5를 참조하면, 본 발명의 일실시예에 따른 음란물 판단 장치는 움직임 영역 검출부(510), 피부 추정 영역 검출부(520) 및 음란물 판단부(530)를 포함한다.
움직임 영역 검출부(510)는 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출한다.
피부 추정 영역 검출부(520)는 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출한다.
다른 실시예에서는 피부 추정 영역 검출부(520)가 움직임 영역에 포함된 픽셀들만을 이용하여 피부 추정 영역들을 검출할 수도 있다.
예컨대, 피부 추정 영역 검출부(520)는 움직임 영역에 포함된 픽셀들의 휘도 값에 기초하여 움직임 영역에 포함된 피부 추정 영역들을 검출할 수도 있다.
음란물 판단부(530)는 움직임 영역에서 피부 추정 영역들이 차지하는 비율에 기초하여 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단한다.
이때, 본 발명에 따른 음란물 판단 장치는 동영상 컨텐트를 재생하기 위한 디스플레이 장치에 탑재된다. 이를 통하여, 디스플레이 장치에 사용자가 별도의 음란물 판단 장치를 설치하지 않더라도 그 디스플레이 장치에서 출력되는 음란물을 원천적으로 차단할 수 있게 된다.
예컨대, 본 발명의 일실시예에 따른 음란물 판단 장치가 탑재된 디스플레이 장치에서 동영상 컨텐트를 재생할 때, 음란물이라고 판단되는 동영상 프레임들이 재생되기 시작하면 디스플레이 장치는 그 음란물이라고 판단되는 동영상 프레임들에 대해 모자이크 처리를 하거나, 다른 이미지를 덧입히는 방식으로 음란물의 재생을 차단할 수 있다.
한편, 디스플레이 장치에 탑재된 음란물 판단 장치는 소프트웨어적으로 구현되거나 하드웨어적으로 구현될 수 있으며, 해킹을 방지하기 위하여 음란물 판단 장치에 대한 사용자 및 제3자에 의한 접근이 금지되도록 음란물 판단 장치가 구성될 수 있다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다.
상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1은 본 발명에 따라 동영상 컨텐트에서 음란물을 판단하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.
도 2는 본 발명에 따라 픽셀들의 휘도 값을 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.
도 3은 본 발명에 따라 픽셀들의 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.
도 4는 본 발명에 따라 픽셀들의 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 도면이다.
도 5는 본 발명에 따라 동영상 컨텐트에서 음란물을 판단하는 장치의 일실시예를 설명하기 위하여 도시한 흐름도이다.

Claims (20)

  1. 동영상 컨텐트에서 음란물을 판단하는 방법에 있어서,
    상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 단계;
    상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여 상기 픽셀들에 대응되는 휘도 변화 각도를 생성하는 단계,
    상기 휘도 변화 각도를 이용하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 단계; 및
    상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
  2. 제1항에 있어서,
    상기 휘도 변화 각도를 생성하는 단계는,
    상기 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할하는 단계;
    상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성하는 단계;
    상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성하는 단계;
    상기 가로 휘도 차이 값과 상기 세로 휘도 차이 값을 이용하여 상기 픽셀들 각각에 대응되는 상기 휘도 변화 각도(brightness variation angle)를 생성하는 단계; 및
    상기 픽셀들 각각에 대응하여 생성된 상기 휘도 변화 각도를 이용하여 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
  3. 제2항에 있어서,
    상기 휘도 변화 각도는
    상기 가로 휘도 차이 값의 부호 및 상기 세로 휘도 차이 값의 부호를 참조하여, 상기 세로 휘도 차이 값을 상기 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성되는 것을 특징으로 하는 음란물 판단 방법.
  4. 제2항에 있어서,
    상기 피부 추정 영역들을 검출하는 단계는
    상기 분할된 분석 영역들별로 상기 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 상기 휘도 변화 각도들의 분포를 분석하는 단계; 및
    상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계를 포함 하는 것을 특징으로 하는 음란물 판단 방법.
  5. 제4항에 있어서,
    상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는
    상기 분석 영역들별로 분석을 수행한 결과, 상기 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
  6. 제4항에 있어서,
    상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는
    상기 휘도 변화 각도들의 분포 형태를 표시하기 위한 각도 분포 히스토그램을 상기 분할된 분석 영역들별로 생성하는 단계; 및
    상기 분석 영역들 중에서 사람의 피부를 나타내는 것으로 판단되었던 분석 영역으로부터 미리 생성된 참조 히스토그램과 유사한 각도 분포 히스토그램을 가지는 분석 영역을 비교하되 상기 각도 분포 히스토그램에서 소정의 각도를 기준으로 할 때의 분포 편차값과 상기 참조 히스토그램에서 상기 소정의 각도를 기준으로 하는 분포 편차값 차이가 소정 범위 내에 있을 경우 상기 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
  7. 제2항에 있어서,
    상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계는
    상기 가로 휘도 차이 값을 제곱승한 값과 상기 세로 휘도 차이 값을 제곱승한 값을 합산한 후, 상기 합산된 값에 루트 연산(root operation)을 적용함으로써 생성된 휘도 차이 값의 크기를 더 이용하여 수행되는 것을 특징으로 하는 음란물 판단 방법.
  8. 제1항에 있어서,
    상기 피부 추정 영역들을 검출하는 단계는
    상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값에 더 기초하여 수행되는 것을 특징으로 하는 음란물 판단 방법.
  9. 제1항에 있어서,
    상기 움직임 영역을 검출하는 단계는
    상기 복수개의 동영상 프레임들과 상기 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 상기 움직임 영역을 검출하는 것을 특징으로 하는 음란물 판단 방법.
  10. 동영상 컨텐트에서 음란물을 판단하는 장치에 있어서,
    상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 움직임 영역 검출부;
    상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여 상기 픽셀들에 대응되는 휘도 변화 각도를 생성하고, 상기 휘도 각도 변화를 이용하여 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 피부 추정 영역 검출부; 및
    상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 음란물 판단부를 포함하는 것을 특징으로 하는 음란물 판단 장치.
  11. 제10항에 있어서,
    상기 피부 추정 영역 검출부는
    상기 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할하고, 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성하고, 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성하고, 상기 가로 휘도 차이 값과 상기 세로 휘도 차이 값을 이용하여 상기 픽셀들 각각에 대응되는 상기 휘도 변화 각도(brightness variation angle)를 생성한 후, 상기 픽셀들 각각에 대응하여 생성된 상기 휘도 변화 각도를 이용하여 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 것을 특징으로 하는 음란물 판단 장치.
  12. 제11항에 있어서,
    상기 휘도 변화 각도는
    상기 가로 휘도 차이 값의 부호 및 상기 세로 휘도 차이 값의 부호를 참조하여, 상기 세로 휘도 차이 값을 상기 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성되는 것을 특징으로 하는 음란물 판단 장치.
  13. 제11항에 있어서,
    상기 피부 추정 영역 검출부는
    상기 분할된 분석 영역들별로 상기 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 상기 휘도 변화 각도들의 분포를 분석하고, 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 것을 특징으로 하는 음란물 판단 장치.
  14. 제13항에 있어서,
    상기 피부 추정 영역 검출부는
    상기 분석 영역들별로 분석을 수행한 결과, 상기 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 것을 특징으로 하는 음란물 판단 장치.
  15. 제13항에 있어서,
    상기 피부 추정 영역 검출부는
    상기 휘도 변화 각도들의 분포 형태를 표시하기 위한 각도 분포 히스토그램을 상기 분할된 분석 영역들별로 생성하고, 상기 분석 영역들 중에서 사람의 피부를 나타내는 것으로 판단되었던 분석 영역으로부터 미리 생성된 참조 히스토그램과 유사한 각도 분포 히스토그램을 가지는 분석 영역을 비교하되 상기 각도 분포 히스토그램에서 소정의 각도를 기준으로 할 때의 분포 편차값과 상기 참조 히스토그램에서 상기 소정의 각도를 기준으로 하는 분포 편차값 차이가 소정 범위 내에 있을 경우 상기 분석 영역을 상기 피부 추정 영역으로서 검출하는 것을 특징으로 하는 음란물 판단 장치.
  16. 제11항에 있어서,
    상기 피부 추정 영역 검출부는
    상기 가로 휘도 차이 값을 제곱승한 값과 상기 세로 휘도 차이 값을 제곱승한 값을 합산한 후, 상기 합산된 값에 루트 연산(root operation)을 적용함으로써 생성된 휘도 차이 값의 크기를 더 이용하여 상기 피부 추정 영역을 검출하는 것을 특징으로 하는 음란물 판단 장치.
  17. 제10항에 있어서,
    상기 피부 추정 영역 검출부는
    상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값에 더 기초하여 상기 피부 추정 영역을 검출하는 것을 특징으로 하는 음란물 판단 장치.
  18. 제10항에 있어서,
    상기 움직임 영역 검출부는
    상기 복수개의 동영상 프레임들과 상기 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 상기 움직임 영역을 검출하는 것을 특징으로 하는 음란물 판단 장치.
  19. 제10항에 있어서,
    상기 음란물 판단 장치는
    상기 동영상 컨텐트를 재생하기 위한 디스플레이 장치에 탑재되는 것을 특징으로 하는 음란물 판단 장치.
  20. 제1항 내지 제9항 중 어느 한 항의 방법을 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체.
KR1020090014428A 2009-02-20 2009-02-20 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치 KR101586652B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090014428A KR101586652B1 (ko) 2009-02-20 2009-02-20 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치
US12/551,105 US8285042B2 (en) 2009-02-20 2009-08-31 Method and apparatus for determining sexual content in moving image content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090014428A KR101586652B1 (ko) 2009-02-20 2009-02-20 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치

Publications (2)

Publication Number Publication Date
KR20100095246A KR20100095246A (ko) 2010-08-30
KR101586652B1 true KR101586652B1 (ko) 2016-01-19

Family

ID=42631011

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090014428A KR101586652B1 (ko) 2009-02-20 2009-02-20 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치

Country Status (2)

Country Link
US (1) US8285042B2 (ko)
KR (1) KR101586652B1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9077950B2 (en) * 2010-04-28 2015-07-07 Thomas William Hickie System, method, and module for a content control layer for an optical imaging device
CN105659254A (zh) * 2015-12-25 2016-06-08 王晓光 一种视频软件中图像识别的方法及系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003288601A (ja) * 2002-03-28 2003-10-10 Konica Corp 画像撮像装置、画像処理装置、画像処理方法及び画像情報分類サービス方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100255779B1 (ko) 1996-07-10 2000-05-01 구자홍 영상기기의 영상 프로그램 선별 제한 재생 장치
US20020001448A1 (en) 1996-07-10 2002-01-03 Lg Electronics, Inc. Selective recording and reproduction of video programs according to video programs according to video program grading
US6266664B1 (en) 1997-10-01 2001-07-24 Rulespace, Inc. Method for scanning, analyzing and rating digital information content
KR100347058B1 (ko) * 1998-11-18 2002-08-03 주식회사 신테크 얼굴 촬영/인식방법
KR100398927B1 (ko) 2000-08-22 2003-09-19 문종웅 음란물 시청 방지장치
US7657872B2 (en) * 2000-10-23 2010-02-02 Nintendo Of America Inc. Product testing and bug tracking system
US6751348B2 (en) 2001-03-29 2004-06-15 Fotonation Holdings, Llc Automated detection of pornographic images
TWI253568B (en) 2001-07-11 2006-04-21 Ulead Systems Inc System and method for filtering out network pornography films
KR100595032B1 (ko) * 2004-05-27 2006-06-30 대덕대학산학협력단 영상의 선정성 분석방법
KR100517645B1 (ko) 2004-11-05 2005-09-28 (주)지란지교소프트 해쉬값을 이용한 유해물 차단방법
JP2006254222A (ja) 2005-03-11 2006-09-21 Olympus Imaging Corp 画像表示装置、画像表示システム、カメラおよび画像表示装置の表示方法
KR100658799B1 (ko) 2005-08-17 2006-12-19 (주)엠아이티소프트 음란이미지 차단 서비스 시스템과, 음란이미지 판단 방법및 차단 방법
JP2008033654A (ja) 2006-07-28 2008-02-14 Noritsu Koki Co Ltd 写真画像判別方法、写真画像判別プログラム、及び、写真画像処理装置
KR100882476B1 (ko) * 2007-06-14 2009-02-06 유성준 음란성 이미지의 판별 방법과 그 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003288601A (ja) * 2002-03-28 2003-10-10 Konica Corp 画像撮像装置、画像処理装置、画像処理方法及び画像情報分類サービス方法

Also Published As

Publication number Publication date
US8285042B2 (en) 2012-10-09
US20100215268A1 (en) 2010-08-26
KR20100095246A (ko) 2010-08-30

Similar Documents

Publication Publication Date Title
US20200374600A1 (en) Method for Embedding Advertisement in Video and Computer Device
US10719954B2 (en) Method and electronic device for extracting a center position of an infrared spot
US8934734B1 (en) Video identification through detection of proprietary rights logos in media
US9704230B2 (en) Feedback to user for indicating augmentability of an image
TWI357582B (en) Image tracking system and method thereof
KR100841848B1 (ko) 전자 워터마크 검출 방법, 장치 및 프로그램을 기록한 기록 매체
WO2018103244A1 (zh) 直播视频处理方法、装置及电子设备
US20120092329A1 (en) Text-based 3d augmented reality
US20170208207A1 (en) Method and device for correcting document image captured by image pick-up device
JP5975598B2 (ja) 画像処理装置、画像処理方法及びプログラム
US10719729B2 (en) Systems and methods for generating skin tone profiles
US11170511B2 (en) Image processing device, imaging device, and image processing method for replacing selected image area based on distance
KR20180054808A (ko) 이미지들 내의 움직임 검출
JP2010191968A (ja) 画像強調方法及び画像強調装置
US8693740B1 (en) System and method for face detection in digital images
JP6244886B2 (ja) 画像処理装置、画像処理方法および画像処理プログラム
KR101586652B1 (ko) 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치
Chen et al. Preserving motion-tolerant contextual visual saliency for video resizing
WO2024027634A1 (zh) 跑动距离估算方法、装置、电子设备及存储介质
JP6527765B2 (ja) シワ状態分析装置及びシワ状態分析方法
KR101014486B1 (ko) 적응적 피부색 검출을 통한 유해 이미지 분류 방법 및 시스템
JP2004038980A (ja) 画像を解析する方法、しきい値を生成する方法、該方法を実行するコンピュータプログラム、該プログラムを記憶するコンピュータ可読媒体および該方法を実行するように適応した装置
Kuo et al. SIFT-guided multi-resolution video inpainting with innovative scheduling mechanism and irregular patch matching
JP4775599B2 (ja) 目の位置の検出方法
CN114581433A (zh) 一种获取金属球腔内表面形貌检测图像的方法及系统

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee