KR101586652B1

KR101586652B1 - 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치

Info

Publication number: KR101586652B1
Application number: KR1020090014428A
Authority: KR
Inventors: 박태서
Original assignee: 삼성전자주식회사
Priority date: 2009-02-20
Filing date: 2009-02-20
Publication date: 2016-01-19
Also published as: US20100215268A1; US8285042B2; KR20100095246A

Abstract

본 발명은 동영상 컨텐트에서 음란물을 판단하는 방법에 관한 것으로, 본 발명의 일실시예는 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하고, 그 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출한 후, 움직임 영역에서 피부 추정 영역들이 차지하는 비율에 기초하여 그 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 음란물 판단 방법을 개시한다.

Description

동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치{Method and apparatus for determining sexual stuff in video content}

본 발명은 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치에 관한 것이다.

인터넷의 확산과 동영상의 디지털화가 진행되면서 어린이들이 음란 동영상에 조기 노출되는 문제가 사회적 이슈로 대두되고 있다.

이러한 문제에 대응하기 위해 음란사이트의 URL주소를 데이터베이스화하여 접속을 차단하거나, 접속한 사이트에 포함된 문자열을 분석하여 성과 관련된 특정 어휘의 빈도가 높으면 접속을 제한하는 등의 기술이 제안되어 왔다.

본 발명의 목적은 동영상 컨텐트에서 음란물을 판단하는 방법 및 그 장치를 제공하는 것이다.

상기 목적을 달성하기 위한 본 발명의 일실시예에 따른 동영상 컨텐트에서 음란물을 판단하는 방법은 상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 단계; 상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 단계; 및 상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 단계를 포함한다.

바람직하게는 상기 피부 추정 영역들을 검출하는 단계는 상기 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할하는 단계; 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성하는 단계; 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성하는 단계; 상기 가로 휘도 차이 값과 상기 세로 휘도 차이 값을 이용하여 상기 픽셀들 각각에 대응되는 휘도 변화 각도(brightness variation angle)를 생성하는 단계; 및

상기 픽셀들 각각에 대응하여 생성된 상기 휘도 변화 각도를 이용하여 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계를 포함한다.

바람직하게는 상기 휘도 변화 각도는 상기 가로 휘도 차이 값의 부호 및 상기 세로 휘도 차이 값의 부호를 참조하여, 상기 세로 휘도 차이 값을 상기 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성된다.

바람직하게는 상기 피부 추정 영역들을 검출하는 단계는 상기 분할된 분석 영역들별로 상기 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 상기 휘도 변화 각도들의 분포를 분석하는 단계; 및 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계를 포함한다.

바람직하게는 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는 상기 분석 영역들별로 분석을 수행한 결과, 상기 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함한다.

바람직하게는 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는 상기 휘도 변화 각도들의 분포 형태를 표시하기 위한 각도 분포 히스토그램을 상기 분할된 분석 영역들별로 생성하는 단계; 및 상기 분석 영역들 중에서 사람의 피부를 나타내는 것으로 판단되었던 분석 영역으로부터 미리 생성된 참조 히스토그램과 유사한 각도 분포 히스토그램을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함한다.

바람직하게는 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계는 상기 가로 휘도 차이 값을 제곱승한 값과 상기 세로 휘도 차이 값을 제곱승 한 값을 합산한 후, 상기 합산된 값에 루트 연산(root operation)을 적용함으로써 생성된 휘도 차이 값의 크기를 더 이용하여 수행될 수 있다.

바람직하게는 상기 피부 추정 영역들을 검출하는 단계는 상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값에 더 기초하여 수행될 수 있다.

바람직하게는 상기 움직임 영역을 검출하는 단계는 상기 복수개의 동영상 프레임들과 상기 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 상기 움직임 영역을 검출할 수 있다.

또한, 상기 목적을 달성하기 위한 본 발명의 일실시예에 따른 동영상 컨텐트에서 음란물을 판단하는 장치는 상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 움직임 영역 검출부;

상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 피부 추정 영역 검출부; 및 상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 음란물 판단부를 포함한다.

또한, 상기 목적을 달성하기 위하여 본 발명의 일실시예는 상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 단계; 상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 단계; 및 상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 단계를 포함하는 음란물 판단 방법을 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.

이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대하여 상세히 설명한다.

도 1은 본 발명에 따라 동영상 컨텐트에서 음란물을 판단하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.

단계 110에서는, 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출한다.

이때, 복수개의 동영상 프레임들과 그 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 움직임 영역이 검출될 수 있다.

예컨대, 동영상 프레임들에서 배경은 고정된 채로 사람만이 움직이고 있다면 동영상 프레임들에서 그 사람을 포함하는 영역이 움직임 영역으로 검출될 것이다.

다만, 움직임 영역을 검출하는 방법은 상기 방법에 한정되지 않고, 움직임 영역을 검출할 수 있는 모든 방법들이 이용될 수 있다.

단계 120에서는, 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출한 다.

이와 같이 본 발명의 일실시예는 복수개의 동영상 프레임들 각각에서 피부 추정 영역들을 검출하는 방법을 이용하여 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단할 수 있게 된다. 즉, 음란물의 경우에 사람 피부의 노출도가 높으므로 피부 추정 영역들이 많이 포함된 동영상 프레임은 음란물이라고 판단할 수 있게 되는 것이다.

한편, 본 발명의 일실시예에 따라 피부 추정 영역들을 검출하는 방법에 대한 구체적인 설명은 도 2 내지 도 4를 참조하여 후술한다.

단계 130에서는, 움직임 영역에서 피부 추정 영역들이 차지하는 비율에 기초하여, 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단한다.

이와 같이 본 발명의 일실시예는 동영상 프레임의 움직임 영역에서 피부 추정 영역들이 차지하는 비율을 이용하므로, 동영상 프레임 전체에서 피부 추정 영역들이 차지하는 비율을 이용하는 종래 기술에 비하여 동영상 프레임이 음란물인지 여부를 판단함에 있어 상대적으로 오류를 줄일 수 있는 장점이 있다.

예컨대, 종래 기술에서는 피부의 노출이 심한 사람이 존재하는 동영상 프레임이라고 할지라도, 그 사람이 크게 표시되어 동영상 프레임에서 그 사람이 차지하는 비율이 높으면 음란물로 판단하게 되지만, 그 사람이 작게 표시되어 동영상 프레임에서 그 사람이 차지하는 비율이 낮으면 음란물로 판단하지 않는 문제점이 있었다.

하지만, 본 발명의 일실시예에 따르면 사람의 크기가 작아서 동영상 프레임 에서 그 사람이 차지하는 비율이 낮더라도, 동영상 프레임의 움직임 영역에서의 피부 추정 영역의 비율이 높으면 음란물로 판단할 수 있기 때문에, 종래 기술에서 발생할 수 있는 오류를 줄일 수 있는 효과가 있다.

본 발명의 일실시예는 일반적으로 음란물에서 배경은 움직이지 않고 사람만이 움직인다는 특징을 이용한 것이다.

도 2는 본 발명에 따라 픽셀들의 휘도 값을 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.

단계 210에서는, 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할한다.

예컨대, 분석 영역은 20 x 20 매트릭스의 픽셀들로 구성되거나 30x30 매트릭스의 픽셀들로 구성될 수 있다. 다만, 이와 같은 분석 영역의 크기는 사용자가 임의로 설정할 수 있고, 상기 예에서와 같이 가로와 세로가 동일한 개수의 픽셀들로 구성될 필요는 없다.

단계 220에서는, 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 그 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성한다.

예컨대, 가로 휘도 차이 값은 수학식 1과 같이 계산될 수 있다.

[수학식 1]

즉, (x, y) 좌표에 위치하는 픽셀이 자신의 휘도 값에서 그 픽셀로부터 우측 방향으로 인접한 (x+1, y) 좌표에 위치하는 픽셀의 휘도 값을 감산함으로써 가로 휘도 차이 값 dx를 계산할 수 있다.

예컨대, 휘도 값이 가장 어두운 값에서 가장 밝은 값까지 0에서 10까지의 값을 가진다고 가정하고, (x, y) 픽셀에서의 휘도 값이 5이고 (x+1, y) 픽셀에서의 휘도 값이 10이라면 (x, y) 픽셀에서의 가로 휘도 차이 값 dx는 -5가 된다. 만일, (x, y) 픽셀에서의 가로 휘도 차이 값 dx를 벡터로 표시한다면 좌측 방향으로 5의 크기를 가지는 벡터로 표시할 수 있을 것이다.

다만, 이때 가로 휘도 차이 값 dx는 (x, y) 픽셀에서의 휘도 값에서 그 픽셀로부터 좌측 방향으로 인접한 (x-1, y) 픽셀에서의 휘도 값을 감산하는 방식으로 계산될 수도 있다.

단계 230에서는, 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 그 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성한다.

예컨대, 세로 휘도 차이 값은 수학식 2와 같이 계산될 수 있다.

[수학식 2]

즉, (x, y) 픽셀에서의 휘도 값에서 그 픽셀로부터 상단 방향으로 인접한 (x, y+1) 픽셀의 휘도 값을 감산함으로써 세로 휘도 차이 값 dy를 계산할 수 있다.

예컨대, 휘도 값이 가장 어두운 값에서 가장 밝은 값까지 0에서 10까지의 값을 가진다고 가정하고, (x, y) 픽셀에서의 휘도 값이 5이고 (x, y+1) 픽셀에서의 휘도 값이 0이라면 (x, y) 픽셀에서의 세로 휘도 차이 값 dy는 5가 된다. 만일, (x, y) 픽셀에서의 세로 휘도 차이 값 dy를 벡터로 표시한다면 상단 방향으로 5의 크기를 가지는 벡터로 표시할 수 있을 것이다.

다만, 이때 세로 휘도 차이 값 dy는 (x, y) 픽셀에서의 휘도 값에서 그 픽셀로부터 하단 방향으로 인접한 (x, y-1) 픽셀에서의 휘도 값을 감산하는 방식으로 계산될 수도 있다.

단계 240에서는, 가로 휘도 차이 값과 세로 휘도 차이 값을 이용하여 픽셀들 각각에 대응되는 휘도 변화 각도(brightness variation angle)를 생성한다.

이때, 휘도 변화 각도는 수학식 3과 같이 계산될 수 있다.

[수학식 3]

즉, 휘도 변화 각도 ang(x, y)는 세로 휘도 차이 값을 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성될 수 있다. 다만, 이때 휘도 변화 각도 ang(x, y)는 가로 휘도 차이 값의 부호 및 세로 휘도 차이 값의 부호를 참조하여 결정된다.

예컨대, (x, y) 픽셀에서 dx가 -5이고 dy가 5라면 (x, y) 픽셀에서의 휘도 변화 각도 ang(x, y)는 135도가 된다.

다만, 휘도 변화 각도 ang(x, y)는 상기 수학식 3의 방법 외에도 다른 방법에 의하여 계산될 수도 있다.

단계 250에서는, 픽셀들 각각에 대응하여 생성된 휘도 변화 각도를 이용하여 분석 영역들 중에서 피부 추정 영역들을 검출한다.

여기서, 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법에 대한 구체적인 설명은 도 3을 참조하여 후술한다.

한편, 피부 추정 영역을 검출할 때 휘도 변화 각도와 함께 휘도 차이 값의 크기도 이용될 수 있다.

이때, 휘도 차이 값의 크기는 수학식 4와 같이 계산될 수 있다.

[수학식 4]

즉, 휘도 차이 값의 크기 mag(x, y)는 가로 휘도 차이 값 dx를 제곱승한 값과 세로 휘도 차이 값 dy를 제곱승한 값을 합산한 후, 그 합산된 값에 루트 연산(root operation)을 적용함으로써 생성될 수 있다.

수학식 4와 같은 방법으로 분석 영역들 각각에 포함된 픽셀들에서의 휘도 차이 값이 계산되면, 그 계산된 휘도 차이 값의 크기가 임계치보다 작은 값을 가지는 픽셀들이 일정 비율 이상 포함된 분석 영역이 피부 추정 영역으로서 검출될 수 있다.

이는 동영상 프레임에서 사람의 피부가 배경이나 다른 물체에 비해서 낮은 텍스쳐(Low texture)를 가지는 경향이 있고, 또한 음란물의 경우에 성적 매력을 극대화하기 위해서 리터칭을 통하여 사람의 피부가 더욱 낮은 텍스쳐를 가지도록 만들어지는 경향이 있는데, 이를 피부 추정 영역의 검출에 이용하기 위한 것이다.

즉, 상기 예에서 휘도 차이 값의 크기가 임계치보다 작은 값을 가지는 픽셀들이 일정 비율 이상 포함된 분석 영역을 피부 추정 영역으로 검출하는 이유는 그와 같은 분석 영역이 낮은 텍스쳐를 가지기 때문이다.

한편, 피부 추정 영역을 검출할 때 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값이 이용될 수도 있다.

예컨대, 사람의 피부를 나타내기 위한 채도 값과 유사한 채도 값을 가지는 픽셀들이 일정 비율 이상 포함된 분석 영역이 피부 추정 영역으로서 검출될 수 있다.

도 3은 본 발명에 따라 픽셀들의 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 흐름도이다.

단계 310에서는, 분할된 분석 영역들별로 그 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 휘도 변화 각도들의 분포를 분석한다.

예컨대, 분석 영역들 각각이 3x3 매트릭스의 픽셀들로 구성될 경우에 그와 같이 분할된 분석 영역들 중 어느 하나의 분석 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포가 135도 3개, 120도 2개, 45도 2개, 15도 1개, 0도 1개와 같이 구성될 수 있다.

단계 320에서는, 그 분석 결과에 기초하여 피부 추정 영역들을 검출한다.

예컨대, 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 피부 추정 영역으로서 검출할 수 있다. 이때, 제1 임계치와 제2 임계치는 상대적으로 작은 값으로 결정되어야 한다.

이는 동영상 프레임에서 사람의 피부를 나타내는 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포의 편차가 배경이나 다른 물체를 나타내는 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포의 편차보다 작은 경향이 있는데, 이와 같은 특징을 이용하기 위한 것이다.

한편, 다른 실시예에서는 분석 영역에 포함된 픽셀들에서의 휘도 변화 각도들의 분포 형태를 이용하여 피부 추정 영역들을 검출할 수도 있다.

도 4는 본 발명에 따라 픽셀들의 휘도 변화 각도를 이용하여 피부 추정 영역들을 검출하는 방법의 일실시예를 설명하기 위하여 도시한 도면이다.

도 4의 상단에는 동영상 프레임에서의 사람의 팔의 피부에 대응되는 각도 분포 히스토그램(410)이 도시되어 있고, 도 4의 하단에는 동영상 프레임에서의 배경에 대응되는 각도 분포 히스토그램(420)이 도시되어 있다.

도 4에 도시된 것과 같이 사람의 피부에 대응되는 각도 분포 히스토그램(410)은 135도를 중심으로 작은 편차를 가지도록 구성되어 있지만, 배경에 대응되는 각도 분포 히스토그램(420)은 휘도 변화 각도들이 산재되어 있어 매우 큰 편차를 가지도록 구성되어 있다.

한편, 도 4에 도시된 것과 같이 사람의 피부에 대응되는 각도 분포 히스토그 램(410)은 고유의 분포 형태를 가지고 있는데, 팔에 대응되는 각도 분포 히스토그램과 다리에 대응되는 각도 분포 히스토그램은 상호간에 유사한 분포 형태를 가진다. 또한, 도 4에 도시되지 않았지만 사람의 몸통에 대응되는 각도 분포 히스토그램도 고유의 분포 형태를 가지게 된다.

이와 같이 사람의 팔, 다리, 몸통의 피부에 대응되는 각도 분포 히스토그램각각이 고유의 분포 형태를 가지는 이유는, 배경 등은 평평한 형태를 가지지만 사람의 팔, 다리, 몸통 등은 곡면 형태를 가지기 때문이다.

즉, 사람에게 빛이 비춰지게 되면 그 사람의 팔, 다리, 몸통 등의 고유의 곡면을 따라 밝은 부분과 어두운 부분이 생기게 되는데, 동영상 프레임에 포함된 픽셀마다 그 밝은 부분에서 어두운 부분쪽 방향으로 휘도 변화 각도들이 형성되고, 그와 같은 픽셀들로 구성된 분석 영역에서는 그 곡면 고유의 휘도 변화 각도들의 분포 형태가 생기게 되는 것이다.

따라서, 사람의 팔, 다리, 몸통의 피부를 나타내는 것으로 판단된 분석 영역에 대응되는 분포 히스토그램을 참조 히스토그램으로서 데이터베이스화해두었다가, 그 참조 히스토그램과 소정의 분석 영역에 대한 각도 분포 히스토그램을 비교하는 방법을 이용하여 그 분석 영역이 피부 추정 영역인지를 판단할 수 있다.

예컨대, 도 4의 상단의 각도 분포 히스토그램(410)을 사람의 팔에 대응되는 참조 히스토그램으로 저장한 후에, 소정의 분석 영역에 대한 각도 분포 히스토그램을 그 저장된 참조 히스토그램과 비교하여 도 4의 상단의 각도 분포 히스토그램(410)과 유사한 분포 형태를 가지면 그 분석 영역을 피부 추정 영역으로서 검출 할 수 있다.

다만, 상기 예에서는 참조 히스토그램과 각도 분포 히스토그램의 유사도를 이용하여 피부 추정 영역을 검출하는 방법이 기재되었지만, 피부 추정 영역을 검출하는 방법은 이에 한정되지 않고 참조 히스토그램과 각도 분포 히스토그램을 이용하여 피부 추정 영역을 검출할 수 있는 모든 방법이 본 발명에 적용될 수 있다.

도 5는 본 발명에 따라 동영상 컨텐트에서 음란물을 판단하는 장치의 일실시예를 설명하기 위하여 도시한 흐름도이다.

도 5를 참조하면, 본 발명의 일실시예에 따른 음란물 판단 장치는 움직임 영역 검출부(510), 피부 추정 영역 검출부(520) 및 음란물 판단부(530)를 포함한다.

움직임 영역 검출부(510)는 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출한다.

피부 추정 영역 검출부(520)는 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출한다.

다른 실시예에서는 피부 추정 영역 검출부(520)가 움직임 영역에 포함된 픽셀들만을 이용하여 피부 추정 영역들을 검출할 수도 있다.

예컨대, 피부 추정 영역 검출부(520)는 움직임 영역에 포함된 픽셀들의 휘도 값에 기초하여 움직임 영역에 포함된 피부 추정 영역들을 검출할 수도 있다.

음란물 판단부(530)는 움직임 영역에서 피부 추정 영역들이 차지하는 비율에 기초하여 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단한다.

이때, 본 발명에 따른 음란물 판단 장치는 동영상 컨텐트를 재생하기 위한 디스플레이 장치에 탑재된다. 이를 통하여, 디스플레이 장치에 사용자가 별도의 음란물 판단 장치를 설치하지 않더라도 그 디스플레이 장치에서 출력되는 음란물을 원천적으로 차단할 수 있게 된다.

예컨대, 본 발명의 일실시예에 따른 음란물 판단 장치가 탑재된 디스플레이 장치에서 동영상 컨텐트를 재생할 때, 음란물이라고 판단되는 동영상 프레임들이 재생되기 시작하면 디스플레이 장치는 그 음란물이라고 판단되는 동영상 프레임들에 대해 모자이크 처리를 하거나, 다른 이미지를 덧입히는 방식으로 음란물의 재생을 차단할 수 있다.

한편, 디스플레이 장치에 탑재된 음란물 판단 장치는 소프트웨어적으로 구현되거나 하드웨어적으로 구현될 수 있으며, 해킹을 방지하기 위하여 음란물 판단 장치에 대한 사용자 및 제3자에 의한 접근이 금지되도록 음란물 판단 장치가 구성될 수 있다.

한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다.

상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장매체를 포함한다.

이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims

동영상 컨텐트에서 음란물을 판단하는 방법에 있어서,

상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 단계;

상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여 상기 픽셀들에 대응되는 휘도 변화 각도를 생성하는 단계,

상기 휘도 변화 각도를 이용하여, 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 단계; 및

상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
제1항에 있어서,

상기 휘도 변화 각도를 생성하는 단계는,

상기 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할하는 단계;

상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성하는 단계;

상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성하는 단계;

상기 가로 휘도 차이 값과 상기 세로 휘도 차이 값을 이용하여 상기 픽셀들 각각에 대응되는 상기 휘도 변화 각도(brightness variation angle)를 생성하는 단계; 및

상기 픽셀들 각각에 대응하여 생성된 상기 휘도 변화 각도를 이용하여 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
제2항에 있어서,

상기 휘도 변화 각도는

상기 가로 휘도 차이 값의 부호 및 상기 세로 휘도 차이 값의 부호를 참조하여, 상기 세로 휘도 차이 값을 상기 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성되는 것을 특징으로 하는 음란물 판단 방법.
제2항에 있어서,

상기 피부 추정 영역들을 검출하는 단계는

상기 분할된 분석 영역들별로 상기 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 상기 휘도 변화 각도들의 분포를 분석하는 단계; 및

상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계를 포함 하는 것을 특징으로 하는 음란물 판단 방법.
제4항에 있어서,

상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는

상기 분석 영역들별로 분석을 수행한 결과, 상기 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
제4항에 있어서,

상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 단계는

상기 휘도 변화 각도들의 분포 형태를 표시하기 위한 각도 분포 히스토그램을 상기 분할된 분석 영역들별로 생성하는 단계; 및

상기 분석 영역들 중에서 사람의 피부를 나타내는 것으로 판단되었던 분석 영역으로부터 미리 생성된 참조 히스토그램과 유사한 각도 분포 히스토그램을 가지는 분석 영역을 비교하되 상기 각도 분포 히스토그램에서 소정의 각도를 기준으로 할 때의 분포 편차값과 상기 참조 히스토그램에서 상기 소정의 각도를 기준으로 하는 분포 편차값 차이가 소정 범위 내에 있을 경우 상기 분석 영역을 상기 피부 추정 영역으로서 검출하는 단계를 포함하는 것을 특징으로 하는 음란물 판단 방법.
제2항에 있어서,

상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 단계는

상기 가로 휘도 차이 값을 제곱승한 값과 상기 세로 휘도 차이 값을 제곱승한 값을 합산한 후, 상기 합산된 값에 루트 연산(root operation)을 적용함으로써 생성된 휘도 차이 값의 크기를 더 이용하여 수행되는 것을 특징으로 하는 음란물 판단 방법.
제1항에 있어서,

상기 피부 추정 영역들을 검출하는 단계는

상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값에 더 기초하여 수행되는 것을 특징으로 하는 음란물 판단 방법.
제1항에 있어서,

상기 움직임 영역을 검출하는 단계는

상기 복수개의 동영상 프레임들과 상기 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 상기 움직임 영역을 검출하는 것을 특징으로 하는 음란물 판단 방법.
동영상 컨텐트에서 음란물을 판단하는 장치에 있어서,

상기 동영상 컨텐트를 구성하는 복수개의 동영상 프레임들 내에서 움직임이 존재하는 움직임 영역을 검출하는 움직임 영역 검출부;

상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 휘도 값에 기초하여 상기 픽셀들에 대응되는 휘도 변화 각도를 생성하고, 상기 휘도 각도 변화를 이용하여 사람의 피부를 나타내는 것으로 추정되는 피부 추정 영역들을 검출하는 피부 추정 영역 검출부; 및

상기 움직임 영역에서 상기 피부 추정 영역들이 차지하는 비율에 기초하여, 상기 복수개의 동영상 프레임들 각각이 음란물인지 여부를 판단하는 음란물 판단부를 포함하는 것을 특징으로 하는 음란물 판단 장치.
제10항에 있어서,

상기 피부 추정 영역 검출부는

상기 복수개의 동영상 프레임들 각각을 복수개의 분석 영역들로 분할하고, 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 가로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 가로 휘도 차이 값을 생성하고, 상기 분할된 분석 영역들에 포함된 픽셀들 각각의 휘도 값에서 상기 픽셀들로부터 세로 방향으로 인접한 하나의 픽셀의 휘도 값을 감산하여 세로 휘도 차이 값을 생성하고, 상기 가로 휘도 차이 값과 상기 세로 휘도 차이 값을 이용하여 상기 픽셀들 각각에 대응되는 상기 휘도 변화 각도(brightness variation angle)를 생성한 후, 상기 픽셀들 각각에 대응하여 생성된 상기 휘도 변화 각도를 이용하여 상기 분석 영역들 중에서 상기 피부 추정 영역들을 검출하는 것을 특징으로 하는 음란물 판단 장치.
제11항에 있어서,

상기 휘도 변화 각도는

상기 가로 휘도 차이 값의 부호 및 상기 세로 휘도 차이 값의 부호를 참조하여, 상기 세로 휘도 차이 값을 상기 가로 휘도 차이 값으로 나눈 값에 대하여 아크 탄젠트 연산을 적용함으로써 생성되는 것을 특징으로 하는 음란물 판단 장치.
제11항에 있어서,

상기 피부 추정 영역 검출부는

상기 분할된 분석 영역들별로 상기 분할된 분석 영역들 각각에 포함된 픽셀들에 대한 상기 휘도 변화 각도들의 분포를 분석하고, 상기 분석 결과에 기초하여 상기 피부 추정 영역들을 검출하는 것을 특징으로 하는 음란물 판단 장치.
제13항에 있어서,

상기 피부 추정 영역 검출부는

상기 분석 영역들별로 분석을 수행한 결과, 상기 휘도 변화 각도들의 분포의 편차가 제1 임계치 이상이고 제2 임계치 이하인 값을 가지는 분석 영역을 상기 피부 추정 영역으로서 검출하는 것을 특징으로 하는 음란물 판단 장치.
제13항에 있어서,

상기 피부 추정 영역 검출부는

상기 휘도 변화 각도들의 분포 형태를 표시하기 위한 각도 분포 히스토그램을 상기 분할된 분석 영역들별로 생성하고, 상기 분석 영역들 중에서 사람의 피부를 나타내는 것으로 판단되었던 분석 영역으로부터 미리 생성된 참조 히스토그램과 유사한 각도 분포 히스토그램을 가지는 분석 영역을 비교하되 상기 각도 분포 히스토그램에서 소정의 각도를 기준으로 할 때의 분포 편차값과 상기 참조 히스토그램에서 상기 소정의 각도를 기준으로 하는 분포 편차값 차이가 소정 범위 내에 있을 경우 상기 분석 영역을 상기 피부 추정 영역으로서 검출하는 것을 특징으로 하는 음란물 판단 장치.
제11항에 있어서,

상기 피부 추정 영역 검출부는

상기 가로 휘도 차이 값을 제곱승한 값과 상기 세로 휘도 차이 값을 제곱승한 값을 합산한 후, 상기 합산된 값에 루트 연산(root operation)을 적용함으로써 생성된 휘도 차이 값의 크기를 더 이용하여 상기 피부 추정 영역을 검출하는 것을 특징으로 하는 음란물 판단 장치.
제10항에 있어서,

상기 피부 추정 영역 검출부는

상기 복수개의 동영상 프레임들 각각에 포함된 픽셀들의 채도 값에 더 기초하여 상기 피부 추정 영역을 검출하는 것을 특징으로 하는 음란물 판단 장치.
제10항에 있어서,

상기 움직임 영역 검출부는

상기 복수개의 동영상 프레임들과 상기 복수개의 동영상 프레임들에 인접한 적어도 하나의 동영상 프레임을 이용하여 생성된 차영상(Difference image)에 기초하여 상기 움직임 영역을 검출하는 것을 특징으로 하는 음란물 판단 장치.
제10항에 있어서,

상기 음란물 판단 장치는

상기 동영상 컨텐트를 재생하기 위한 디스플레이 장치에 탑재되는 것을 특징으로 하는 음란물 판단 장치.
제1항 내지 제9항 중 어느 한 항의 방법을 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체.