KR20050003071A - 하이라이트 구간 검출 장치 및 방법 - Google Patents

Abstract

본 발명은 하이라이트 구간 검출 장치 및 방법에 관한 것으로, 개시된 하이라이트 구간 검출 장치는 입력되는 동영상 데이터로부터 음성신호를 분리하는 음성신호 추출부와, 분리된 음성신호의 세기를 분석하여 동영상 데이터의 음성신호 세기를 분석하는 음성신호 세기 분석부와, 음성신호의 세기 분석 결과에 의거하여 음성신호 세기의 변화 패턴을 추출하여 동영상 데이터 중에서 하이라이트 구간을 결정하기 위한 음성신호의 문턱값를 결정하는 문턱값 결정부와, 음성신호의 세기 분석 결과와 문턱값을 비교하여 그 비교 결과에 따라 하이라이트 시작점과 종료점을 추출하여 시작점에서부터 종료점까지를 하이라이트 구간으로 결정하는 하이라이트 결정부를 포함하며, 기존의 어떠한 포맷의 동영상 데이터라 할지라도 하이라이트 구간을 쉽게 검출할 수 있고, 기존의 영상 처리 방법과 비교할 때에 훨씬 적은 계산량으로도 하이라이트 구간을 효과적으로 검출할 수 있는 이점이 있다.

Description

하이라이트 구간 검출 장치 및 방법{APPARATUS AND METHOD FOR DETECTING HIGHLIGHT SECTION}

본 발명은 하이라이트 구간 검출 장치 및 방법에 관한 것으로, 더욱 상세하게는 음성정보를 포함하는 동영상 등의 데이터로부터 음성신호의 세기를 기준으로 하여 하이라이트 구간을 검출 및 결정하도록 한 하이라이트 구간 검출 장치 및 방법에 관한 것이다.

근래에 들어서 스포츠 현장을 촬영한 동영상 등의 데이터로부터 하이라이트 구간을 자동 검출(검색)하기 위한 기술들이 연구되고 있으며, 그 결과물로 영상 처리 방법과 MPEG-7과 같이 동영상에 대한 인덱스를 표현하는 방법들이 제안되고 있다.

그러나, MPEG-7은 아직 표준화 단계에 있으므로 기존의 동영상 데이터에 대해서는 적용할 수 없으며, 영상 처리 방법 또한 이론적으로는 화면 변화를 검출하거나 특정 색깔 혹은 특정 물체를 인식하여 하이라이트를 검출하는 방향으로 제안되고 있으나 이를 위한 계산량이 많고 정확성이 낮은 문제점이 있다.

본 발명은 이와 같은 종래의 문제점을 해결하기 위하여 제안한 것으로, 음성정보를 포함하는 동영상 등의 데이터로부터 음성신호의 세기를 기준으로 하여 하이라이트 구간을 검출 및 결정하도록 한 하이라이트 구간 검출 장치 및 방법을 제공하는 데 그 목적이 있다.

이러한 본 발명에 따르면, 스포츠 현장을 촬영한 동영상 등의 데이터로부터 음성신호의 세기를 분석하여 음성신호의 세기가 큰 구간을 하이라이트 구간으로 검출한다. 스포츠의 경우 하이라이트 장면은 대부분이 관중의 환호 소리가 커지며 캐스터 및 해설자는 격앙된 목소리로 중계에 임하게 된다. 이러한 현상은 축구, 야구, 농구 등의 대중 스포츠를 볼 때 공통적으로 나타나는 현상이다. 따라서 이러한 음성신호의 세기 변화에 의거하여 하이라이트 구간을 추출하면 기존의 영상 처리 방법과 비교할 때에 훨씬 적은 계산량으로도 하이라이트 구간을 효과적으로 검출할 수 있는 것이다.

상기와 같은 목적을 실현하기 위한 본 발명의 한 견지로서 하이라이트 구간검출 장치는, 입력되는 동영상 데이터로부터 음성신호를 분리하는 음성신호 추출부와, 상기 분리된 음성신호의 세기를 분석하여 상기 동영상 데이터의 음성신호 세기를 분석하는 음성신호 세기 분석부와, 상기 음성신호의 세기 분석 결과에 의거하여 음성신호 세기의 변화 패턴을 추출하여 상기 동영상 데이터 중에서 하이라이트 구간을 결정하기 위한 음성신호의 문턱값를 결정하는 문턱값 결정부와, 상기 음성신호의 세기 분석 결과와 상기 문턱값을 비교하여 그 비교 결과에 따라 하이라이트 시작점과 종료점을 추출하여 상기 시작점에서부터 종료점까지를 하이라이트 구간으로 결정하는 하이라이트 결정부를 포함한다.

본 발명의 다른 견지로서 하이라이트 구간 검출 방법은, 입력되는 동영상 데이터로부터 음성신호를 분리하는 단계와, 상기 분리된 음성신호의 세기를 분석하여 상기 동영상 데이터의 음성신호 세기를 분석하는 단계와, 상기 음성신호의 세기 분석 결과에 의거하여 음성신호 세기의 변화 패턴을 추출하여 상기 동영상 데이터 중에서 하이라이트 구간을 결정하기 위한 음성신호의 문턱값를 결정하는 단계와, 상기 음성신호의 세기 분석 결과와 상기 문턱값을 비교하여 그 비교 결과에 따라 하이라이트 시작점과 종료점을 추출하여 상기 시작점에서부터 종료점까지를 하이라이트 구간으로 결정하는 단계를 포함한다.

도 1은 본 발명에 따른 하이라이트 구간 검출 장치의 블록 구성도,

도 2는 본 발명에 따른 하이라이트 구간 검출 과정을 나타낸 흐름도.

<도면의 주요 부분에 대한 부호의 설명>

101 : 음성신호 추출부 103 : 음성신호 세기 분석부

105 : 문턱값 결정부 107 : 하이라이트 결정부

109 : 디스플레이부

본 발명의 실시예로는 다수개가 존재할 수 있으며, 이하에서는 첨부한 도면을 참조하여 바람직한 실시예에 대하여 상세히 설명하기로 한다. 이 실시예를 통해 본 발명의 목적, 특징 및 이점들을 보다 잘 이해할 수 있게 된다.

본 발명에 따른 하이라이트 구간 검출 장치는 도 1의 블록 구성도에 나타낸 바와 같이, 음성신호 추출부(101), 음성신호 세기 분석부(103), 문턱값 결정부(105), 하이라이트 결정부(107), 디스플레이부(109)를 포함하여 구성된다.

음성신호 추출부(101)는 입력되는 동영상 데이터로부터 영상신호와 음성신호를 분리하여 음성신호만을 음성신호 세기 분석부(103)로 전달한다.

음성신호 세기 분석부(103)는 음성신호 추출부(101)에서 분리된 음성신호의 세기를 분석하여 동영상 데이터의 전체적인 음성신호 세기를 분석하여 그 결과를 출력한다.

문턱값 결정부(105)는 상기 음성신호의 세기 분석 결과에 의거하여 음성신호 세기의 변화 패턴을 추출하며, 추출된 패턴에 의거하여 하이라이트 구간을 결정하기 위한 음성신호의 문턱값, 즉 기준세기를 결정한다.

하이라이트 결정부(107)는 상기 음성신호의 세기 분석 결과와 상기 문턱값을 비교하여 그 비교 결과에 따라 하이라이트 시작점과 종료점을 추출하며, 상기 시작점에서부터 종료점까지를 하이라이트 구간으로 결정한다.

디스플레이부(109)는 하이라이트 결정부(107)에서 결정되어진 하이라이트 구간에 해당하는 동영상 데이터를 재생하여 화면으로 출력한다.

상기와 같이 구성된 본 발명에 따른 하이라이트 구간 검출 장치에 의해 수행되는 하이라이트 구간 검출 과정을 도 1 및 도 2를 참조하여 아래에서 상세히 설명하기로 한다.

먼저, 동영상 데이터가 입력되면 음성신호 추출부(101)는 입력되는 동영상데이터로부터 영상신호와 음성신호를 분리하여 음성신호만을 음성신호 세기 분석부(103)로 전달한다.

그러면, 음성신호 세기 분석부(103)는 음성신호 추출부(101)에서 분리된 음성신호의 세기를 분석하여 동영상 데이터의 전체적인 음성신호 세기를 분석하여 그 결과를 출력한다(S202).

이후, 문턱값 결정부(105)는 음성신호 세기 분석부(103)로부터 음성신호의 세기 분석 결과를 전달받아서 음성신호의 평균값을 계산하는 방법 등으로 음성신호 세기의 변화 패턴을 추출하며, 추출된 패턴에 의거하여 하이라이트 구간의 결정에 이용되는 음성신호의 문턱값, 즉 기준세기를 결정한다. 여기서 평균값을 하이라이트 구간의 결정을 위한 문턱값으로 결정할 수도 있을 것이며, 평균값에서 소정의 세기만큼 더 큰 신호 세기를 문턱값으로 결정할 수도 있을 것이다(S204∼S206).

이로서, 하이라이트 결정부(107)에는 음성신호 세기 분석부(103)로부터 음성신호의 세기 분석 결과가 입력되며, 문턱값 결정부(105)로부터 문턱값으로 결정된 음성신호의 기준세기가 입력된다.

그러면, 하이라이트 결정부(107)는 음성신호 세기 분석부(103)로부터 입력된 음성신호의 세기 분석 결과와 문턱값 결정부(105)로부터 입력된 문턱값, 즉 음성신호의 기준세기를 비교한다(S208).

여기서, 하이라이트 결정부(107)는 분석된 음성신호의 세기가 기준세기를 상위하는 하이라이트 조건에 만족하면 현재의 시점을 하이라이트 시작점을 결정하며(S210∼S212), 이후 동영상 데이터를 계속하여 검색하다가 분석된 음성신호의 세기가 기준세기를 상위하는 하이라이트 조건에 만족하지 않으면 현재의 시점을 하이라이트 종료점으로 결정하고(S214∼S216), 기 결정된 하이라이트 시작점에서부터 하이라이트 종료점까지를 하이라이트 구간으로 검출 및 결정한다(S218).

이후, 하이라이트 결정부(107)에서 결정되어진 하이라이트 구간에 해당하는 동영상 데이터는 디스플레이부(109)에 의하여 재생되어 화면으로 출력된다.

상기에서는 본 발명의 일 실시예에 국한하여 설명하였으나 본 발명의 기술이 당업자에 의하여 용이하게 변형 실시될 가능성이 자명하다. 이러한 변형된 실시예들은 본 발명의 특허청구범위에 기재된 기술사상에 포함된다고 하여야 할 것이다.

전술한 바와 같이 본 발명은 음성정보를 포함하는 동영상 등의 데이터로부터 음성신호의 세기를 기준으로 하여 하이라이트 구간을 검출 및 결정함으로써, 기존의 어떠한 포맷의 동영상 데이터라 할지라도 하이라이트 구간을 쉽게 검출할 수 있으며, 기존의 영상 처리 방법과 비교할 때에 훨씬 적은 계산량으로도 하이라이트 구간을 효과적으로 검출할 수 있다.

Claims (4)

1. 입력되는 동영상 데이터로부터 음성신호를 분리하는 음성신호 추출부와,

   상기 분리된 음성신호의 세기를 분석하여 상기 동영상 데이터의 음성신호 세기를 분석하는 음성신호 세기 분석부와,

   상기 음성신호의 세기 분석 결과에 의거하여 음성신호 세기의 변화 패턴을 추출하여 상기 동영상 데이터 중에서 하이라이트 구간을 결정하기 위한 음성신호의 문턱값를 결정하는 문턱값 결정부와,

   상기 음성신호의 세기 분석 결과와 상기 문턱값을 비교하여 그 비교 결과에 따라 하이라이트 시작점과 종료점을 추출하여 상기 시작점에서부터 종료점까지를 하이라이트 구간으로 결정하는 하이라이트 결정부

   를 포함하는 하이라이트 구간 검출 장치.
2. 제 1 항에 있어서,

   상기 문턱값 결정부는 상기 동영상 데이터의 음성신호 평균값 또는 상기 평균값에서 소정의 세기만큼 더 큰 신호 세기를 상기 문턱값으로 결정하는 것을 특징으로 한 하이라이트 구간 검출 장치.
3. 입력되는 동영상 데이터로부터 음성신호를 분리하는 단계와,

   상기 분리된 음성신호의 세기를 분석하여 상기 동영상 데이터의 음성신호 세기를 분석하는 단계와,

   상기 음성신호의 세기 분석 결과에 의거하여 음성신호 세기의 변화 패턴을 추출하여 상기 동영상 데이터 중에서 하이라이트 구간을 결정하기 위한 음성신호의 문턱값를 결정하는 단계와,

   상기 음성신호의 세기 분석 결과와 상기 문턱값을 비교하여 그 비교 결과에 따라 하이라이트 시작점과 종료점을 추출하여 상기 시작점에서부터 종료점까지를 하이라이트 구간으로 결정하는 단계

   를 포함하는 하이라이트 구간 검출 방법.
4. 제 3 항에 있어서,

   상기 문턱값 결정 단계는 상기 동영상 데이터의 음성신호 평균값 또는 상기 평균값에서 소정의 세기만큼 더 큰 신호 세기를 상기 문턱값으로 결정하는 것을 특징으로 한 하이라이트 구간 검출 방법.