KR20220030133A - 스포츠 경기 요약 영상 생성 장치 및 생성 방법 - Google Patents

Abstract

본 발명의 일실시예에 따르면, 스포츠 경기 요약 영상 생성 장치에 있어서, 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하고, 상기 로그 정보를 기초로 상기 동영상과 관련된 경기 정보를 상기 동영상에 태깅하고, 상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성한다.

Description

스포츠 경기 요약 영상 생성 장치 및 생성 방법{DEVICE AND METHOD FOR GENERATING CONDENSED VIDEO OF SPORTS GAME}

아래의 실시예들은 스포츠 경기 요약 영상 생성 장치 및 생성 방법에 관한 것이다.

일반적으로 장면전환(Scene Change)이란 연속되는 동영상의 장면에서 한 장면이 끝난 후, 다른 장면으로 동영상이 다시 시작되는 현상을 말한다. 장면 전환은, 통상 임의의 장면이 점차 사라지다가 다시 다른 장면이 서서히 나타나는 페이드-아웃(fade out) 및 페이드-인(fade in), 임의의 두 장면이 서로 다른 방향에서 시간을 두고 천천히 겹치는 오버랩(overlap)과, 단순장면전환 등으로 구분하기도 한다.

머신 러닝(machine learning)은 인공 지능의 한 분야로, 패턴인식과 컴퓨터 학습 이론의 연구로부터 진화한 분야이며, 컴퓨터가 학습할 수 있도록 하는 알고리즘과 기술을 개발하는 분야를 말한다.

머신 러닝의 핵심은 표현(representation)과 일반화(generalization)에 있다. 표현이란 데이터의 평가이며, 일반화란 아직 알 수 없는 데이터에 대한 처리이다. 이는 전산 학습 이론 분야이기도 하다.

딥 러닝(deep learning)은 여러 비선형 변환기법의 조합을 통해 높은 수준의 추상화를 시도하는 기계학습(machine learning) 알고리즘의 집합으로 정의되며, 큰 틀에서 사람의 사고방식을 컴퓨터에게 가르치는 기계학습의 한 분야라고 이야기할 수 있다.

본 발명의 실시예에 따르면, 스포츠 경기의 요약 영상을 생성할 수 있는 스포츠 경기 요약 영상 생성 장치 및 생성 방법을 제공할 수 있다.

또한, 본 발명의 다른 실시예에 따르면, 스포츠 경기 동영상을 미리 설정된 동작이 포함된 이벤트 또는 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 복수개의 구간으로 구분할 수 있는 스포츠 경기 요약 영상 생성 장치 및 생성 방법을 제공할 수 있다.

또한, 본 발명의 또 다른 실시예에 따르면, 스포츠 경기 동영상을 복수개의 구간으로 구분하고, 상기 구분한 복수개의 구간 중 적어도 하나의 구간의 일부를 기초로 요약 영상을 생성할 수 있는 스포츠 경기 요약 영상 생성 장치 및 생성 방법을 제공할 수 있다.

또한, 본 발명의 또 다른 실시예에 따르면, 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트를 구분하여 복수개의 구간 중 적어도 어느 하나의 구간의 정교화 방법을 결정할 수 있는 스포츠 경기 요약 영상 생성 장치 및 생성 방법을 제공할 수 있다.

또한, 본 발명의 또 다른 실시예에 따르면, 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하고, 상기 획득한 로그 정보와 요약 구간을 조합하여 요약 영상을 생성할 수 있는 스포츠 경기 요약 영상 생성 장치 및 생성 방법을 제공할 수 있다.

본 발명의 일실시예에 따르면, 스포츠 경기 요약 영상 생성 장치에 있어서, 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하고, 상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성한다.

또한, 상기 적어도 하나의 프로세서는, 상기 태깅한 동영상을 상기 이벤트를 기초로 복수개의 구간으로 구분하고, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 상기 이벤트를 기초로 요약 구간으로 결정할 수 있다.

또한, 상기 이벤트는, 상기 스포츠 경기에서 발생하는 행위와 관련된 이벤트일 수 있다.

또한, 상기 경기 정보는, 상기 스포츠 경기의 진행 시간, 상기 동영상의 프레임 번호, 상기 스포츠 경기의 진행 정보 및 상기 동영상의 장면 정보 중 적어도 어느 하나를 포함할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하고, 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하고, 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 미리 설정된 동작이 포함된 이벤트와 관련된 제1 기준을 설정하고, 상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 첫번째 프레임을 결정하고, 상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 마지막 프레임을 결정하고, 상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 미리 설정된 동작이 포함되지 않은 이벤트와 관련된 제2 기준을 설정하고, 상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 첫번째 프레임을 결정하고, 상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 마지막 프레임을 결정하고, 상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 미리 설정된 방법을 기초로 정교화 할 수 있다.

또한, 상기 미리 설정된 방법은, 장면 전환 및 장면 인식일 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하고, 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하고, 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하고, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간 내의 적어도 어느 하나의 장면을 기초로 요약 종료 시점을 결정하고, 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하고, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간과 연결되는 구간이 시작되는 프레임을 기초로 요약 종료 시점을 결정하고, 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정할 수 있다.

또한, 상기 적어도 하나의 프로세서는, 상기 요약 구간을 조합하는 기준을 결정할 수 있다.

본 발명의 다른 실시예에 따르면, 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하는 동작, 상기 로그 정보를 기초로 상기 동영상과 관련된 경기 정보를 상기 동영상에 태깅하는 동작 및 상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성하는 동작을 포함할 수 있다.

또한, 상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성하는 동작은, 상기 태깅한 동영상을 상기 이벤트를 기초로 복수개의 구간으로 구분하는 동작 및 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 상기 이벤트를 기초로 요약 구간으로 결정하는 동작을 더 포함할 수 있다.

또한, 상기 이벤트는, 상기 스포츠 경기에서 발생하는 행위와 관련된 이벤트일 수 있다.

또한, 상기 경기 정보는, 상기 스포츠 경기의 진행 시간, 상기 동영상의 프레임 번호, 상기 스포츠 경기의 진행 정보 및 상기 동영상의 장면 정보 중 적어도 어느 하나를 포함하는 정보일 수 있다.

또한, 상기 복수개의 구간으로 구분하는 동작은, 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하는 동작, 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작 및 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작을 포함할 수 있다.

또한, 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작은, 상기 미리 설정된 동작이 포함된 이벤트와 관련된 제1 기준을 설정하는 동작, 상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 첫번째 프레임을 결정하는 동작, 상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 마지막 프레임을 결정하는 동작 및 상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정하는 동작을 포함할 수 있다.

또한, 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작은, 상기 미리 설정된 동작이 포함되지 않은 이벤트와 관련된 제2 기준을 설정하는 동작, 상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 첫번째 프레임을 결정하는 동작, 상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 마지막 프레임을 결정하는 동작 및 상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정하는 동작을 포함할 수 있다.

또한, 상기 요약 구간으로 결정하는 동작은, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 미리 설정된 방법을 기초로 정교화 하는 동작을 포함할 수 있다.

또한, 상기 미리 설정된 방법은, 장면 전환 및 장면 인식일 수 있다.

또한, 상기 요약 구간으로 결정하는 동작은, 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하는 동작, 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작 및 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작을 포함할 수 있다.

또한, 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작은, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하는 동작, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간 내의 적어도 어느 하나의 장면을 기초로 요약 종료 시점을 결정하는 동작 및 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정하는 동작을 포함할 수 있다.

또한, 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작은, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하는 동작, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간과 연결되는 구간이 시작되는 프레임을 기초로 요약 종료 시점을 결정하는 동작 및 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정하는 동작을 포함할 수 있다.

또한, 상기 스포츠 경기 요약 영상을 생성하는 동작은, 상기 요약 구간을 조합하는 기준을 결정하는 동작을 포함할 수 있다.

본 발명의 일실시예에 따르면, 스포츠 경기의 요약 영상을 생성할 수 있는 효과가 있다.

또한, 스포츠 경기 동영상을 미리 설정된 동작이 포함된 이벤트 또는 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 복수개의 구간으로 구분할 수 있는 효과가 있다.

또한, 스포츠 경기 동영상을 복수개의 구간으로 구분하고, 상기 구분한 복수개의 구간 중 적어도 하나의 구간의 일부를 기초로 요약 영상을 생성할 수 있는 효과가 있다.

또한, 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트를 구분하여 복수개의 구간 중 적어도 어느 하나의 구간의 정교화 방법을 결정할 수 있는 효과가 있다.

또한, 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하고, 상기 획득한 로그 정보와 요약 구간을 조합하여 요약 영상을 생성할 수 있는 효과가 있다.

도 1은 일실시예에 따른 스포츠 경기 요약 영상 생성 장치의 구성을 나타내는 도면이다.
도 2는 일실시예에 따라 스포츠 경기 로그 정보에서 요약 영상과 조합할 이벤트를 추출하는 모습을 나타내는 도면이다.
도 3은 일실시예에 따라 스포츠 경기 동영상에 경기 정보를 태깅하는 모습을 나타내는 도면이다.
도 4는 일실시예에 따라 투구 수 정보를 기초로 미리 설정된 동작이 포함된 이벤트에 해당하는 프레임을 구분하는 모습을 나타내는 도면이다.
도 5는 일실시예에 따라 이벤트와 상기 이벤트에 대응하는 프레임을 나타내는 도면이다.
도 6은 일실시예에 따라 투구 동작이 포함된 이벤트가 발생한 프레임을 정교화한 모습을 나타내는 도면이다.
도 7은 일실시예에 따라 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 요약 시작 시점을 결정하는 모습을 나타내는 도면이다.
도 8은 일실시예에 따라 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 요약 종료 시점을 결정하는 모습을 나타내는 도면이다.
도 9는 일실시예에 따라 로그 정보를 기초로 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 프레임을 구분하는 모습을 나타내는 도면이다.
도 10은 일실시예에 따라 투구 동작이 포함되지 않은 이벤트가 발생한 프레임을 정교화 하는 모습을 나타내는 도면이다.
도 11은 일실시예에 따라 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에서 요약 시작 시점을 결정하는 모습을 나타내는 도면이다.
도 12는 일실시예에 따라 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에서 요약 종료 시점을 결정하는 모습을 나타내는 도면이다.
도 13은 일실시예에 따른 스포츠 경기 요약 영상 생성 방법을 나타내는 플로우 차트이다.

본 명세서에 개시되어 있는 본 발명의 개념에 따른 실시 예들에 대해서 특정한 구조적 또는 기능적 설명들은 단지 본 발명의 개념에 따른 실시 예들을 설명하기 위한 목적으로 예시된 것으로서, 본 발명의 개념에 따른 실시 예들은 다양한 형태들로 실시될 수 있으며 본 명세서에 설명된 실시 예들에 한정되지 않는다.

본 발명의 개념에 따른 실시 예들은 다양한 변경들을 가할 수 있고 여러 가지 형태들을 가질 수 있으므로 실시 예들을 도면에 예시하고 본 명세서에 상세하게 설명하고자 한다. 그러나, 이는 본 발명의 개념에 따른 실시 예들을 특정한 개시 형태들에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물, 또는 대체물을 포함한다.

제1 또는 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로만, 예컨대 본 발명의 개념에 따른 권리 범위로부터 이탈되지 않은 채, 제1구성요소는 제2구성요소로 명명될 수 있고, 유사하게 제2구성요소는 제1구성요소로도 명명될 수 있다.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다. 구성요소들 간의 관계를 설명하는 다른 표현들, 즉 "~사이에"와 "바로 ~사이에" 또는 "~에 이웃하는"과 "~에 직접 이웃하는" 등도 마찬가지로 해석되어야 한다.

본 명세서에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.

본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다.

일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.

이하의 설명에서 동일한 식별 기호는 동일한 구성을 의미하며, 불필요한 중복적인 설명 및 공지 기술에 대한 설명은 생략하기로 한다.

본 발명의 실시 예에서 '통신', '통신망' 및 '네트워크'는 동일한 의미로 사용될 수 있다. 상기 세 용어들은, 파일을 사용자 단말, 다른 사용자들의 단말 및 다운로드 서버 사이에서 송수신할 수 있는 유무선의 근거리 및 광역 데이터 송수신망을 의미한다.

이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다.

도 1은 일실시예에 따른 스포츠 경기 요약 영상 생성 장치의 구성을 나타내는 도면이다.

도 1을 참조하면, 일실시예에 따른 스포츠 경기 요약 영상 생성 장치(100)는 프로세서(110), 입출력 인터페이스 모듈(120) 및 메모리(130)를 포함한다.

일실시예에 따른 스포츠 경기 요약 영상 생성 장치(100)를 구성하는 프로세서(110), 입출력 인터페이스 모듈(120) 및 메모리(130)는 상호 연결되어 있으며, 상호 데이터를 전송하는 것이 가능하다.

일실시예에 따라, 프로세서(110)는 메모리(130)에 저장된 프로그램들 또는 명령들을 실행시킬 수 있다. 이때, 메모리(130)에는 스포츠 경기 요약 영상 생성 장치(100)를 동작시키기 위한 동작프로그램(예컨대, OS)이 저장될 수 있다.

일실시예에 따라, 프로세서(110)는 스포츠 경기 요약 영상 생성 장치(100)에 대한 정보를 관리하기 위한 프로그램을 실행시킬 수 있다.

일실시예에 따라, 프로세서(110)는 스포츠 경기 요약 영상 생성 장치(100)의 동작을 관리하기 위한 프로그램을 실행시킬 수 있다.

일실시예에 따라, 프로세서(110)는 입출력 인터페이스 모듈(120)의 동작을 관리하기 위한 프로그램을 실행시킬 수 있다.

일실시예에 따라, 프로세서(110)는 입출력 인터페이스 모듈(120)을 통해 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득할 수 있다. 이때, 상기 스포츠 경기를 포함하는 동영상은 방송국이 송출한 동영상, 스트리밍 서비스로 제공되는 동영상 또는 별도의 저장 장치에 저장된 동영상 일 수 있으나, 상기 스포츠 경기를 포함하는 동영상이 이에 한정되는 것은 아니다. 또한, 상기 로그 정보는 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 정보로서, 이벤트가 발생한 순서에 따라 기록된 정보일 수 있다. 또한, 일실시예에 따라 상기 스포츠 경기가 야구인 경우, 상기 로그 정보에는 상황에 관한 정보와 주체에 관한 정보가 포함될 수 있으며, 상기 상황에 관한 정보는 이닝, 점수, 볼카운트, 주자 상황, 투구수, 아웃 카운트, 보크, 견제사, 도루, 견제 후 도루 성공, 견제 후 도루 실패, 자동 고의 사구 등 일 수 있고, 상기 주체에 관한 정보는 타자, 투수, 주자 등일 수 있으나, 상기 상황에 관한 정보와 상기 주체에 관한 정보가 이에 한정되는 것은 아니다.

ⅰ) 이벤트 추출

일실시예에 따라, 프로세서(110)는 상기 획득한 로그 정보에서 미리 설정된 적어도 하나의 이벤트를 추출할 수 있다.

일실시예에 따라, 프로세서(110)는 로그 정보에서 이벤트를 나타내는 문자(예컨대, eID)를 검색할 수 있다.

일실시예에 따라, 프로세서(110)는 검색 결과를 획득하고, 상기 획득한 검색 결과를 기초로 로그 정보에서 미리 설정된 적어도 하나의 이벤트를 추출할 수 있다.

일실시예에 따라, 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 로그 정보에서 삼진, 낫아웃, 땅볼, 직선타, 플라이, 병살, 삼중살, 희생 번트, 희생 플라이, 실책으로 출루, 야수 선택, 볼넷, 몸에 맞는 공, 1루타, 2루타, 3루타, 홈런, 폭투, 포일, 도루 성공, 도루 실패, 아웃 카운트, 보크, 견제사, 도루, 견제 후 도루 성공, 견제 후 도루 실패, 자동 고의 사구 등과 관련된 이벤트를 추출할 수 있으나, 프로세서(110)가 로그 정보에서 추출할 수 있는 이벤트가 이에 한정되는 것은 아니다.

ⅱ) 경기 정보를 동영상에 태깅

일실시예에 따라, 프로세서(110)는 로그 정보를 기초로 상기 동영상과 관련된 경기 정보를 상기 동영상에 태깅할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 동영상의 장면에 포함된 중계판(중계판 자막 정보)을 통해 상기 장면의 상황 정보를 파악할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 중계판(중계판 자막 정보)을 통해, 이닝, 초(top), 말(bottom), 점수, 볼카운트, 주자 여부, 투구 수 등의 장면의 상황 정보를 파악할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 파악한 상황 정보와 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보와의 비교를 통해 상기 장면에 대한 태그 정보를 추출할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 중계판(중계판 자막 정보)을 통해 파악한 상황 정보와 야구 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보와의 비교를 통해 상기 야구 경기 로그 정보에서 태그 정보를 추출할 수 있다. 이때, 상기 야구 경기 로그 정보에서 추출한 태그 정보는 순번, 동영상의 시점(경기의 진행 시간), 동영상의 프레임 번호, 이닝, 경기 스코어, 볼카운트, 주자상황, 투수 명, 투수의 투구 수, 타자 명, 타자 타석의 투구 수, 구질, 투구 결과, 장면(scene)(예컨대, 피치(pitch), 클로즈업(closeup), 필드(field) 등) 등일 수 있으나, 상기 야구 경기 로그 정보에서 추출한 태그 정보가 이에 한정되는 것은 아니다.

일실시예에 따라, 프로세서(110)는 스포츠 경기에서 이벤트가 발생한 장면마다 상기 장면에 대한 태그 정보를 추출할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 추출한 태그 정보를 상기 이벤트가 발생하는 장면마다 상기 장면에 대해 추출한 태그 정보를 태깅할 수 있다.

ⅲ) 태깅한 동영상을 복수개의 구간으로 구분

일실시예에 따라, 프로세서(110)는 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분할 수 있다. 이때, 상기 미리 설정된 동작은 투수의 투구 동작일 수 있으나 상기 미리 설정된 동작이 이에 한정되는 것은 아니다.

① 미리 설정된 동작이 포함된 이벤트

일실시예에 따라, 프로세서(110)는 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 미리 설정된 동작이 포함된 이벤트 와 관련된 제1 기준을 설정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작을 상기 미리 설정된 동작이라고 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 이벤트가 발생한 투구 수를 타겟 투구 수로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 타겟 투구 수 -1의 시작 프레임부터 상기 타겟 투구 수의 마지막 프레임을 상기 투수의 투구 동작이 포함된 이벤트와 관련된 제1 기준으로 설정할 수 있다.

일실시예에 따라, 프로세서(110)는 태깅한 동영상으로부터 상기 설정한 제1 기준을 기초로 첫번째 프레임을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 타겟 투구 수 -1에 해당하는 프레임이 시작되는 프레임을 첫번째 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 태깅한 동영상으로부터 상기 설정한 제1 기준을 기초로 마지막 프레임을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 타겟 투구 수에 해당하는 프레임 중 최종 프레임을 마지막 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 동일한 이닝(inning)에 동일한 타겟 투구 수를 던진 투수가 중복될 경우, 투수의 이름 또는 몇 번째 투수인지를 이용하여 투구 수(예컨대, 타겟 투구 수)를 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 결정한 투구 수(예컨대, 타겟 투구 수)를 상기 태깅한 동영상을 복수개의 구간으로 구분할 때 반영할 수 있다.

② 미리 설정된 동작이 포함되지 않은 이벤트

일실시예에 따라, 프로세서(110)는 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분할 수 있다. 이때, 상기 미리 설정된 동작은 투수의 투구 동작일 수 있으나 상기 미리 설정된 동작이 이에 한정되는 것은 아니다.

일실시예에 따라, 프로세서(110)는 상기 미리 설정된 동작이 포함되지 않은 이벤트와 관련된 제2 기준을 설정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작을 상기 미리 설정된 동작이라고 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 이벤트가 발생한 상황에서의 현재 투구 수를 타겟 투구 수로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 타겟 투구 수의 시작 프레임부터 상기 타겟 투구 수의 마지막 프레임을 상기 투수의 투구 동작이 포함되지 않은 이벤트와 관련된 제2 기준으로 설정할 수 있다.

일실시예에 따라, 프로세서(110)는 태깅한 동영상으로부터 상기 설정한 제2 기준을 기초로 첫번째 프레임을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 타겟 투구 수에 해당하는 프레임이 시작되는 프레임을 첫번째 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 태깅한 동영상으로부터 상기 설정한 제2 기준을 기초로 마지막 프레임을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 타겟 투구 수에 해당하는 프레임 중 최종 프레임을 마지막 프레임으로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기이고, 투구 동작이 포함되지 않은 이벤트가 보크인 경우, 상기 타겟 투구 수 +1에 해당하는 프레임 중 최종 프레임을 마지막 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 동일한 이닝(inning)에 동일한 타겟 투구 수를 던진 투수가 중복될 경우, 투수의 이름 또는 몇 번째 투수인지를 이용하여 투구 수(예컨대, 타겟 투구 수)를 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 결정한 투구 수(예컨대, 타겟 투구 수)를 상기 태깅한 동영상을 복수개의 구간으로 구분할 때 반영할 수 있다.

ⅳ) 구간 정교화

일실시예에 따라, 프로세서(110)는 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 미리 설정된 방법을 기초로 정교화 할 수 있다. 이때, 상기 미리 설정된 방법은 장면 전환 및 장면 인식일 수 있으나, 상기 미리 설정된 방법이 이에 한정되는 것은 아니다.

일실시예에 따라, 프로세서(110)는 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 장면 전환을 검출하여 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 복수개의 구간으로 다시 구분할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 RGB를 HSV(Hue, Saturation, Value, 이하 HSV라 한다)로 컬러 변환할 수 있다.

일실시예에 따라, 프로세서(110)는 변환된 HSV에 대해 HSV Pixel Quantization을 수행할 수 있다. 예컨대, 프로세서(110)는 24 bit를 10 bit로 HSV Pixel Quantization을 수행할 수 있다. 여기서, 10 bit는 일례로서, 장면 전환을 검출할 정도에 대응하는 해당 프레임의 bit를 나타낸다.

일실시예에 따라, 프로세서(110)는 HSV 각각의 채널 별로 이전 프레임과 현재 프레임의 히스토그램 차이를 결정할 수 있다. 이때, 프로세서(110)는 모든 bin(히스토그램의 한 구간)과 관련하여, 히스토그램 차이의 평균을 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 히스토그램 차이의 평균을 미리 설정된 기준과 비교하여, 장면 전환 여부를 검출할 수 있다. 예컨대, 히스토그램 차이의 평균이 미리 설정된 기준인 임계치(예를 들면, 7000)보다 높은 경우, 현재 프레임은 이전 프레임에서 장면이 전환되었다고 검출할 수 있다. 또한, 히스토그램 차이의 평균이 임계치 보다 낮은 경우, 현재 프레임과 이전 프레임은 장면이 전환되지 않았다고 검출할 수 있다.

① 미리 설정된 동작이 포함된 이벤트

일실시예에 따라, 프로세서(110)는 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함된 이벤트에 해당하는 구간을 검출할 수 있다. 이때, 상기 미리 설정된 동작은 투수의 투구 동작일 수 있으나 상기 미리 설정된 동작이 이에 한정되는 것은 아니다.

일실시예에 따라, 프로세서(110)는 상기 검출한 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에 장면 인식을 적용할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함된 구간에서 상기 미리 설정된 동작이 포함된 이벤트가 시작되는 프레임을 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 타겟 투구 수(예컨대, 투구 수 50개) -1에 해당하는 프레임(예컨대, 투구 수 49개에 해당하는 프레임) 중 마지막 투구 장면의 첫 프레임을 투구 동작이 포함된 이벤트가 시작되는 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함된 구간에서 상기 미리 설정된 동작이 포함된 이벤트가 종료되는 프레임을 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 타겟 투구 수(예컨대, 투구 수 50개) 상태의 마지막 투구 구간의 첫 프레임 직전 프레임을 투구 동작이 포함된 이벤트가 종료되는 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함된 구간에 딥러닝 기반의 장면 인식을 적용할 수 있다. 이때, 상기 딥러닝 기반의 장면 인식은 ResNet v2 구조를 갖는 딥러닝 기반의 장면 인식일 수 있으나, 상기 딥러닝 기반의 장면 인식이 이에 한정되는 것은 아니다.

② 미리 설정된 동작이 포함되지 않은 이벤트

일실시예에 따라, 프로세서(110)는 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간을 검출할 수 있다. 이때, 상기 미리 설정된 동작은 투수의 투구 동작일 수 있으나 상기 미리 설정된 동작이 이에 한정되는 것은 아니다.

일실시예에 따라, 프로세서(110)는 상기 검출한 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에 장면 인식을 적용할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 동일 투구 수 내에서 점수가 변화하는 지점, 주자 상황이 변화하는 지점 및 아웃카운트가 변화하는 지점 중 적어도 어느 하나의 지점을 상황변경점으로 결정할 수 있으나, 프로세서(110)가 상황변경점으로 결정할 수 있는 지점이 이에 한정되는 것은 아니다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함되지 않은 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 시작되는 프레임을 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함되지 않은 구간에서 상황변경점을 인식할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상황변경점에서의 타겟 투구 수를 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 투구 동작이 포함되지 않은 이벤트가 발생한 타겟 투구 수(예컨대, 투구 수 50개)에 해당하는 프레임(예컨대, 투구 수 50개에 해당하는 프레임) 중 상황변경점 이전의 마지막 투구 장면의 첫 프레임을 상기 투구 동작이 포함되지 않은 이벤트가 시작되는 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함되지 않은 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 종료되는 프레임을 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 타겟 투구 수 상태의 상황변경점 이후 첫 투구 장면의 첫 프레임의 직전 프레임을 상기 투구 동작이 포함되지 않은 이벤트가 종료되는 프레임으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 적용한 장면 인식을 통하여 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함되지 않은 구간에 딥러닝 기반의 장면 인식을 적용할 수 있다. 이때, 상기 딥러닝 기반의 장면 인식은 ResNet v2 구조를 갖는 딥러닝 기반의 장면 인식일 수 있으나, 상기 딥러닝 기반의 장면 인식이 이에 한정되는 것은 아니다.

ⅴ) 요약 구간 결정

일실시예에 따라, 프로세서(110)는 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 상기 이벤트를 기초로 요약 구간으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분할 수 있다. 이때, 상기 미리 설정된 동작은 투수의 투구 동작일 수 있으나 상기 미리 설정된 동작이 이에 한정되는 것은 아니다.

① 미리 설정된 동작이 포함된 이벤트

일실시예에 따라, 프로세서(110)는 구간 정교화가 적용된 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작이 포함된 이벤트를 타격이 발생한 경우와 타격이 발생하지 않은 경우로 구분할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작이 포함된 이벤트 중 타격이 발생한 경우 투구 동작이 포함된 구간의 마지막 프레임으로부터 미리 설정된 시간(예컨대, 3초) 전을 요약 시작 시점으로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작이 포함된 이벤트 중 타격이 발생하지 않은 경우 투구 동작이 포함된 구간의 마지막 프레임으로부터 미리 설정된 시간(예컨대, 7초) 전을 요약 시작 시점으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 구간 정교화가 적용된 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간 내의 적어도 어느 하나의 장면을 기초로 요약 종료 시점을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작이 포함된 이벤트를 타격이 발생한 경우와 타격이 발생하지 않은 경우로 구분할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작이 포함된 이벤트 중 타격이 발생한 경우 투구 동작이 포함된 구간의 마지막 프레임부터 미리 설정된 시간(예컨대, 10초) 경과 후의 장면을 검출하고, 상기 검출한 장면의 마지막 프레임을 요약 종료 시점으로 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 투수의 투구 동작이 포함된 이벤트 중 타격이 발생하지 않은 경우 투구 동작 외의 장면들이 연결되면, 투구 동작 외의 장면의 시간을 측정하고, 상기 측정한 투구 동작 외의 장면의 시간이 미리 설정된 시간(예컨대, 5초) 미만이면 투구 동작 외의 장면의 마지막 프레임을 요약 종료 시점으로 결정하고, 상기 측정한 투구 동작 외의 장면의 시간이 미리 설정된 시간(예컨대, 5초)이상이면 상기 투구 장면의 마지막 프레임을 요약 종료 시점으로 결정할 수 있다.일실시예에 따라, 프로세서(110)는 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 결정한 요약 구간에 포함된 이벤트의 내용을 구분하기 위하여 상기 결정한 요약 구간에 미리 설정된 표시(예컨대, 이벤트 발생의 시간이 표시된 파일명)를 할 수 있다.

② 미리 설정된 동작이 포함되지 않은 이벤트

일실시예에 따라, 프로세서(110)는 구간 정교화가 적용된 상기 구분한 복수개의 구간 중 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간의 직전 투구 동작이 포함된 구간의 마지막 프레임으로부터 미리 설정된 시간(예컨대, 10초) 전을 요약 시작 시점으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 구간 정교화가 적용된 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간과 연결되는 구간이 시작되는 프레임을 기초로 요약 종료 시점을 결정할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기인 경우, 프로세서(110)는 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간 직전의 투구 동작이 포함된 구간을 인식하고, 상기 인식한 투구 동작이 포함된 구간의 다음 투구 동작이 포함된 구간이 시작되는 프레임의 직전 프레임을 요약 종료 시점으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 결정한 요약 구간에 포함된 이벤트의 내용을 구분하기 위하여 상기 결정한 요약 구간에 미리 설정된 표시(예컨대, 이벤트 발생의 시간이 표시된 파일명)를 할 수 있다.

ⅵ) 요약 영상 생성

일실시예에 따라, 프로세서(110)는 상기 결정한 요약 구간 및 상기 로그 정보를 조합하여 스포츠 경기 요약 영상을 생성할 수 있다.

일실시예에 따라, 프로세서(110)는 상기 요약 구간을 조합하는 기준을 결정할 수 있다. 이때, 상기 기준은 복수 개 일 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기이고, 상기 조합하는 기준이 디폴트(default)인 경우, 프로세서(110)는 투구 동작이 포함된 이벤트를 기초로 결정한 요약 구간, 투구 동작이 포함되지 않은 이벤트를 기초로 결정한 요약 구간 및 로그 정보에서 추출한 모든 이벤트를 조합하여 야구 경기 요약 영상을 생성할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기이고, 상기 조합하는 기준이 홈(home)팀인 경우 프로세서(110)는 홈팀에 대한 투구 동작이 포함된 이벤트를 기초로 결정한 요약 구간, 투구 동작이 포함되지 않은 이벤트를 기초로 결정한 요약 구간 및 로그 정보에서 추출한 홈팀에 대한 이벤트를 조합하여 야구 경기 요약 영상을 생성할 수 있다.

일실시예에 따라, 상기 스포츠 경기가 야구 경기이고, 상기 조합하는 기준이 어웨이(away)팀인 경우 프로세서(110)는 어웨이(away)팀에 대한 투구 동작이 포함된 이벤트를 기초로 결정한 요약 구간, 투구 동작이 포함되지 않은 이벤트를 기초로 결정한 요약 구간 및 로그 정보에서 추출한 어웨이(away)팀에 대한 이벤트를 조합하여 야구 경기 요약 영상을 생성할 수 있다.

입출력 인터페이스 모듈(120)은 네트워크를 통하여 외부 장치(예컨대, 서버)와 연결될 수 있다.

입출력 인터페이스 모듈(120)은 외부 장치로부터 데이터를 획득할 수 있다.

입출력 인터페이스 모듈(120)은 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득할 수 있다.

입출력 인터페이스 모듈(120)은 학습을 위한 학습 데이터를 획득할 수 있다.

입출력 인터페이스 모듈(120)은 사용자의 입력을 획득할 수 있다.

입출력 인터페이스 모듈(120)은 스포츠 경기 요약 영상 생성 장치(100)와 일체형으로 제공될 수 있다.

입출력 인터페이스 모듈(120)은 스포츠 경기 요약 영상 생성 장치(100)에서 분리되어 제공될 수 있다.

입출력 인터페이스 모듈(120)은 스포츠 경기 요약 영상 생성 장치(100)와 통신적으로 연결될 별도의 장치일 수 있다.

입출력 인터페이스 모듈(120)은 외부 장치와 연결되기 위한 포트(예컨대, USB 포트)를 포함할 수 있다.

입출력 인터페이스 모듈(120)은 모니터, 터치스크린, 마우스, 전자펜, 마이크로폰, 키보드, 스피커, 이어폰, 헤드폰 또는 터치패드를 포함할 수 있다.

메모리(130)는 입출력 인터페이스 모듈(120)을 통해 획득한 데이터를 저장할 수 있다.

메모리(130)는 프로세서(110)가 로그 정보로부터 추출한 이벤트를 저장할 수 있다.

메모리(130)는 프로세서(110)가 구분한 구간을 저장할 수 있다.

메모리(130)는 프로세서(110)가 결정한 요약 구간을 저장할 수 있다.

메모리(130)는 프로세서(110)가 생성한 스포츠 경기 요약 영상을 저장할 수 있다.

메모리(130)는 프로세서(110)가 태깅한 장면을 저장할 수 있다.

메모리(130)는 프로세서(110)가 결정한 기준을 저장할 수 있다.

여기서 사용된 '장치 또는 모듈'이라는 용어는 논리적인 구성 단위를 나타내는 것으로서, 반드시 물리적으로 구분되는 구성 요소가 아니라는 점은 본 발명이 속하는 기술분야의 당업자에게 자명한 사항이다.

도 2는 일실시예에 따라 스포츠 경기 로그 정보에서 요약 영상과 조합할 이벤트를 추출하는 모습을 나타내는 도면이다.

도 2를 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보로부터 이벤트를 추출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 스포츠 경기 중 발생할 수 있는 이벤트를 나타내는 eID(200)를 기준으로 이벤트를 검출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치가 스포츠 경기 중 발생할 수 있는 이벤트를 나타내는 eID(210)를 기준으로 검출한 이벤트의 개수는 5개(210)이다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치가 스포츠 경기 중 발생할 수 있는 이벤트를 나타내는 eID(210)를 기준으로 검출한 이벤트 (220, 230 ,240, 250, 260)에는 삼진, 낫아웃, 땅볼, 직선타, 플라이, 병살, 삼중살, 희생 번트, 희생 플라이, 실책으로 출루, 야수 선택, 볼넷, 고의 사구, 몸에 맞는 공, 1루타, 2루타, 3루타, 홈런, 폭투, 포일, 도루 성공, 도루 실패, 보크, 견제사, 도루, 견제 후 도루 성공, 견제 후 도루 실패, 자동 고의 사구 등이 포함될 수 있으나, 상기 이벤트에 포함될 수 있는 정보가 이에 한정되는 것은 아니다.

도 3은 일실시예에 따라 스포츠 경기 동영상에 경기 정보를 태깅하는 모습을 나타내는 도면이다.

도 3을 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 복수의 프레임으로 구성된 야구 경기를 포함하는 동영상을 식별할 수 있다. 스포츠 경기 요약 영상 생성 장치는 동영상을 실시간으로 방송국으로부터 수신하거나, 또는 별도의 저장 장치를 통해 식별할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 해당 프레임에 대응하는 경기 정보 및 장면 정보를 태깅할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 프레임 1(300)에 동영상의 시점(Time [00:14:51]), 1회말, 스코어 0:0, 0ball-0strike 2 out, 투구 수 18개, 투구(Pitch) 장면 등의 경기 정보(301)를 태깅할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 프레임 2(310)에 동영상의 시점(Time [00:17:21]), 2회초, 스코어 1:0, 1ball-2strike no out, 투구 수 4개, 투구(Pitch) 장면 등의 경기 정보(311)를 태깅할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 프레임 3(320)에 동영상의 시점(Time [01:00:21]), 4회초, 스코어 1:2, 1ball-2strike 2out, 투구 수 54개, 클로즈업(Closeup) 장면 등의 경기 정보(321)를 태깅할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 프레임 4(330)에 동영상의 시점(Time [01:25:30]), 5회말, 스코어 2:3, 1ball-2strike 2out, 투구 수 80개, 필드(Field) 장면 등의 경기 정보(331)를 태깅할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 프레임 5(340)에 동영상의 시점(Time [01:45:11]), 6회초, 스코어 3:3, 0ball-0strike 2out, 투구 수 83개, 투구(Pitch) 장면 등의 경기 정보(341)를 태깅할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 프레임 6(350)에 동영상의 시점(Time [00:10:45]), 7회초, 스코어 4:3, 3ball-2strike 2out, 투구 수 5개, 클로즈업(Closeup) 장면 등의 경기 정보(351)를 태깅할 수 있다.

도 4는 일실시예에 따라 투구 수 정보를 기초로 미리 설정된 동작이 포함된 이벤트에 해당하는 프레임을 구분하는 모습을 나타내는 도면이다.

도 4를 참조하면, 일실시예에 따라 스포츠 경기 요약 영상 생성 장치는 로그 정보에서 이벤트를 추출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보에서 3회말 2아웃 2루에 주자가 있는 상황에서, 3회말에 등장한 1명의 투수 중 첫번째 투수인 박세웅이 타자 강백호를 상대로 던진 50번째 투구에서 이벤트 eID 3002가 발생한 것을 추출(400)할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 추출한 로그 정보에 대응하는 프레임 구간(410)을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 추출한 로그 정보에 포함된 투구 수를 기준으로 상기 추출한 로그 정보에 포함된 투구 수 -1의 시작 프레임(420)부터 상기 추출한 로그 정보에 포함된 투구 수의 마지막 프레임(430)을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 결정한 시작 프레임(420)과 상기 결정한 마지막 프레임(430) 사이의 프레임들을 하나의 구간으로 구분할 수 있다.

도 5는 일실시예에 따라 이벤트와 상기 이벤트에 대응하는 프레임을 나타내는 도면이다.

도 5를 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보에서 스포츠 경기 중 발생할 수 있는 이벤트를 나타내는 eID를 기준으로 이벤트(500)를 검출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치가 로그 정보에서 스포츠 경기 중 발생할 수 있는 이벤트를 나타내는 eID를 기준으로 검출한 이벤트의 개수는 5개(501, 502, 503, 504, 505)이다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보에서 검출한 이벤트에 대응하는 프레임 구간(510)을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 상기 검출한 이벤트에 포함된 투구 수를 기준으로 상기 투구 수 -1에 해당하는 시작 프레임부터 상기 투구 수의 마지막 프레임을 이벤트에 대응하는 프레임(511, 512, 513, 514, 515)으로 결정할 수 있다.

도 6은 일실시예에 따라 투구 동작이 포함된 이벤트가 발생한 프레임을 정교화한 모습을 나타내는 도면이다.

도 6을 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 이벤트가 발생한 프레임(600, 610, 620, 630 640) 각각에 장면 인식을 적용하여 이벤트가 발생한 프레임(600, 610, 620, 630 640) 각각을 정교화 한 프레임(650, 660, 670, 680, 690)을 추출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 이벤트가 발생한 프레임(600, 610, 620, 630 640) 각각에 장면 분할 및 장면 인식을 적용하여 어떠한 장면이 순차적으로 발생했는지를 분석할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 상기 분석한 결과를 이용하여 투구 장면을 검출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 검출한 투구 장면을 분석하여 어느 프레임부터 어느 프레임까지가 실제 투구 장면에 해당하는지를 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 상기 결정을 기초로 실제 투구 동작이 포함된 프레임(651, 661, 671, 681, 691)을 추출할 수 있다.

이때, 1: 정교화 이후 구간과 관련된 프레임(651)은 정교화 구간의 시작점인 실제 1구를 던지기 전, 현재 투구 수 0 상태의 마지막 투구 장면의 시작점 3082번 프레임부터 정교화 구간의 종료점인 1구 투구를 하고 난 이후 현재 투구 수 1 상태의 마지막 투구 장면의 시작점 4697번의 프레임 직전인 4696번 프레임일 수 있다.

또한, 2: 정교화 이후 구간과 관련된 프레임(661)은 정교화 구간의 시작점인 실제 2구를 던지기 전, 현재 투구 수 1 상태의 마지막 투구 장면의 시작점 4697번 프레임부터 정교화 구간의 종료점인 1구 투구를 하고 난 이후 현재 투구 수 2 상태의 마지막 투구 장면의 시작점 5905번의 프레임 직전인 5904번 프레임일 수 있다.

또한, 3: 정교화 이후 구간과 관련된 프레임(671)은 정교화 구간의 시작점인 실제 3구를 던지기 전, 현재 투구 수 2 상태의 마지막 투구 장면의 시작점 5905번 프레임부터 정교화 구간의 종료점인 1구 투구를 하고 난 이후 현재 투구 수 3 상태의 마지막 투구 장면의 시작점 7592번의 프레임 직전인 7591번 프레임일 수 있다.

또한, 4: 정교화 이후 구간과 관련된 프레임(681)은 정교화 구간의 시작점인 실제 4구를 던지기 전, 현재 투구 수 3 상태의 마지막 투구 장면의 시작점 7592번 프레임부터 정교화 구간의 종료점인 1구 투구를 하고 난 이후 현재 투구 수 4 상태의 마지막 투구 장면의 시작점 9413번의 프레임 직전인 9412번 프레임일 수 있다.

또한, 5: 정교화 이후 구간과 관련된 프레임(691)은 정교화 구간의 시작점인 실제 14구를 던지기 전, 현재 투구 수 13 상태의 마지막 투구 장면의 시작점 16804번 프레임부터 정교화 구간의 종료점인 1구 투구를 하고 난 이후 현재 투구 수 14 상태의 마지막 투구 장면의 시작점 17595번의 프레임 직전인 17594번 프레임일 수 있다.

도 7은 일실시예에 따라 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 요약 시작 시점을 결정하는 모습을 나타내는 도면이다.

도 7을 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 동작이 포함된 이벤트에 해당하는 구간에서 타격의 발생 여부(710, 720)를 기초로 요약 시작 시점을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 장면(711)이 포함된 이벤트에 해당하는 구간에서 타격이 발생(710)하고, 상기 발생한 타격에 의해 필드 장면(712)이 연결되면, 구간 시작점(700)을 포함하는 투구 장면(711)의 마지막에서 3초 전(731)을 요약 시작 시점(730)으로 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 장면(721)이 포함된 이벤트에 해당하는 구간에서 타격이 발생하지 않고(720), 투구 동작 외의 장면(722)이 연결되면, 구간 시작점(700)을 포함하는 투구 장면(721)의 마지막에서 7초 전(732)을 요약 시작 시점(730)으로 결정할 수 있다.

도 8은 일실시예에 따라 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 요약 종료 시점을 결정하는 모습을 나타내는 도면이다.

도 8을 참조하면, 스포츠 경기 요약 영상 생성 장치는 투구 동작이 포함된 이벤트에 해당하는 구간에서 타격의 발생 여부(800, 810)를 기초로 요약 종료 시점을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 장면(801)이 포함된 이벤트에 해당하는 구간에서 타격이 발생(800)하고, 상기 발생한 타격에 의해 필드 장면(802)이 연결되면, 투구 장면(801)의 마지막(804)에서 미리 설정된 제한 시간이 시작(804)되고, 상기 미리 설정된 제한 시간이 종료(805)되면, 상기 미리 설정된 제한 시간이 종료(805)될 때에 해당하는 장면(803)을 검출하고, 상기 검출한 장면(803)의 마지막을 요약 종료 시점(806)으로 결정할 수 있다. 이때, 상기 미리 설정된 시간은 야구 경기에서 발생한 이벤트에 따라 가변이다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 장면(811)이 포함된 이벤트에 해당하는 구간에서 타격이 발생하지 않고(810), 투구 동작 외의 장면들(812)이 연결되면, 투구 동작 외의 장면(812)의 길이가 미리 설정된 시간(예컨대, 5초)보다 긴 경우, 스포츠 경기 요약 영상 생성 장치는 투구 장면(811)의 마지막을 요약 종료 시점(814)으로 결정할 수 있다. 다만, 스포츠 경기 요약 영상 생성 장치는 투구 동작 외의 장면(812)의 길이가 미리 설정된 시간(예컨대, 5초)보다 짧은 경우, 투구 동작 외의 장면(812)의 마지막을 요약 종료 시점(815)으로 결정할 수 있다. 이때, 상기 미리 설정된 시간은 가변이다.

도 9는 일실시예에 따라 로그 정보를 기초로 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 프레임을 구분하는 모습을 나타내는 도면이다.

도 9를 참조하면, 일실시예에 따라 스포츠 경기 요약 영상 생성 장치는 이벤트가 발생한 로그 정보를 추출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보에서 1회초 노아웃 1루에 주자가 있는 상황에서, 1회초에 등장한 1명의 투수 중 첫번째 투수인 67603이 타자 66409를 상대로 던진 9번째 투구에서 이벤트 eID 3103이 발생한 것을 추출(900)할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 추출한 로그 정보에 대응하는 프레임 구간(910)을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 추출한 로그 정보에 포함된 투구 수를 기준으로 상기 추출한 로그 정보에 포함된 투구 수의 시작 프레임인 020040부터 상기 추출한 로그 정보에 포함된 투구 수의 마지막 프레임인 024420(930)을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 결정한 시작 프레임인 020040부터 상기 추출한 로그 정보에 포함된 투구 수의 마지막 프레임인 024420(930) 사이에서 상황변경점에 해당하는 프레임(931)을 결정할 수 있다.

도 10은 일실시예에 따라 투구 동작이 포함되지 않은 이벤트가 발생한 프레임을 정교화 하는 모습을 나타내는 도면이다.

도 10을 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보에서 1회초 노아웃 1루에 주자가 있는 상황에서, 1회초에 등장한 1명의 투수 중 첫번째 투수인 67603이 타자 66409를 상대로 던진 9번째 투구에서 이벤트 eID 3103이 발생한 것을 추출(1000)할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 추출한 로그 정보를 기반으로 프레임 구간(1010)을 추출할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 추출한 프레임 구간(1010)에 장면 정보 기반 구간 정교화를 수행하여 장면 분할 및 인식(1020)을 할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 동작이 포함되지 않은 이벤트가 발생한 타겟 투구 수(예컨대, 투구 수 9개)에 해당하는 프레임(예컨대, 투구 수 9개에 해당하는 프레임) 중 상황변경점 이전의 마지막 투구 장면의 첫 프레임을 상기 투구 동작이 포함되지 않은 이벤트가 시작되는 프레임으로 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 동작이 포함되지 않은 이벤트가 발생한 타겟 투구 수(예컨대, 투구 수 9개)에 해당하는 프레임 중 상황변경점 이후 첫 투구 장면의 첫 프레임의 직전 프레임을 상기 투구 동작이 포함된 이벤트가 종료되는 프레임으로 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 로그 정보를 기반으로 추출한 프레임 구간은 #20040~#24420이며, 이를 장면 분할 및 장면 인식을 기초로 정교화 한 프레임 구간은 #21172~#23859이다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 정교화 한 프레임 구간을 더욱 요약하여 투구 동작이 포함되지 않은 이벤트가 포함된 프레임을 추출(1040)할 수 있다.

도 11을 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 동작이 포함되지 않은 이벤트에 해당하는 구간에서 이벤트의 발생 여부를 기초로 요약 시작 시점을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 장면(1110)과 투구 동작이 포함되지 않은 이벤트가 발생한 필드 장면(1130)이 연결되면, 구간 시작점(1100)을 포함하는 투구 장면(1110)의 마지막에서 미리 설정된 시간(예컨대, 10초) 전(1121)을 요약 시작 시점(1120)으로 결정할 수 있다.

도 12는 일실시예에 따라 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에서 요약 종료 시점을 결정하는 모습을 나타내는 도면이다.

도 12를 참조하면, 일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 동작이 포함되지 않은 이벤트에 해당하는 구간에서 이벤트의 발생 여부(1210)를 기초로 요약 종료 시점을 결정할 수 있다.

일실시예에 따라, 스포츠 경기 요약 영상 생성 장치는 투구 장면(1200)과 이벤트 장면(1210) 및 투구 장면(1230)이 연결되면, 이벤트 장면(1210) 이후의 첫 투구 장면(1230)의 첫 프레임의 직전을 요약 종료 시점(1220)으로 결정할 수 있다.

도 13은 일실시예에 따른 스포츠 경기 요약 영상 생성 방법을 나타내는 플로우 차트이다.

도 13을 참조하면, 스포츠 경기 요약 영상 생성 장치가 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득한다(1300).

이때, 상기 스포츠 경기 요약 영상 생성 장치는 상기 스포츠 경기와 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 각기 다른 장치(예컨대, 서버)로부터 획득할 수 있다.

스포츠 경기 요약 영상 생성 장치가 상기 로그 정보를 기초로 상기 동영상과 관련된 경기 정보를 상기 동영상에 태깅한다(1310).

이때, 상기 스포츠 경기 요약 영상 생성 장치는 상기 동영상의 장면에 포함된 중계판(중계판 자막 정보)을 통해 상기 장면의 상황 정보를 파악할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 파악한 상황 정보와 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보와의 비교를 통해 상기 장면에 대한 태그 정보를 추출할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 이벤트가 발생한 장면마다 상기 장면에 대한 태그 정보를 추출할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 추출한 태그 정보를 상기 이벤트가 발생하는 장면마다 상기 장면에 대해 추출한 태그 정보를 태깅할 수 있다.

스포츠 경기 요약 영상 생성 장치가 상기 태깅한 동영상을 상기 이벤트를 기초로 복수개의 구간으로 구분한다(1320).

이때, 상기 스포츠 경기 요약 영상 생성 장치는 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분할 수 있다. 스포츠 경기 요약 영상 생성 장치가 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 상기 이벤트를 기초로 요약 구간으로 결정한다(1330).

이때, 상기 스포츠 경기 요약 영상 생성 장치는 장면 전환 또는 장면 인식을 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 정교화 할 수 있으나, 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 정교화 하는 방법이 이에 한정되는 것은 아니다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 미리 설정된 동작이 포함된 이벤트에 해당하는 구간에서 상기 미리 설정된 동작이 포함된 구간 내의 적어도 어느 하나의 장면을 기초로 요약 종료 시점을 결정할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 미리 설정된 동작이 포함되지 않은 이벤트에 해당하는 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간과 연결되는 구간이 시작되는 프레임을 기초로 요약 종료 시점을 결정할 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 요약 시작 시점과 상기 요약 종료 시점 사이의 구간을 요약 구간으로 결정할 수 있다.

스포츠 경기 요약 영상 생성 장치가 상기 결정한 요약 구간 및 상기 로그 정보를 조합하여 스포츠 경기 요약 영상을 생성한다(1340).

이때, 상기 스포츠 경기 요약 영상 생성 장치는 상기 요약 구간을 조합하는 기준을 결정할 수 있다. 이때, 상기 기준은 복수 개 일 수 있다.

또한, 상기 스포츠 경기 요약 영상 생성 장치는 상기 요약 영상에 태깅한 정보를 상기 요약 영상과 동시에 출력할 수 있다.

이상에서, 본 발명의 실시예를 구성하는 모든 구성 요소들이 하나로 결합되거나 결합되어 동작하는 것으로 설명되었다고 해서, 본 발명이 반드시 이러한 실시예에 한정되는 것은 아니다. 즉, 본 발명의 목적 범위 안에서라면, 그 모든 구성 요소들이 적어도 하나로 선택적으로 결합하여 동작할 수도 있다.

또한, 그 모든 구성 요소들이 각각 하나의 독립적인 하드웨어로 구현될 수 있지만, 각 구성 요소들의 그 일부 또는 전부가 선택적으로 조합되어 하나 또는 복수 개의 하드웨어에서 조합된 일부 또는 전부의 기능을 수행하는 프로그램 모듈을 갖는 컴퓨터 프로그램으로서 구현될 수도 있다. 그 컴퓨터 프로그램을 구성하는 코드들 및 코드 세그먼트들은 본 발명의 기술 분야의 당업자에 의해 용이하게 추론될 수 있을 것이다.

이러한 컴퓨터 프로그램은 컴퓨터가 읽을 수 있는 저장매체(Computer Readable Media)에 저장되어 컴퓨터에 의하여 읽혀지고 실행됨으로써, 본 발명의 실시예를 구현할 수 있다. 컴퓨터 프로그램의 저장매체로서는 자기 기록매체, 광 기록매체, 등이 포함될 수 있다.

또한, 이상에서 기재된 "포함하다", "구성하다" 또는 "가지다" 등의 용어는, 특별히 반대되는 기재가 없는 한, 해당 구성 요소가 내재될 수 있음을 의미하는 것이므로, 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것으로 해석되어야 한다.

기술적이거나 과학적인 용어를 포함한 모든 용어들은, 다르게 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 사전에 정의된 용어와 같이 일반적으로 사용되는 용어들은 관련 기술의 문맥 상의 의미와 일치하는 것으로 해석되어야 하며, 본 발명에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.

본 발명에서 개시된 방법들은 상술된 방법을 달성하기 위한 하나 이상의 동작들 또는 단계들을 포함한다. 방법 동작들 및/또는 단계들은 청구항들의 범위를 벗어나지 않으면서 서로 상호 교환될 수도 있다. 다시 말해, 동작들 또는 단계들에 대한 특정 순서가 명시되지 않는 한, 특정 동작들 및/또는 단계들의 순서 및/또는 이용은 청구항들의 범위로부터 벗어남이 없이 수정될 수도 있다.

본 발명에서 이용되는 바와 같이, 아이템들의 리스트 중 "그 중 적어도 하나" 를 지칭하는 구절은 단일 멤버들을 포함하여, 이들 아이템들의 임의의 조합을 지칭한다. 일 예로서, "a, b, 또는 c: 중의 적어도 하나" 는 a, b, c, a-b, a-c, b-c, 및 a-b-c 뿐만 아니라 동일한 엘리먼트의 다수의 것들과의 임의의 조합 (예를 들어, a-a, a-a-a, a-a-b, a-a-c, a-b-b, a-c-c, b-b, b-b-b, b-b-c, c-c, 및 c-c-c 또는 a, b, 및 c 의 다른 임의의 순서 화한 것) 을 포함하도록 의도된다.

본 발명에서 이용되는 바와 같이, 용어 "결정하는"는 매우 다양한 동작들을 망라한다. 예를 들어, "결정하는"는 계산하는, 컴퓨팅, 프로세싱, 도출하는, 조사하는, 룩업하는 (예를 들어, 테이블, 데이터베이스, 또는 다른 데이터 구조에서 룩업하는), 확인하는 등을 포함할 수도 있다. 또한, "결정하는"은 수신하는 (예를 들면, 정보를 수신하는), 액세스하는 (메모리의 데이터에 액세스하는) 등을 포함할 수 있다. 또한, "결정하는"은 해결하는, 선택하는, 고르는, 확립하는 등을 포함할 수 있다.

이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.

따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

100... 스포츠 경기 요약 영상 생성 장치

Claims (27)

1. 스포츠 경기 요약 영상 생성 장치에 있어서,
   적어도 하나의 프로세서를 포함하고,
   상기 적어도 하나의 프로세서는,
   스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하고,
   상기 로그 정보를 기초로 상기 동영상과 관련된 경기 정보를 상기 동영상에 태깅하고,
   상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성하는 스포츠 경기 요약 영상 생성 장치.
2. 제1항에 있어서,
   상기 적어도 하나의 프로세서는,
   상기 태깅한 동영상을 상기 이벤트를 기초로 복수개의 구간으로 구분하고,
   상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 상기 이벤트를 기초로 요약 구간으로 결정하는 스포츠 경기 요약 영상 생성 장치.
3. 제1항에 있어서,
   상기 이벤트는,
   상기 스포츠 경기에서 발생하는 행위와 관련된 이벤트인 스포츠 경기 요약 영상 생성 장치.
4. 제1항에 있어서,
   상기 경기 정보는,
   상기 스포츠 경기의 진행 시간, 상기 동영상의 프레임 번호, 상기 스포츠 경기의 진행 정보 및 상기 동영상의 장면 정보 중 적어도 어느 하나를 포함하는 정보인 스포츠 경기 요약 영상 생성 장치.
5. 제2항에 있어서,
   상기 적어도 하나의 프로세서는,
   상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하고,
   상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하고,
   상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 스포츠 경기 요약 영상 생성 장치.
6. 제5항에 있어서,
   상기 적어도 하나의 프로세서는,
   상기 미리 설정된 동작이 포함된 이벤트와 관련된 제1 기준을 설정하고,
   상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 첫번째 프레임을 결정하고,
   상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 마지막 프레임을 결정하고,
   상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정하는 스포츠 경기 요약 영상 생성 장치.
7. 제5항에 있어서,
   상기 적어도 하나의 프로세서는,
   상기 미리 설정된 동작이 포함되지 않은 이벤트와 관련된 제2 기준을 설정하고,
   상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 첫번째 프레임을 결정하고,
   상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 마지막 프레임을 결정하고,
   상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정하는 스포츠 경기 요약 영상 생성 장치.
8. 제2항에 있어서,
   상기 적어도 하나의 프로세서는,
   상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 미리 설정된 방법을 기초로 정교화 하는 스포츠 경기 요약 영상 생성 장치.
9. 제8항에 있어서,
   상기 미리 설정된 방법은,
   장면 전환 및 장면 인식인 스포츠 경기 요약 영상 생성 장치.
10. 제2항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하고,
    상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하고,
    상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 스포츠 경기 요약 영상 생성 장치.
11. 제10항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하고,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간 내의 적어도 어느 하나의 장면을 기초로 요약 종료 시점을 결정하고,
    상기 요약 시작 시점과 상기 요약 종료 시점 사이의 장면을 요약 구간으로 결정하는 스포츠 경기 요약 영상 생성 장치.
12. 제10항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하고,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간과 연결되는 구간이 시작되는 프레임을 기초로 요약 종료 시점을 결정하고,
    상기 요약 시작 시점과 상기 요약 종료 시점 사이의 장면을 요약 구간으로 결정하는 스포츠 경기 요약 영상 생성 장치.
13. 제1항에 있어서,
    상기 적어도 하나의 프로세서는,
    상기 요약 구간을 조합하는 기준을 결정하는 스포츠 경기 요약 영상 생성 장치.
14. 스포츠 경기를 포함하는 동영상 및 상기 스포츠 경기에서 발생한 이벤트를 순차적으로 기록한 로그 정보를 획득하는 동작;
    상기 로그 정보를 기초로 상기 동영상과 관련된 경기 정보를 상기 동영상에 태깅하는 동작; 및
    상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
15. 제14항에 있어서,
    상기 태깅한 동영상을 기초로 스포츠 경기 요약 영상을 생성하는 동작은,
    상기 태깅한 동영상을 상기 이벤트를 기초로 복수개의 구간으로 구분하는 동작; 및
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 상기 이벤트를 기초로 요약 구간으로 결정하는 동작
    을 더 포함하는 스포츠 경기 요약 영상 생성 방법.
16. 제14항에 있어서,
    상기 이벤트는,
    상기 스포츠 경기에서 발생하는 행위와 관련된 이벤트인 스포츠 경기 요약 영상 생성 방법.
17. 제14항에 있어서,
    상기 경기 정보는,
    상기 스포츠 경기의 진행 시간, 상기 동영상의 프레임 번호, 상기 스포츠 경기의 진행 정보 및 상기 동영상의 장면 정보 중 적어도 어느 하나를 포함하는 정보인 스포츠 경기 요약 영상 생성 방법.
18. 제15항에 있어서,
    상기 복수개의 구간으로 구분하는 동작은,
    상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하는 동작;
    상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작; 및
    상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
19. 제18항에 있어서,
    상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작은,
    상기 미리 설정된 동작이 포함된 이벤트와 관련된 제1 기준을 설정하는 동작;
    상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 첫번째 프레임을 결정하는 동작;
    상기 태깅한 동영상으로부터 상기 설정한 제1 기준에 해당하는 마지막 프레임을 결정하는 동작; 및
    상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
20. 제18항에 있어서,
    상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 태깅한 동영상을 복수개의 구간으로 구분하는 동작은,
    상기 미리 설정된 동작이 포함되지 않은 이벤트와 관련된 제2 기준을 설정하는 동작;
    상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 첫번째 프레임을 결정하는 동작;
    상기 태깅한 동영상으로부터 상기 설정한 제2 기준에 해당하는 마지막 프레임을 결정하는 동작; 및
    상기 결정한 첫번째 프레임과 상기 결정한 마지막 프레임을 하나의 구간으로 결정하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
21. 제15항에 있어서,
    상기 요약 구간으로 결정하는 동작은,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간을 미리 설정된 방법을 기초로 정교화 하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
22. 제21항에 있어서,
    상기 미리 설정된 방법은,
    장면 전환 및 장면 인식인 스포츠 경기 요약 영상 생성 방법.
23. 제15항에 있어서,
    상기 요약 구간으로 결정하는 동작은,
    상기 이벤트를 미리 설정된 동작이 포함된 이벤트와 미리 설정된 동작이 포함되지 않은 이벤트로 구분하는 동작;
    상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작; 및
    상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
24. 제23항에 있어서,
    상기 미리 설정된 동작이 포함된 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작은,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하는 동작;
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간 내의 적어도 어느 하나의 장면을 기초로 요약 종료 시점을 결정하는 동작; 및
    상기 요약 시작 시점과 상기 요약 종료 시점 사이의 장면을 요약 구간으로 결정하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
25. 제23항에 있어서,
    상기 미리 설정된 동작이 포함되지 않은 이벤트를 기초로 상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간의 일부를 요약 구간으로 결정하는 동작은,
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함된 구간의 마지막 프레임을 기초로 요약 시작 시점을 결정하는 동작;
    상기 구분한 복수개의 구간 중 적어도 어느 하나의 구간에서 상기 미리 설정된 동작이 포함되지 않은 이벤트가 포함된 구간과 연결되는 구간이 시작되는 프레임을 기초로 요약 종료 시점을 결정하는 동작; 및
    상기 요약 시작 시점과 상기 요약 종료 시점 사이의 장면을 요약 구간으로 결정하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
26. 제14항에 있어서,
    상기 스포츠 경기 요약 영상을 생성하는 동작은,
    상기 요약 구간을 조합하는 기준을 결정하는 동작
    을 포함하는 스포츠 경기 요약 영상 생성 방법.
27. 제14항 내지 제26항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체.

Images