KR20160070688A - 추출 프로그램, 방법 및 장치 - Google Patents

추출 프로그램, 방법 및 장치 Download PDF

Info

Publication number
KR20160070688A
KR20160070688A KR1020150172668A KR20150172668A KR20160070688A KR 20160070688 A KR20160070688 A KR 20160070688A KR 1020150172668 A KR1020150172668 A KR 1020150172668A KR 20150172668 A KR20150172668 A KR 20150172668A KR 20160070688 A KR20160070688 A KR 20160070688A
Authority
KR
South Korea
Prior art keywords
batting
frame
indicating
quot
cut
Prior art date
Application number
KR1020150172668A
Other languages
English (en)
Other versions
KR101891382B1 (ko
Inventor
아츠시 오구치
미호 사카이
Original Assignee
후지쯔 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후지쯔 가부시끼가이샤 filed Critical 후지쯔 가부시끼가이샤
Publication of KR20160070688A publication Critical patent/KR20160070688A/ko
Application granted granted Critical
Publication of KR101891382B1 publication Critical patent/KR101891382B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A63F13/46—Computing the game score
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00326—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus
    • H04N1/00328—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information
    • H04N1/00336—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a data reading, recognizing or recording apparatus, e.g. with a bar-code apparatus with an apparatus processing optically-read information with an apparatus performing pattern recognition, e.g. of a face or a geographic feature

Abstract

컴퓨터에, 타석의 시작을 나타내는 개소와, 이 타석의 시작으로부터 특정되는 각 타석의 결과를 나타내는 정보가 대응된 야구 시합의 촬영 영상으로부터, 상기 타석에서의 최후의 투구 장면을 포함하는 컷 후, 상기 타석의 결과에 따른 횟수 컷이 전환된 개소를, 상기 타석의 종료로서 추출하는 것을 포함하는 처리를 실행시키는 것을 특징으로 하는 추출 프로그램을 기억한 기억 매체.

Description

추출 프로그램, 방법 및 장치{EXTRACTION PROGRAM, METHOD AND DEVICE}
개시된 기술은 추출 프로그램, 추출 방법 및 추출 장치에 관한 것이다.
종래, 스포츠 중계의 영상으로부터, 그 영상에 포함되는 특정한 장면을 추출하는 것이 행해지고 있다. 예컨대, 다이제스트 시청의 대상이 되는 스포츠 영상의 이벤트 종료점을 추출하는 장치가 제안되어 있다. 이 장치에서는, 이벤트 개시점이 결정된 스포츠 영상으로부터, 이벤트 개시점 이후의 컷점(cut point)을 검출하고, 검출된 컷점 사이의 컷 길이의 종별을 그 컷 길이의 장단에 따라 분류한다. 또한, 컷 길이의 종별의 출현 패턴을 이벤트 종료점에 대응시켜, 출현 패턴 기억부에 기억해 둔다. 그리고, 출현 패턴 기억부를 참조하여, 분류된 종별의 출현 패턴에 대응하는 이벤트 종료점을 추출하고, 추출된 이벤트 종료점을 출력한다.
[특허문헌 1] 일본 특허 공개 제2007-335984호 공보
여기서, 야구 시합을 촬영한 영상을 대상으로 하고, 이벤트 종료점으로서 타석의 종료를 상정한다. 이 경우, 시합 상황에 따라 컷의 전환 방식은 여러 가지 양태가 있기 때문에, 종래 기술과 같이, 컷 길이의 종별의 출현 패턴만으로는, 타석의 종료를 정밀도 좋게 추출할 수 없다.
하나의 측면으로서, 야구 시합을 촬영한 영상으로부터, 타석의 종료를 추출하는 정밀도의 향상을 도모하는 것을 목적으로 한다.
하나의 양태에서는, 타석의 시작을 나타내는 개소와, 이 타석의 시작으로부터 특정되는 각 타석의 결과를 나타내는 정보가 대응된 야구 시합의 촬영 영상으로부터, 타석의 종료를 추출한다. 타석의 종료로서, 상기 타석에서의 최후의 투구 장면을 포함하는 컷 후, 상기 타석의 결과에 따른 횟수 컷이 전환된 개소를 추출한다.
도 1은 본 실시형태에 따른 영상 전송 시스템의 개략 구성을 도시한 블록도이다.
도 2는 야구 데이터·데이터베이스의 일례를 도시한 도면이다.
도 3은 본 실시형태에 따른 추출 장치 및 전송 장치의 기능 블록도이다.
도 4는 투구 구도 프레임 및 편집의 일례를 설명하기 위한 도면이다.
도 5는 카운트 표시의 일례를 도시한 도면이다.
도 6은 득점 텔롭의 일례를 도시한 도면이다.
도 7은 프레임 정보 테이블의 일례를 도시한 도면이다.
도 8은 타석 태그 데이터 테이블의 일례를 도시한 도면이다.
도 9는 야구 데이터 DB의 데이터와, 편집 완료 영상의 각 프레임과의 대응을 설명하기 위한 도면이다.
도 10은 수정 화면의 일례를 도시한 도면이다.
도 11은 컷 체인지 횟수 테이블의 일례를 도시한 도면이다.
도 12는 추출한 타석의 종료의 일례를 도시한 도면이다.
도 13은 득점 장면에 있어서의 컷의 전환, 및 득점 텔롭의 일례를 도시한 도면이다.
도 14는 메타 정보 파일의 일례를 도시한 도면이다.
도 15는 전송 화면의 일례를 도시한 도면이다.
도 16은 추출 장치로서 기능하는 컴퓨터의 일례를 도시한 개략 블록도이다.
도 17은 전송 장치로서 기능하는 컴퓨터의 일례를 도시한 개략 블록도이다.
도 18은 편집 처리의 일례를 도시한 흐름도이다.
도 19는 추출 처리의 일례를 도시한 흐름도이다.
도 20은 타석 종료 추출 처리의 일례를 도시한 흐름도이다.
도 21은 전송 처리의 일례를 도시한 흐름도이다.
이하, 도면을 참조하여 개시된 기술에 따른 실시형태의 일례를 상세히 설명한다. 본 실시형태에서는, 개시된 기술에 따른 추출 장치를, 영상 전송 시스템에 적용한 예에 대해 설명한다.
도 1에 도시된 바와 같이, 본 실시형태에 따른 영상 전송 시스템(10)은, 추출 장치(20)와, 전송 장치(30)와, 사용자 단말(40)과, 외부 장치(50)를 포함한다. 추출 장치(20)와, 전송 장치(30)와, 사용자 단말(40)과, 외부 장치(50)는, 서로 네트워크를 통해 접속되어 있다.
사용자 단말(40)은, 영상을 표시하는 표시부 및 정보를 입력하는 입력부를 구비한 장치이며, 예컨대, 퍼스널 컴퓨터(PC), 노트형 PC, 태블릿 단말, 스마트폰 등이다. 한편, 도 1에서는, 사용자 단말(40)을 1대만 표기하고 있으나, 사용자 단말은 복수 대여도 좋다.
외부 장치(50)에는, 야구 시합에 관한 각종 데이터가 기록된 야구 데이터·데이터베이스(DB)(51)가 기억되어 있다. 도 2에 야구 데이터 DB(51)의 일례를 도시한다. 도 2의 예에서는, 야구 데이터 DB(51)는, 타석 데이터 테이블(51A)과, 시합 데이터 테이블(51B)과, 타자 데이터 테이블(51C)과, 투수 데이터 테이블(51D)을 포함한다.
도 2의 예에서는, 타석 데이터 테이블(51A)은, 각 타석을 식별하기 위한 식별 정보인 「타석 이벤트 ID」에, 「시합 ID」, 「이닝」, 「타순」, 「타자 ID」, 「투수 ID」 및 「타석 결과」의 각 항목이 대응되어 기억되어 있다. 타석 데이터 테이블(51A)에 있어서, 각 레코드(각 행)가 1타석의 데이터에 상당한다. 「타석 이벤트 ID」는, 시합마다 또한 팀마다의 각 타석에 대해, 시합 개시로부터의 일련 번호를 부여한 것이다.
「시합 ID」는, 그 타석을 포함하는 시합을 식별하기 위한 식별 정보이다. 「이닝」은, 그 타석이 몇 이닝시의 타석인지를 나타내는 정보이다. 「타순」은, 그 타석이 1번으로부터 9번까지 중 어느 타순에 있어서의 타석인지를 나타내는 정보이다. 「타자 ID」는, 그 타석에서의 타자를 식별하기 위한 식별 정보이다. 「투수 ID」는, 그 타석에서의 대전팀의 투수를 식별하기 위한 식별 정보이다. 「타석 결과」는, 그 타석의 상세한 최종 결과를 나타내는 정보이다.
시합 데이터 테이블(51B)에는, 타석 데이터 테이블(51A)의 「시합 ID」에 대응하는 정보가 기억된다. 도 2의 예에서는, 시합 데이터 테이블(51B)은, 「시합 ID」, 「일시」, 「장소」, 「팀」 등의 항목을 포함한다. 「일시」는, 시합이 행해진 일시, 「장소」는 시합이 행해진 구장명 등이다. 「팀」은 그 시합에서 대전한 팀 및 선공 또는 후공의 구별을 나타내는 정보이다.
타자 데이터 테이블(51C)에는, 타석 데이터 테이블(51A)의 「타자 ID」에 대응하는 정보가 기억된다. 도 2의 예에서는, 타자 데이터 테이블(51C)은, 「타자 ID」, 「선수명」 및 「팀」의 항목을 포함한다. 「선수명」은, 타자 ID에 의해 식별되는 타자의 성명의 정보이다. 「팀」은, 타자 ID에 의해 식별되는 타자의 소속팀의 정보이다.
투수 데이터 테이블(51D)에는, 타석 데이터 테이블(51A)의 「투수 ID」에 대응하는 정보가 기억된다. 도 2의 예에서는, 투수 데이터 테이블(51D)은, 「투수 ID」, 「선수명」, 「팀」 및 「좌우」의 항목을 포함한다. 「선수명」은, 투수 ID에 의해 식별되는 투수의 성명의 정보이다. 「팀」은, 투수 ID에 의해 식별되는 투수의 소속팀의 정보이다. 「좌우」는, 투수 ID에 의해 식별되는 투수가 좌투수(왼손으로 던짐)인지 우투수(오른손으로 던짐)인지를 나타내는 정보이다.
한편, 야구 데이터 DB(51)에 포함되는 테이블 및 각 테이블의 항목은, 도 2에 도시된 예에 한정되지 않고, 다른 정보를 포함해도 좋다. 또한, 데이터 구조도 도 2의 예에 한정되지 않고, 타석마다의 데이터가, 그 타석의 순서를 식별할 수 있는 상태로 기록된 데이터이면 된다.
영상 전송 시스템(10)에서는, 추출 장치(20)에 의해, 야구 시합을 촬영한 영상에, 타석의 시작 및 종료를 나타내는 메타 정보와, 외부 장치(50)에 기억된 야구 데이터 DB(51)의 데이터를 각 타석에 대응시킨 메타 정보가 부가된다. 그리고, 전송 장치(30) 및 네트워크를 통해, 메타 정보가 부가된 영상이 사용자 단말(40)에 전송된다. 도 3에 도시된 바와 같이, 추출 장치(20)는, 제1 추출부(21)와, 계산부(22)와, 대응부(23)와, 제2 추출부(24)와, 작성부(25)를 포함한다. 또한, 전송 장치(30)는, 편집부(31)와, 전송부(32)를 포함한다.
먼저, 전송 장치(30)의 각부에 대해 상세히 서술한다.
편집부(31)는, 야구 시합을 촬영한 영상(이하, 「촬영 영상」이라고 함)을 취득한다. 촬영 영상은, 예컨대 30 fps나 60 fps 등의 프레임 레이트로 촬영된 영상이며, 복수의 프레임을 포함한다. 각 프레임에는, 촬영 영상의 촬영 개시로부터의 경과 시간으로 나타나는 프레임 시간이 대응되어 있다. 본 실시형태에서는, 프레임 시간은, 프레임의 식별 정보로서도 이용된다.
편집부(31)는, 도시하지 않은 표시 장치 및 입력 장치를 이용하여 오퍼레이터의 조작에 의해 지시된 편집 내용을, 화상 처리에 의해 촬영 영상에 적용한다. 편집 내용으로서는, 예컨대 도 4에 도시된 바와 같이, 촬영 영상의 미리 정해진 장면에 대응하는 각 프레임(100)에 대해, 시합 상황을 나타내는 카운트 표시(102)를 부가하는 것을 포함한다.
카운트 표시(102)는, 이닝, 볼 카운트, 스트라이크 카운트, 아웃 카운트, 주자의 상황, 및 팀마다의 현재 득점을 포함하는 카운트 정보를 나타내는 표시이다. 카운트 표시(102)는, 예컨대 도 5에 도시된 바와 같이, 이닝을 나타내는 이닝 표시(104), 볼 카운트를 나타내는 볼 카운트 표시(105), 및 스트라이크 카운트를 나타내는 스트라이크 카운트 표시(106)를 포함한다. 또한, 카운트 표시(102)는, 아웃 카운트를 나타내는 아웃 카운트 표시(107), 주자의 상황을 나타내는 주자 표시(108), 및 팀마다의 현재 득점을 나타내는 득점 표시(109)를 포함한다. 한편, 카운트 표시(102)의 포맷은 도 5의 예에 한정되지 않고, 적어도, 이닝, 아웃 카운트, 주자의 상황, 및 팀마다의 현재 득점을 포함하는 카운트 정보를 나타내는 표시이면 된다.
또한, 편집부(31)는, 득점이 있었던 장면을 나타내는 각 프레임(100)에, 예컨대 도 6에 도시된 바와 같이, 득점이 있었던 것을 나타내는 득점 텔롭(101)을 부가한다.
한편, 편집 내용은 카운트 표시(102) 및 득점 텔롭(101)의 부가에 한정되지 않고, 성명이나 프로필 등의 선수 정보를 나타내는 텔롭의 부가 등, 여러 가지 내용을 포함한다. 이하에서는, 촬영 영상에 대해 편집부(31)에 의한 편집이 행해진 영상을 「편집 완료 영상」이라고 한다. 편집부(31)는, 편집 완료 영상을, 추출 장치(20)에 송신한다.
전송부(32)는, 추출 장치(20)에 의해 메타 정보가 부가된 영상(이하, 「메타 정보 부가 영상」이라고 함. 상세한 것은 후술)을 취득한다. 전송부(32)는, 메타 정보 부가 영상을 미리 정해진 규격에 따른 전송용 영상으로 변환하여, 전송처인 사용자 단말(40)에 전송한다.
다음으로, 추출 장치(20)의 각부에 대해 상세히 서술한다.
제1 추출부(21)는, 전송 장치(30)로부터 송신된 편집 완료 영상을 취득한다. 제1 추출부(21)는, 편집 완료 영상으로부터, 타석의 시작을 나타내는 프레임을 추출하고, 타석의 시작을 나타내는 타석 태그를 편집 완료 영상에 부여한다. 타석의 시작을 나타내는 프레임의 추출은, 편집 완료 영상의 각 프레임의 특징으로부터 추출해도 좋고, 사람의 손에 의해 추출해도 좋다. 본 실시형태에서는, 일례로서, 각 프레임의 구도 및 카운트 표시(102)에 기초하여, 타석의 시작을 나타내는 프레임을 추출하고, 그 프레임에 타석의 시작을 나타내는 타석 태그를 부여하는 경우에 대해 설명한다.
제1 추출부(21)는, 편집 완료 영상에 포함되는 복수의 프레임의 각각으로부터, 투수의 투구 장면에 사용되는 카메라 앵글로 촬영된 구도의 프레임을, 투구 구도 프레임으로서 검출한다. 본 실시형태에서는, 도 4에 도시된 바와 같이, 투수의 등 뒤로부터 타자 방향을 촬영한 구도의 프레임을, 투구 구도 프레임으로 하는 경우에 대해 설명한다.
구체적으로는, 제1 추출부(21)는, 프레임마다 화상 특징을 추출한다. 화상 특징이란, 프레임 내의 각 화소의 휘도나 색 등의 화소 정보에 의해 나타나는 특징이다. 그리고, 제1 추출부(21)는, 미리 준비된 투구 구도 프레임으로부터 추출된 기준 화상 특징과, 편집 완료 영상의 각 프레임으로부터 추출한 추출 화상 특징의 유사도를 구한다. 제1 추출부(21)는, 기준 화상 특징과의 유사도가 미리 정해진 값 이상이 되는 추출 화상 특징을 갖는 프레임을, 투구 구도 프레임으로서 추출한다. 화상 특징으로서는, 화상의 구도(구성)를 나타내는 특징, 예컨대 색이나 휘도의 배치나 분포를 나타내는 특징, 웨이브릿 변환에 의해 얻어지는 특징 등을 이용할 수 있다.
또한, 제1 추출부(21)는, 각 프레임으로부터, 카운트 표시(102)를 추출하고, 카운트 표시(102)가 나타내는 카운트 정보를 검출한다. 예컨대, 제1 추출부(21)는, 카운트 표시(102)가 표시되는 영역으로서 미리 정해진 프레임 내의 영역으로부터, 카운트 표시(102)를 추출한다. 또는, 미리 정해진 카운트 표시(102)의 포맷을 이용한 패턴 매칭 등에 의해, 프레임 내로부터 카운트 표시(102)를 추출한다. 그리고, 제1 추출부(21)는, 추출한 카운트 표시(102)로부터, 패턴 매칭이나 문자 인식 처리 등에 의해, 이닝 표시(104)의 영역을 특정하고, 이닝 표시(104)가 나타내는 이닝을 검출한다. 마찬가지로, 제1 추출부(21)는, 볼 카운트 표시(105)로부터 볼 카운트를, 스트라이크 카운트 표시(106)로부터 스트라이크 카운트를 검출한다. 또한, 제1 추출부(21)는, 아웃 카운트 표시(107)로부터 아웃 카운트를, 주자 표시(108)로부터 주자의 상황을, 득점 표시(109)로부터 득점을 검출한다.
제1 추출부(21)는, 투구 구도 프레임의 검출 결과, 및 프레임마다 검출한 카운트 정보를, 프레임 정보 테이블(26)에 기록한다. 프레임 정보 테이블(26)의 일례를 도 7에 도시한다. 도 7의 예에서는, 프레임 시간으로 식별되는 프레임마다, 「구도 판정」, 「볼」, 「스트라이크」, 「아웃」, 「주자」, 「득점(선공)」, 「득점(후공)」 및 「이닝」의 항목을 포함한다. 제1 추출부(21)는, 투구 구도 프레임으로서 검출한 프레임에 대응하는 「구도 판정」의 항목에, 「TRUE」를 기록한다. 투구 구도 프레임으로서 검출되지 않은 프레임에 대응하는 「구도 판정」의 항목은 블랭크로 한다. 또한, 제1 추출부(21)는, 카운트 정보로서 검출한 볼 카운트, 스트라이크 카운트, 아웃 카운트, 주자의 상황, 득점 및 이닝의 각각을, 대응하는 항목의 각각에 기록한다.
한편, 도 7에서는, 설명을 간단히 하기 위해서, 프레임 시간을 0.1초씩으로 하여 표현하고 있으나, 예컨대, 촬영 영상의 프레임 레이트가 30 fps인 경우에는 프레임 시간은 약 0.03초씩이고, 60 fps인 경우에는 프레임 시간은 약 0.017초씩이다.
제1 추출부(21)는, 프레임 정보 테이블(26)을 참조하여, 연속하는 복수의 투구 구도 프레임으로 이루어지는 프레임군을 투구 구도 장면으로서 특정한다. 제1 추출부(21)는, 투구 구도 장면의 선두 프레임을, 투구의 시작을 나타내는 프레임으로서 판정하고, 투구의 시작을 나타내는 투구 태그를 부여한다. 또한, 제1 추출부(21)는, 투구의 시작을 나타내는 프레임의 볼 카운트가 0, 또한 스트라이크 카운트가 0인 경우에, 그 프레임을 타석의 시작을 나타내는 프레임으로서 판정하고, 타석의 시작을 나타내는 타석 태그를 부여한다. 도 7의 예에서는, 「투구 태그」의 항목에 「start」가 기록되어 있는 프레임이, 투구의 시작을 나타내는 투구 태그가 부여된 프레임을 나타낸다. 또한, 「타석 태그」의 항목에 「start」가 기록되어 있는 프레임이, 타석의 시작을 나타내는 타석 태그가 부여된 프레임을 나타낸다.
예컨대, 도 7의 예에서는, 제1 추출부(21)는, 먼저, 프레임 시간=128.3∼130.0에 포함되는 프레임군에 의해 나타나는 장면을, 투구 구도 장면으로서 특정한다. 그리고, 제1 추출부(21)는, 투구 구도 장면의 선두 프레임인 프레임 시간=128.3의 프레임을 투구의 시작을 나타내는 프레임으로서 판정한다. 또한, 프레임 시간=128.3의 프레임의 볼 카운트 및 스트라이크 카운트는 모두 0이기 때문에, 프레임 시간=128.3의 프레임을 타석의 시작을 나타내는 프레임으로서 판정한다. 마찬가지로, 프레임 시간=130.7 이후에 포함되는 프레임군에 의해 나타나는 장면을, 투구 구도 장면으로서 특정한다. 그리고, 제1 추출부(21)는, 투구 구도 장면의 선두 프레임인 프레임 시간=130.7의 프레임을 투구의 시작을 나타내는 프레임으로서 판정한다. 단, 프레임 시간=130.7의 프레임은, 볼 카운트가 0, 스트라이크 카운트가 1이기 때문에, 타석의 시작을 나타내는 프레임으로서는 판정되지 않는다.
계산부(22)는, 프레임 정보 테이블(26)로부터, 타석의 순서를 계산하기 위해서 필요한 정보를 추출한 타석 태그 데이터 테이블(27)을 작성한다. 도 8에, 타석 태그 데이터 테이블(27)의 일례를 도시한다. 도 8의 예에서는, 「프레임 시간」, 「이닝」, 「아웃」, 「주자」, 「득점(선공)」, 「득점(후공)」, 「잔루(누적)」 및 「타석 이벤트 ID」의 항목을 포함한다. 타석 태그 데이터 테이블(27)에 있어서, 각 레코드(각 행)가 타석의 시작을 나타내는 타석 태그로 구획된 각 타석에 관한 태그 데이터(이하, 「타석 태그 데이터」라고 함)에 상당한다.
구체적으로는, 계산부(22)는, 제1 추출부(21)에 의해 타석의 시작을 나타내는 타석 태그가 부여된 프레임을 프레임 정보 테이블(26)로부터 추출한다. 그리고, 계산부(22)는, 추출한 프레임의 프레임 시간, 이닝, 아웃 카운트, 득점(선공) 및 득점(후공)의 정보를, 타석 태그 데이터 테이블(27)에 기록한다. 또한, 제1 추출부(21)는, 프레임 정보 테이블(26)의 「주자」의 항목에 기록된 주자의 상황으로부터, 주자의 수를 구하고, 타석 태그 데이터 테이블(27)의 「주자」의 항목에 기록한다. 예컨대, 프레임 정보 테이블(26)의 「주자」의 항목에 기록된 주자의 상황이, 1루 및 2루에 주자가 있는 것을 나타내고 있는 경우에는, 타석 태그 데이터 테이블(27)의 「주자」의 항목에 「2」를 기록한다.
또한, 계산부(22)는, 각 이닝에 있어서의 잔루수를 누적한 값을, 「잔루(누적)」의 항목에 기록한다. 각 이닝에 있어서의 잔루수는, 「이닝」의 항목에 동일한 값이 기록되어 있는 타석 태그 데이터 중, 프레임 시간이 가장 큰 타석 태그 데이터의 「주자」의 항목에 기록된 인수를, 이닝의 「초」 또는 「말」마다 누적한 것이다.
또한, 계산부(22)는, 「이닝」, 「아웃」, 「주자」, 「득점(선공)」, 「득점(후공)」 및 「잔루(누적)」의 각 항목에 기록된 값에 기초하여, 각 타석이 그 시합에서의 그 팀에게 있어서의 몇 타석째인지를 나타내는 타석의 순서를 계산한다. 예컨대, 계산부(22)는, 하기의 식에 의해 타석의 순서를 계산할 수 있다.
타석의 순서={((「이닝」의 숫자)-1)×3+「잔루(누적)」+1}+「아웃」+「주자」+「득점」
여기서, 「득점」은, 「이닝」이 「초」인 경우에는, 「득점(선공)」의 값을 이용하고, 「이닝」이 「말」인 경우에는, 「득점(후공)」의 값을 이용한다. 계산부(22)는, 타석마다 계산한 타석의 순서를, 타석 태그 데이터 테이블(27)의 「타석 이벤트 ID」의 항목에 기록한다.
한편, 타석 순서의 계산 방법은 상기에 한정되지 않고, 그 타석에 이를 때까지 몇 사람의 타자를 내보냈는가 라고 하는 것을 계산하는 것이면 된다. 예컨대, 하기의 식에 의해서도 타석의 순서를 계산할 수 있다.
타석의 순서=(앞 이닝에 있어서의 최종 타석의 순서)+「아웃」+「주자」+(「득점」-앞 이닝에 있어서의 최종 「득점」)
여기서, (앞 이닝에 있어서의 최종 타석의 순서)는, 「이닝」의 항목에 앞 이닝의 값이 기록되어 있는 타석 태그 데이터 중, 프레임 시간이 가장 큰 타석 태그 데이터의 「타석 이벤트 ID」의 항목에 기록된 값이다. 마찬가지로, 앞 이닝에 있어서의 최종 「득점」은, 「이닝」의 항목에 앞 이닝의 값이 기록되어 있는 타석 태그 데이터 중, 프레임 시간이 가장 큰 타석 태그 데이터의 「득점」의 항목에 기록된 값이다. 한편, 「앞 이닝의 값」은, 계산 대상의 타석 태그 데이터의 「이닝」에 기록된 값과, 「초」 또는 「말」의 구별이 동일하고, 숫자가 1 작은 값이다.
대응부(23)는, 외부 장치(50)로부터 야구 데이터 DB(51)를 취득하고, 야구 데이터 DB(51)와, 타석 태그 데이터 테이블(27)을, 양자의 타석 이벤트 ID에 기초하여 대응시킨다(통합을 행한다). 이에 의해, 도 9에 도시된 바와 같이, 기존의 외부 데이터인 야구 데이터 DB(51)의 데이터를, 편집 완료 영상의 각 프레임에 대응하는 메타 정보로서, 편집 완료 영상에 부가할 수 있다.
도 9의 예에서는, 타석마다의 타자 및 타석 결과를 메타 정보로서 부가하는 예를 도시하고 있으나, 다른 항목도 마찬가지로, 메타 정보로서 부가할 수 있다. 단, 본 실시형태에서는, 후술하는 제2 추출부(24)에서 이용하기 위해서, 대응시키는 데이터에는, 적어도 타석 결과 및 그 타석에서의 득점의 유무를 판정 가능한 정보를 포함한다. 도 9의 예에서는, 대응되어 있는 타석 결과는 상세한 타석 결과이며, 그 타석에 있어서 득점이 있었던 경우에는, 그 득점의 정보도 포함되어 있다. 한편, 도 9의 예에서의 타자의 성명은, 야구 데이터 DB(51)의 타석 데이터 테이블(51A)의 「타자 ID」에 대응하는 선수명을 타자 데이터 테이블(51C)로부터 추출한 것이다.
한편, 대응부(23)는, 야구 데이터 DB(51)와, 타석 태그 데이터 테이블(27)을 대응시킬 때에, 야구 데이터 DB(51) 및 타석 태그 데이터 테이블(27) 각각의 「이닝」의 정보를 참조하여, 이닝마다 대응을 행하는 것으로 해도 좋다. 야구 데이터 DB(51)와, 타석 태그 데이터 테이블(27)을 이닝마다 대응시킴으로써, 후술하는 타석 태그의 부여 에러가 발생했을 때에, 이후의 이닝까지 대응의 어긋남이 파급되는 것을 억제할 수 있다.
여기서, 본 실시형태에서는, 프레임의 화상 특징, 및 프레임으로부터 추출한 카운트 표시(102)가 나타내는 정보에 기초하여, 타석의 시작을 추출하고, 타석의 시작을 나타내는 타석 태그를 부여하고 있다. 그 때문에, 타석의 시작을 완전히 추출할 수 없어, 타석의 시작을 나타내는 타석 태그의 부여 누락이 발생하거나, 타석의 시작이 아닌 개소를 타석의 시작으로서 추출해 버려, 타석의 시작을 나타내는 타석 태그의 중복이 발생하는 경우도 있다. 한편, 이 문제는, 타석의 시작을 나타내는 타석 태그를 사람의 손에 의해 부여하는 경우에도 마찬가지로 발생할 수 있다.
그래서, 대응부(23)는, 타석 태그 데이터 테이블(27)의 「타석 이벤트 ID」에 숫자의 건너뜀이나 중복이 존재하는 개소를, 추출 장치(20)에 구비된 표시 장치를 이용해서 오퍼레이터에게 제시하여, 타석 태그의 수정을 촉구한다. 예컨대, 대응부(23)는, 추출 장치(20)에 구비된 표시 장치에, 도 10에 도시된 바와 같은 수정 화면(110)을 표시한다. 도 10의 예에서는, 수정 화면(110)은, 편집 완료 영상이 재생되는 영상 재생 영역(111)과, 대응 데이터 표시 영역(112)과, 영상의 재생, 빨리 감기, 빨리 되감기, 1프레임씩 재생, 일시 정지 등의 조작을 행하기 위한 조작 버튼(113)을 포함한다. 또한, 수정 화면(110)은, 영상 재생 영역(111)에 표시되어 있는 프레임에 타석 태그를 부여하기 위한 타석 태그 부여 버튼(114)을 포함한다.
대응 데이터 표시 영역(112)에는, 야구 데이터 DB(51)로부터 편집 완료 영상에 대응시킨 타석마다의 메타 정보가 표시된다. 대응 데이터 표시 영역(112)에 표시하는 메타 정보로서는, 적어도 타석 이벤트 ID를 포함하고, 타석 태그의 확인을 용이하게 하기 위한 다른 정보를 표시하면 된다. 대응 데이터 표시 영역(112)에 표시된 각 타석의 데이터가 선택되면, 대응부(23)는, 타석 태그 데이터 테이블(27)로부터 대응하는 프레임 시간을 취득한다. 그리고, 영상 재생 영역(111)에 있어서, 취득한 프레임 시간으로 나타나는 프레임 이후의 편집 완료 영상을 재생한다.
또한, 대응 데이터 표시 영역(112)에 메타 정보를 표시할 때에는, 타석 이벤트 ID에 건너뜀 또는 중복이 있는 타석의 데이터를 강조 표시하는 등 하여, 오퍼레이터에게 타석 태그의 부여 에러의 존재를 제시한다. 도 10의 예에서는, 팀 A에 대한 타석 이벤트 ID=2(도 10 중 「ID:2」라고 표기, 다른 타석 이벤트 ID에 대해서도 동일)가 중복되어 있다. 또한, 팀 B에 대한 타석 이벤트 ID=3이 빠져 있다(2 이상 증가하고 있다). 도 10에서는, 타석 태그의 부여 에러라고 판단되는 타석에 밑줄이 부여되어, 강조 표시되어 있다. 강조 표시의 양태는 도 10에 도시된 밑줄의 부여 이외에도, 예컨대, 문자의 색을 변경하거나, 문자의 크기를 변경하거나, 문자의 글씨체를 변경하는 등의 여러 가지 변형예가 고려될 수 있다.
타석 이벤트 ID가 중복되어 있는 경우, 타석 태그의 부여 에러로서, 타석이 중복되어 추출되어 있는 것이 고려된다. 따라서, 타석 이벤트 ID가 중복되어 있는 경우, 대응부(23)는, 타석이 중복되어 추출된 것에 의한 타석 태그의 부여 에러가 발생하고 있는 것을 데이터 표시 영역(112)에 표시시키는 것으로 해도 좋다. 또한, 타석 이벤트 ID가, 하나 앞의 타석 이벤트 ID에 대해 2 이상 증가하고 있는 경우에는, 타석의 추출 누락이 발생하고 있는 것이 고려된다. 따라서, 타석 이벤트 ID가 2 이상 증가하고 있는 경우, 대응부(23)는, 타석 태그의 부여 에러로서, 타석의 추출 누락이 발생하고 있는 것을 데이터 표시 영역(112)에 표시시키는 것으로 해도 좋다. 또한, 대응부(23)는, 타석 이벤트 ID가, 하나 앞의 타석 이벤트 ID에 대해 감소하고 있는 경우에도 타석 태그의 부여 에러가 발생하고 있다고 판정해도 좋다.
추출 장치(20)의 오퍼레이터는, 예컨대, 타석 이벤트 ID가 중복되어 있는 경우에는, 해당 타석의 데이터를 대응 데이터 표시 영역(112)으로부터 선택함으로써, 영상을 확인한다. 그리고, 오퍼레이터는, 타석 태그의 부여 에러에 해당하는 타석의 데이터를, 대응 데이터 표시 영역(112)으로부터 삭제한다. 대응부(23)는, 대응 데이터 표시 영역(112)으로부터 삭제된 타석의 데이터에 대응하는 타석 태그 데이터를 타석 태그 데이터 테이블(27)로부터 삭제한다. 이에 의해, 잘못해서 타석 태그가 부여되어 있던 프레임으로부터 타석 태그를 떼어낸다.
또한, 추출 장치(20)의 오퍼레이터는, 예컨대, 타석 이벤트 ID가 빠져 있는 경우에는, 해당 전후의 타석의 데이터를 대응 데이터 표시 영역(112)으로부터 선택함으로써, 영상을 확인한다. 그리고, 오퍼레이터는, 영상 재생 영역(111)에 타석의 시작을 나타내는 프레임을 표시시킨 상태에서, 타석 태그 부여 버튼(114)을 선택한다. 대응부(23)는, 타석 태그 부여 버튼(114) 선택시에, 영상 재생 영역(111)에 표시되어 있는 프레임의 프레임 시간을 타석 태그 데이터 테이블(27)에 추가한다. 그리고, 타석 태그 데이터 테이블(27)에 있어서의 전후의 프레임 시간에 대응된 타석 이벤트 ID를 참조하여, 추가한 프레임 시간에 타석 이벤트 ID를 부여한다.
대응부(23)는, 수정 후의 타석 태그 데이터 테이블(27)에 기초하여, 재차 야구 데이터 DB(51)와의 대응을 행한다. 이에 의해, 타석 태그가 부여된 각 프레임, 즉 타석의 시작을 나타내는 각 프레임의 프레임 시간에, 야구 데이터 DB(51)의 타석마다의 데이터가 메타 정보로서 대응된다.
한편, 야구 데이터 DB(51)와, 타석 태그 데이터 테이블(27)과의 대응을 행할 때에는, 하기의 양태로 대응을 행하는 것으로 해도 좋다.
·타석 태그 데이터 테이블(27)의 타석 이벤트 ID가, 하나 앞의 타석 이벤트 ID로부터 1 증가하고 있는 경우에는 대응을 행한다.
·타석 태그 데이터 테이블(27)의 타석 이벤트 ID가, 하나 앞의 타석 이벤트 ID로부터 1 증가하고 있는 값이 아닌 경우에는, 대응 처리를 중단한다.
타석 이벤트 ID가, 하나 앞의 타석 이벤트 ID로부터 1 증가하고 있는 값이 아닌 경우란, 전술한 타석 이벤트 ID가 중복되어 있거나, 타석 이벤트 ID가 2 이상 증가하고 있거나, 타석 이벤트 ID가 감소하고 있는 등의 경우이다. 대응 처리를 중단하는 경우에는, 하나 앞의 타석 이벤트 ID로부터 1 증가하고 있는 값이 아닌 타석 이벤트 ID의 부분에 대해 중단하는 것으로 해도 좋다. 또한, 대응 처리에 있어서 하나 앞의 타석 이벤트 ID로부터 1 증가하고 있는 값이 아닌 타석 이벤트 ID가 검출된 시점에서, 대응 처리가 중단되는 것으로 해도 좋다. 이에 의해, 타석 이벤트 ID가 잘못 부여된 것에 따라, 잘못된 대응 처리가 행해져 버리는 것을 억제할 수 있다.
상기와 같은 메타 정보가 영상에 부가됨으로써, 예컨대, 메타 정보에 기초하여, 어떤 선수의 타석 장면만을 모은 퍼스널 다이제스트를 작성하는 것이 가능해진다. 구체적으로는, 어떤 타자가 지정된 경우, 지정된 타자를 나타내는 선수명 또는 타자 ID가 메타 정보로서 부가된 프레임을 추출한다. 그리고, 추출한 프레임으로부터, 다음 타석 태그가 부여된 프레임 앞의 프레임까지, 즉 타석의 시작을 나타내는 타석 태그로 구획된 구간을, 지정된 타자의 1타석의 영상으로서 추출한다.
그러나, 1타석의 영상을, 상기한 바와 같이 타석의 시작을 나타내는 타석 태그로 구획된 구간으로서 추출한 경우에는, 다이제스트로서 시청하기에는 장황한 영상이 되는 경우가 있다. 예컨대, 1타석의 영상으로서 추출한 구간의 종반에서는, 타석 종료 후의 타자의 모습, 투수의 모습, 구장 내의 모습, 그라운드의 모습, 다음 타자가 타석에 들어가기까지의 모습 등을 찍은 컷이 포함되는 경우가 많으며, 이들 컷이 장황함의 원인이 된다. 한편, 「컷」이란, 동일한 카메라로 연속적으로 촬영된 일련의 부분이다.
그래서, 본 실시형태에서는, 타석 단위의 다이제스트를 작성한 경우에, 장황함을 저감할 수 있도록, 제2 추출부(24)에 의해, 적절한 개소를 타석의 종료로서 추출한다.
구체적으로는, 제2 추출부(24)는, 타석 태그가 부여된 프레임, 즉 타석의 시작을 나타내는 프레임에 대응된 타석마다의 데이터를 나타내는 메타 정보로부터, 타석 결과, 및 그 타석에서의 득점의 유무를 취득한다. 제2 추출부(24)는, 그 타석에 있어서 득점이 없었던 경우에는, 그 타석에서의 최후의 투구를 포함하는 컷 후, 타석 결과에 따른 횟수 컷이 전환된 개소를, 타석의 종료로서 추출한다.
보다 구체적으로는, 제2 추출부(24)는, 타석 태그로 구획된 구간에 있어서, 투구 태그가 부여된 프레임 중, 프레임 시간이 최대인 프레임을, 그 타석에서의 최후의 투구의 시작을 나타내는 프레임으로서 추출한다.
또한, 제2 추출부(24)는, 예컨대, 도 11에 도시된 바와 같이, 타석 결과와 컷 체인지 횟수를 미리 대응시킨 컷 체인지 횟수 테이블(28)로부터, 메타 정보로부터 취득한 타석 결과에 따른 컷 체인지 횟수를 취득한다. 그 타석의 최후의 투구 후의 컷의 전환은, 그 타석의 결과에 따라 상이한 경향에 있다. 이것을 고려하여, 컷 체인지 횟수 테이블(28)에 정해 둔 컷 체인지 횟수는, 1타석분의 영상으로서 종료 부분이 도중에 끊기지 않고, 또한 장황함을 저감할 수 있는 것과 같은 횟수를, 타석 결과에 따라 정해 둔다.
타석 결과에 따른 컷 체인지 횟수의 일례에 대해 설명한다. 예컨대, 타석 결과가 삼진인 경우, 그 타석에서의 최후의 투구를 포함하는 컷은, 타자가 삼진을 당한 후, 약간의 시간 삼진을 당한 타자를 쫓은 후에, 다음 컷으로 전환되는 경향이 있다. 타석 결과가 삼진인 경우에는, 이 컷의 전환 개소를 타석의 종료로 하면, 타석 도중에 끊기지 않고, 또한 장황함도 저감할 수 있어 적절하다. 이 컷의 전환 개소는, 그 타석에서의 최후의 투구를 포함하는 컷과 다음 컷과의 전환 개소이기 때문에, 그 타석에서의 최후의 투구를 포함하는 컷 후의 컷 체인지 횟수는 「0」이 된다. 따라서, 컷 체인지 횟수 테이블(28)에는, 타석 결과 「삼진」에 대응시켜, 컷 체인지 횟수 「0회」를 정해 둔다.
또한, 타석 결과가 삼진 이외의 아웃(내야 땅볼, 외야 플라이 등)인 경우, 그 타석의 최후의 투구에 대한 타격 후, 타구를 쫓는 컷으로 전환된다. 이 타구를 쫓는 컷은, 타구가 플라이인 경우에는, 야수가 볼을 잡을 때까지, 타구가 땅볼인 경우에는, 야수가 볼을 잡아, 어느 하나의 베이스에 송구될 때까지 계속되고, 다음 컷으로 전환되는 경향이 있다. 타석 결과가 삼진 이외의 아웃인 경우에는, 이 타구를 쫓는 컷으로부터의 전환 개소를 타석의 종료로 하는 것이 적절하다. 이 타구를 쫓는 컷으로부터의 전환 개소는, 예컨대 상기한 바와 같이, 그 타석에서의 최후의 투구를 포함하는 컷 후, 1회째의 컷의 전환 개소인 경우가 많다. 그래서, 컷 체인지 횟수 테이블(28)에, 타석 결과 「아웃(삼진 이외)」에 대응시켜, 컷 체인지 횟수 「1회」를 정해 둔다.
또한, 타석 결과가 안타인 경우, 그 타석의 최후의 투구에 대한 타격 후, 타구를 쫓는 컷으로 전환되고, 그 후, 주자를 쫓는 컷으로 전환된다. 이 주자를 쫓는 컷은, 주자가 어느 하나의 베이스 상에 도달할 때까지 계속되고, 다음 컷으로 전환되는 경향이 있다. 타석 결과가 안타인 경우에는, 이 주자를 쫓는 컷으로부터의 전환 개소를 타석의 종료로 하는 것이 적절하다. 이 주자를 쫓는 컷으로부터의 전환 개소는, 예컨대 상기한 바와 같이, 그 타석에서의 최후의 투구를 포함하는 컷 후, 2회째의 컷의 전환 개소인 경우가 많다. 그래서, 컷 체인지 횟수 테이블(28)에, 타석 결과 「안타」에 대응시켜, 컷 체인지 횟수 「2회」를 정해 둔다.
한편, 상기한 컷 체인지 횟수는 일례이며, 타석 단위의 다이제스트를 작성한 경우 등의 장황함을 어디까지 허용할지, 촬영 영상의 컷 분할의 특징 등도 고려하여, 타석 결과에 따른 컷 체인지 횟수를 정해 두면 된다. 또한, 타석 결과의 분류도 상기한 예에 한정되지 않고, 보다 세세하게 분류한 아웃 및 안타의 종류마다, 컷 체인지 횟수를 정해 두어도 좋다. 예컨대, 1루타인 경우에는 「2회」, 2루타인 경우에는 「3회」, 3루타인 경우에는 「4회」와 같이 정해 둘 수도 있다.
또한, 메타 정보에 부여된 타석 결과와, 컷 체인지 횟수 테이블(28)에 정해진 타석 결과에서 분류의 입도가 상이한 경우에는, 메타 정보에 부여된 타석 결과를, 컷 체인지 횟수 테이블(28)에 정해진 타석 결과로 변환하는 룰을 정해 둔다. 그리고, 제2 추출부(24)는, 메타 정보에 부여된 타석 결과를, 이 룰에 따라 변환한 타석 결과에 따른 컷 체인지 횟수를, 컷 체인지 횟수 테이블(28)로부터 취득하면 된다. 예컨대, 메타 정보에 부여된 타석 결과가 「중견수 앞 안타」, 「2루 땅볼」 등의 상세한 타석 결과인 경우, 「중견수 앞 안타」→「안타」, 「2루 땅볼」→「아웃」 등과 같이 변환하는 룰을 정해 두면 된다.
제2 추출부(24)는, 컷 체인지 횟수를 취득하면, 그 타석에서의 최후의 투구의 시작을 나타내는 프레임으로부터 순서대로, 컷이 전환되는 프레임을 검출한다. 컷의 전환의 검출은, 예컨대, 연속하는 프레임 사이에서, 휘도나 색 정보 등의 화소 정보의 차분이 미리 정해진 임계값 이상이 되는 개소를 검출하는 등의 종래 기지의 수법을 이용할 수 있다. 제2 추출부(24)는, 최초로 검출된 컷의 전환을, 그 타석에서의 최후의 투구를 포함하는 컷과 다음 컷과의 전환 개소로 하고, 이 개소 이후에서 컷이 전환되는 개소를, 취득한 컷 체인지 횟수분 검출한다. 제2 추출부(24)는, 마지막으로 검출한 전환 개소의 전환 전의 컷의 말미 프레임을, 타석의 종료를 나타내는 프레임으로서 추출한다. 한편, 컷 체인지 횟수가 0회인 경우에는, 그 타석에서의 최후의 투구를 포함하는 컷의 말미 프레임이, 타석의 종료를 나타내는 프레임으로서 추출된다.
한편, 타석의 종료를 나타내는 프레임에 대응한 컷의 전환 개소는, 타석에서의 최후의 투구의 시작을 나타내는 프레임으로부터 순서대로 검출해 가는 경우에 한정되지 않는다. 미리 모든 컷의 전환 개소를 검출해 두고, 그 중에서, 전술한 바와 같은 컷 체인지 횟수에 해당하는 컷의 전환 개소를 선택하여, 타석의 종료를 나타내는 프레임을 추출해도 좋다.
도 11에 도시된 컷 체인지 횟수 테이블(28)을 이용한 경우에 추출되는 타석의 종료의 일례를, 도 12에 도시한다. 다음 타석의 시작 전의 프레임을, 앞 타석의 종료로서 추출하는 경우에 비해, 장황함을 저감할 수 있는 것을 알 수 있다.
한편, 타석 태그로 구획된 구간 내의 모든 컷 체인지를 검출해 두고, 그 타석에서의 최후의 투구를 포함하는 컷과 다음 컷과의 전환 개소를 「0번째」라고 한다. 그리고, 검출된 컷 체인지 중, 취득한 컷 체인지 횟수번째의 컷의 전환을, 타석의 종료로서 추출하도록 해도 좋다.
또한, 제2 추출부(24)는, 그 타석에 있어서 득점이 있었던 경우에는, 득점 텔롭(101)이 사라진 후의 컷의 전환 개소를, 타석의 종료로서 추출한다. 득점이 있었던 경우에는, 그 득점의 상황에 따라, 컷의 전환의 상황도 상이하기 때문에, 득점 텔롭(101)을 단서로 하여, 타석의 종료를 결정하는 것이다. 득점 텔롭(101)은, 예컨대, 도 13에 도시된 바와 같이, 홈인하는 주자에 맞춰 표시되며, 복수 회 컷이 전환된 후에 사라지는 경향이 있다. 따라서, 적어도 득점 텔롭(101)이 표시되어 있는 동안의 영상을, 그 득점을 가져온 타석의 영상에 포함시킴으로써, 타석의 영상이 도중에 끊긴 인상을 주는 것을 회피할 수 있다.
그래서, 제2 추출부(24)는, 득점이 있었던 것을 나타내는 정보를 메타 정보에 의해 취득한 경우에는, 타석 태그로 구획된 구간 내의 각 프레임으로부터, 패턴 매칭 등에 의해, 득점 텔롭(101)을 포함하는 프레임을 추출한다. 제2 추출부(24)는, 추출된 득점 텔롭(101)을 포함하는 프레임군보다 뒤의 프레임으로부터, 컷이 전환되는 개소를 검출한다. 컷의 전환 개소의 검출 방법은, 상기한 득점이 없었던 경우와 동일하다. 그리고, 제2 추출부(24)는, 득점 텔롭(101)을 포함하는 프레임군보다 뒤이며, 최초로 검출한 전환 개소의 전환 전의 컷의 말미 프레임을, 타석의 종료를 나타내는 프레임으로서 추출한다.
한편, 득점 텔롭(101)을 포함하는 프레임군보다 뒤의 최초의 컷의 전환 개소에 한하지 않고, 득점 텔롭(101)을 포함하는 프레임군보다 뒤이며, 컷이 미리 정해진 횟수 전환된 개소를, 타석의 종료로서 추출해도 좋다. 예컨대, 득점 후의 벤치나 스탠드의 고조된 장면 등도 타석의 영상에 포함시키고 싶은 경우에는, 미리 정해진 횟수를 많게(예컨대, 2회) 하는 등 해도 좋다. 또한, 득점이 있었던 경우라도, 타석의 영상에 득점 장면을 포함시킬 필요가 없는 경우 등에는, 상기한 득점이 없었던 경우와 마찬가지로, 타석 결과에 따른 횟수 컷이 전환된 개소를, 타석의 종료로서 추출해도 좋다.
작성부(25)는, 투구의 시작을 나타내는 메타 정보, 타석의 시작을 나타내는 메타 정보, 및 타석의 종료를 나타내는 메타 정보를 작성한다. 구체적으로는, 작성부(25)는, 제1 추출부(21)에 의해 추출된 투구의 시작을 나타내는 프레임의 프레임 시간에, 투구의 시작을 나타내는 기호를 대응시킨 메타 정보를 작성한다. 마찬가지로, 작성부(25)는, 제1 추출부(21)에 의해 추출된 타석의 시작을 나타내는 프레임의 프레임 시간에, 타석의 시작을 나타내는 기호를 대응시킨 메타 정보를 작성한다. 또한, 마찬가지로, 작성부(25)는, 제2 추출부(24)에 의해 추출된 타석의 종료를 나타내는 프레임의 프레임 시간에, 타석의 종료를 나타내는 기호를 대응시킨 메타 정보를 작성한다.
또한, 작성부(25)는, 작성한 복수의 메타 정보, 및 야구 데이터 DB(51)로부터 대응된 메타 정보를, 대응하는 프레임 시간순으로 기록한 메타 정보 파일을 작성한다. 메타 정보 파일은, 예컨대 csv(comma-separated values) 형식의 파일로서 작성할 수 있다. 도 14에, 메타 정보 파일의 일례를 도시한다. 도 14의 예에서는, 각 행이 하나의 메타 정보를 나타내고, 각 메타 정보는, 프레임 시간(131)을 포함한다. 또한, 각 메타 정보는, 투구의 시작을 나타내는 기호(132), 타석의 시작을 나타내는 기호(133), 및 야구 데이터 DB(51)로부터 대응시킨 타석마다의 정보[텍스트 데이터(134)] 중 적어도 하나를 포함한다.
작성부(25)는, 작성한 메타 정보 파일을 편집 완료 영상에 부가하여, 메타 정보 부가 영상으로서, 전송 장치(30)에 송신한다.
메타 정보 부가 영상이 전송 장치(30)에 의해 전송용 영상으로 변환되어, 사용자 단말(40)에 전송되면, 사용자 단말(40)에서는, 예컨대 도 15에 도시된 바와 같은 전송 화면(120)이 표시된다. 전송 화면(120)은, 사용자가 시청하고 싶은 타석의 영상을 검색하기 위한 검색 영역(121)과, 검색 결과를 일람 표시하는 일람 표시 영역(122)과, 영상이 재생되는 영상 재생 영역(123)을 포함한다.
검색 영역(121)에는, 예컨대, 타자명을 지정한 검색을 행하기 위한 텍스트 박스나, 타석 결과를 선택하여 검색을 행하기 위한 타석 결과마다의 체크 박스 등이 표시된다. 한편, 검색 영역(121)의 표시는 이 예에 한정되지 않고, 전송 영상에 부가되어 있는 메타 정보, 주로, 야구 데이터 DB(51)로부터 대응시킨 타석마다의 정보[텍스트 데이터(134)]를 이용한 검색 조건을 설정 가능한 표시이면 된다.
일람 표시 영역(122)에서는, 검색 영역(121)에서 설정된 검색 조건을 키로 하여, 전송 영상에 부가되어 있는 메타 정보를 검색함으로써 추출된 프레임 시간에 의해 식별되는 타석의 시작을 나타내는 프레임이 일람으로 표시된다. 일람에는, 예컨대, 추출된 프레임 시간에 의해 식별되는 프레임의 섬네일 화상, 및 추출된 프레임 시간에 대응된 타석마다의 정보를 포함할 수 있다.
영상 재생 영역(123)에서는, 일람 표시 영역(122)으로부터 선택된 섬네일 화상에 대응하는 프레임, 즉 타석의 시작을 나타내는 프레임으로부터, 그 프레임에 대응하는 타석의 종료를 나타내는 프레임까지의 프레임군으로 나타나는 영상이 재생된다. 한편, 타석의 시작을 나타내는 프레임에 대응하는 타석의 종료를 나타내는 프레임은, 타석의 종료를 나타내는 메타 정보가 부여된 프레임이며, 선택된 타석의 시작을 나타내는 프레임 후, 최초로 나타나는 프레임이다. 또한, 하나의 타석의 시작과 종료를 나타내는 프레임이 페어가 되는 것과 같은 메타 정보를 작성해 두고, 선택된 타석의 시작을 나타내는 프레임과 페어의 타석의 종료를 나타내는 프레임을 특정해도 좋다.
추출 장치(20)는, 예컨대 도 16에 도시된 컴퓨터(60)로 실현할 수 있다. 컴퓨터(60)는 CPU(61), 일시 기억 영역으로서의 메모리(62) 및 비휘발성의 기억부(63)를 구비한다. 또한, 컴퓨터(60)는, 표시 장치 및 입력 장치 등의 입출력 장치(68)가 접속되는 입출력 인터페이스(I/F)(64)를 구비한다. 또한, 컴퓨터(60)는, 기록 매체(69)에 대한 데이터의 판독 및 기록을 제어하는 read/write(R/W)부(65), 및 인터넷 등의 네트워크에 접속되는 네트워크 I/F(66)를 구비한다. CPU(61), 메모리(62), 기억부(63), 입출력 I/F(64), R/W부(65) 및 네트워크 I/F(66)는, 버스(67)를 통해 서로 접속된다.
기억부(63)는 HDD(Hard Disk Drive), SSD(solid state drive), 플래시 메모리 등에 의해 실현할 수 있다. 기억 매체로서의 기억부(63)에는, 컴퓨터(60)를 추출 장치(20)로서 기능시키기 위한 추출 프로그램(70)이 기억된다. CPU(61)는, 추출 프로그램(70)을 기억부(63)로부터 읽어내어 메모리(62)에 전개하고, 추출 프로그램(70)이 갖는 프로세스를 순차 실행한다.
추출 프로그램(70)은, 제1 추출 프로세스(71)와, 계산 프로세스(72)와, 대응 프로세스(73)와, 제2 추출 프로세스(74)와, 작성 프로세스(75)를 갖는다. CPU(61)는, 제1 추출 프로세스(71)를 실행함으로써, 도 3에 도시된 제1 추출부(21)로서 동작한다. 또한, CPU(61)는, 계산 프로세스(72)를 실행함으로써, 도 3에 도시된 계산부(22)로서 동작한다. 또한, CPU(61)는, 대응 프로세스(73)를 실행함으로써, 도 3에 도시된 대응부(23)로서 동작한다. 또한, CPU(61)는, 제2 추출 프로세스(74)를 실행함으로써, 도 3에 도시된 제2 추출부(24)로서 동작한다. 또한, CPU(61)는, 작성 프로세스(75)를 실행함으로써, 도 3에 도시된 작성부(25)로서 동작한다. 이에 의해, 추출 프로그램(70)을 실행한 컴퓨터(60)가, 추출 장치(20)로서 기능하게 된다.
또한, 전송 장치(30)는, 예컨대 도 17에 도시된 컴퓨터(80)로 실현할 수 있다. 컴퓨터(80)는 CPU(81), 메모리(82), 비휘발성의 기억부(83), 입출력 장치(88)가 접속되는 입출력 I/F(84)를 구비한다. 또한, 컴퓨터(80)는, 기록 매체(89)에 대한 데이터의 판독 및 기록을 제어하는 R/W부(85), 및 인터넷 등의 네트워크에 접속되는 네트워크 I/F(86)를 구비한다. CPU(81), 메모리(82), 기억부(83), 입출력 I/F(84), R/W부(85) 및 네트워크 I/F(86)는, 버스(87)를 통해 서로 접속된다.
또한, 전송 장치(30)를 실현하는 컴퓨터(80)와 추출 장치(20)를 실현하는 컴퓨터(60)는, 컴퓨터(80)의 네트워크 I/F(86), 네트워크 및 컴퓨터(60)의 네트워크 I/F(66)를 통해 접속된다.
기억부(83)는 HDD, SSD, 플래시 메모리 등에 의해 실현할 수 있다. 기억 매체로서의 기억부(83)에는, 컴퓨터(80)를 전송 장치(30)로서 기능시키기 위한 전송 프로그램(90)이 기억되어 있다. CPU(81)는, 전송 프로그램(90)을 기억부(83)로부터 읽어내어 메모리(82)에 전개하고, 전송 프로그램(90)이 갖는 프로세스를 순차 실행한다.
전송 프로그램(90)은, 편집 프로세스(91)와, 전송 프로세스(92)를 갖는다. CPU(81)는, 편집 프로세스(91)를 실행함으로써, 도 3에 도시된 편집부(31)로서 동작한다. 또한, CPU(81)는, 전송 프로세스(92)를 실행함으로써, 도 3에 도시된 전송부(32)로서 동작한다. 이에 의해, 전송 프로그램(90)을 실행한 컴퓨터(80)가, 전송 장치(30)로서 기능하게 된다.
한편, 추출 장치(20) 및 전송 장치(30)의 각각은, 예컨대 반도체 집적 회로, 보다 상세하게는 ASIC(Application Specific Integrated Circuit) 등으로 실현하는 것도 가능하다.
다음으로, 본 실시형태에 따른 영상 전송 시스템(10)의 작용에 대해 설명한다. 촬영 영상이 전송 장치(30)에 입력되면, 전송 장치(30)가, 도 18에 도시된 편집 처리를 실행하여, 편집 완료 영상을 출력한다. 다음으로, 편집 완료 영상이 추출 장치(20)에 입력되면, 추출 장치(20)가, 도 19에 도시된 추출 처리를 실행하여, 메타 정보 부가 영상을 출력한다. 그리고, 메타 정보 부가 영상이 전송 장치(30)에 입력되면, 전송 장치(30)가, 도 21에 도시된 전송 처리를 실행하여, 전송용 영상을 출력한다. 이하, 각 처리에 대해 상세히 서술한다.
먼저, 도 18에 도시된 편집 처리의 단계 S10에서, 편집부(31)가, 촬영 영상을 취득한다. 다음으로, 단계 S12에서, 편집부(31)가, 입출력 장치(68)를 이용하여 오퍼레이터의 조작에 의해 지시된 편집 내용을, 화상 처리에 의해 촬영 영상에 적용한다. 다음으로, 단계 S14에서, 편집부(31)가, 편집 완료 영상을, 추출 장치(20)에 송신하고, 편집 처리는 종료한다.
다음으로, 도 19에 도시된 추출 처리의 단계 S20에서, 제1 추출부(21)가, 전송 장치(30)로부터 송신된 편집 완료 영상을 취득한다.
다음으로, 단계 S22에서, 제1 추출부(21)가, 편집 완료 영상에 포함되는 복수의 프레임의 각각으로부터, 투수의 투구 장면에 사용되는 카메라 앵글로 촬영된 구도의 프레임을, 투구 구도 프레임으로서 검출한다. 또한, 제1 추출부(21)가, 각 프레임으로부터, 카운트 표시(102)를 추출하고, 카운트 표시(102)가 나타내는 카운트 정보를 검출한다. 제1 추출부(21)는, 투구 구도 프레임의 검출 결과, 및 프레임마다 검출한 카운트 정보를, 프레임 정보 테이블(26)에 기록한다.
다음으로, 단계 S24에서, 제1 추출부(21)가, 프레임 정보 테이블(26)을 참조하여, 연속하는 복수의 투구 구도 프레임으로 이루어지는 프레임군을 투구 구도 장면으로서 특정한다. 그리고, 투구 구도 장면의 개시 프레임을, 투구의 시작을 나타내는 프레임으로서 판정하고, 투구의 시작을 나타내는 투구 태그를 부여한다. 또한, 제1 추출부(21)는, 투구의 시작을 나타내는 프레임의 볼 카운트가 0, 또한 스트라이크 카운트가 0인 경우에, 그 프레임을 타석의 시작을 나타내는 프레임으로서 판정하고, 타석의 시작을 나타내는 타석 태그를 부여한다.
다음으로, 단계 S26에서, 계산부(22)가, 프레임 정보 테이블(26)로부터, 타석의 순서를 계산하기 위해서 필요한 정보를 추출한, 예컨대 도 8에 도시된 바와 같은 타석 태그 데이터 테이블(27)을 작성한다. 그리고, 계산부(22)는, 「이닝」, 「아웃」, 「주자」, 「득점(선공)」, 「득점(후공)」 및 「잔루(누적)」의 각 항목에 기록된 값에 기초하여, 각 타석이 그 시합에서의 그 팀에게 있어서의 몇 타석째인지를 나타내는 타석의 순서를 계산한다. 계산부(22)는, 타석마다 계산한 타석의 순서를, 타석 태그 데이터 테이블(27)의 「타석 이벤트 ID」의 항목에 기록한다.
다음으로, 단계 S28에서, 대응부(23)가, 외부 장치(50)로부터 야구 데이터 DB(51)를 취득하고, 야구 데이터 DB(51)와, 타석 태그 데이터 테이블(27)을, 양자의 타석 이벤트 ID에 기초하여 대응시킨다.
다음으로, 단계 S30에서, 대응부(23)가, 타석 태그 데이터 테이블(27)의 「타석 이벤트 ID」에 숫자의 건너뜀이나 중복이 존재하는 개소를 제시하여, 타석 태그의 수정을 촉구하기 위한, 예컨대 도 10에 도시된 바와 같은 수정 화면(110)을 표시한다.
수정 화면(110)을 제시받은 추출 장치(20)의 오퍼레이터는, 타석 이벤트 ID가 중복되어 있는 경우에는, 영상을 확인하여, 타석 태그의 부여 에러에 해당하는 타석의 데이터를, 대응 데이터 표시 영역(112)으로부터 삭제한다. 또한, 오퍼레이터는, 타석 이벤트 ID가 빠져 있는 경우에는, 영상을 확인하면서, 타석 태그를 부여하고 싶은 개소에서 타석 태그 부여 버튼(114)을 선택한다.
다음으로, 단계 S32에서, 대응부(23)가, 오퍼레이터로부터의 타석 태그의 수정을 접수했는지의 여부를 판정한다. 접수하고 있지 않은 경우에는, 접수할 때까지 본 단계의 판정을 반복한다. 접수한 경우에는, 처리는 단계 S34로 이행한다.
단계 S34에서는, 대응부(23)는, 대응 데이터 표시 영역(112)으로부터의 타석의 데이터의 삭제를 접수한 경우에는, 삭제된 타석의 데이터에 대응하는 타석 태그 데이터를 타석 태그 데이터 테이블(27)로부터 삭제한다. 또한, 대응부(23)는, 타석 태그 부여 버튼(114)의 선택을 접수한 경우에는, 타석 태그 부여 버튼(114) 선택시에, 영상 재생 영역(111)에 표시되어 있는 프레임의 프레임 시간을 타석 태그 데이터 테이블(27)에 추가한다. 그리고, 대응부(23)는, 타석 태그 데이터 테이블(27)에 있어서의 전후의 프레임 시간에 대응된 타석 이벤트 ID를 참조하여, 추가한 프레임 시간에 타석 이벤트 ID를 부여한다.
한편, 타석 이벤트 ID에 숫자의 건너뜀이나 중복이 없는 경우에는, 타석 태그의 부여 에러는 존재하지 않는다고 판정하고, 상기 단계 S30∼S34의 처리를 스킵한다.
다음으로, 단계 S36에서, 제2 추출부(24)가, 타석 태그로 구획된 구간마다, 도 20에 상세한 내용을 나타내는 타석 종료 추출 처리를 실행한다.
도 20에 도시된 타석 종료 추출 처리의 단계 S361에서, 제2 추출부(24)가, 타석 태그가 부여된 프레임, 즉 타석의 시작을 나타내는 프레임에 대응된 타석마다의 데이터를 나타내는 메타 정보로부터, 타석 결과 및 그 타석에서의 득점의 유무를 취득한다.
다음으로, 단계 S362에서, 제2 추출부(24)가, 취득한 정보에 기초하여, 득점의 유무를 판정한다. 득점이 없었던 경우에는, 처리는 단계 S363으로 이행하고, 득점이 있었던 경우에는, 처리는 단계 S365로 이행한다.
단계 S363에서는, 제2 추출부(24)가, 예컨대, 도 11에 도시된 바와 같이, 타석 결과와 컷 체인지 횟수를 미리 대응시킨 컷 체인지 횟수 테이블(28)로부터, 메타 정보로부터 취득한 타석 결과에 따른 컷 체인지 횟수를 취득한다.
다음으로, 단계 S364에서, 제2 추출부(24)가, 타석 태그로 구획된 구간에 있어서, 투구 태그가 부여된 프레임 중, 프레임 시간이 최대인 프레임을, 그 타석에서의 최후의 투구의 시작을 나타내는 프레임으로서 추출한다. 그리고, 제2 추출부(24)는, 그 타석에서의 최후의 투구의 시작을 나타내는 프레임으로부터 순서대로, 컷이 전환되는 프레임을 검출하고, 최초로 검출된 컷의 전환을, 그 타석에서의 최후의 투구를 포함하는 컷과 다음 컷과의 전환 개소로 한다. 또한, 제2 추출부(24)는, 그 타석에서의 최후의 투구를 포함하는 컷과 다음 컷과의 전환 개소 이후에서 컷이 전환되는 개소를, 취득한 컷 체인지 횟수분 검출한다. 제2 추출부(24)는, 마지막으로 검출한 전환 개소의 전환 전의 컷의 말미 프레임을, 타석의 종료를 나타내는 프레임으로서 추출한다.
한편, 단계 S365에서는, 제2 추출부(24)가, 타석 태그로 구획된 구간 내의 각 프레임으로부터, 득점 텔롭(101)을 포함하는 프레임을 추출한다.
다음으로, 단계 S366에서, 제2 추출부(24)가, 추출된 득점 텔롭(101)을 포함하는 프레임군보다 뒤의 프레임으로부터, 컷이 전환되는 개소를 검출한다. 그리고, 제2 추출부(24)가, 득점 텔롭(101)을 포함하는 프레임군보다 뒤이며, 최초로 검출한 전환 개소의 전환 전의 컷의 말미 프레임을, 타석의 종료를 나타내는 프레임으로서 추출한다.
편집 완료 영상에 포함되는 타석 태그로 구획된 모든 구간에 대해, 상기한 타석 종료 추출 처리가 종료되면, 처리는 도 19에 도시된 추출 처리로 되돌아간다.
다음으로, 도 19에 도시된 추출 처리의 단계 S38에서, 작성부(25)가, 투구의 시작을 나타내는 메타 정보, 타석의 시작을 나타내는 메타 정보, 및 타석의 종료를 나타내는 메타 정보를 작성한다. 다음으로, 작성부(25)는, 작성한 복수의 메타 정보, 및 야구 데이터 DB(51)로부터 대응된 메타 정보를, 대응하는 프레임 시간순으로 기록한 메타 정보 파일을 작성한다. 그리고, 작성부(25)는, 작성한 메타 정보 파일을 편집 완료 영상에 부가하여, 메타 정보 부가 영상으로서, 전송 장치(30)에 송신하고, 추출 처리는 종료한다.
다음으로, 도 21에 도시된 전송 처리의 단계 S40에서, 전송부(32)가, 추출 장치(20)로부터 송신된 메타 정보 부가 영상을 취득한다. 다음으로, 단계 S42에서, 전송부(32)가, 메타 정보 부가 영상을 미리 정해진 규격에 따른 전송용 영상으로 변환하여, 전송처인 사용자 단말(40)에 전송하고, 전송 처리는 종료한다.
이상 설명한 바와 같이, 본 실시형태에 따른 추출 장치(20)에 의하면, 타석의 시작을 나타내는 타석 태그로 구획된 구간에서의 최후의 투구를 포함하는 컷 후, 그 구간이 나타내는 타석에 대응된 타석 결과에 따른 횟수 컷이 전환된 개소를 검출한다. 그리고, 검출한 개소를, 그 타석의 종료로서 추출한다. 이에 의해, 1타석분의 영상으로서 종료 부분이 도중에 끊기지 않고, 또한 장황함을 저감할 수 있는 것과 같은 적절한 개소를 타석의 종료로서 추출할 수 있다. 즉, 야구 시합을 촬영한 영상으로부터, 타석의 종료를 정밀도 좋게 추출할 수 있다.
또한, 득점이 있었던 장면에서는, 득점이 있었던 것을 나타내는 텔롭이 사라진 후의 컷의 전환 개소를, 그 타석의 종료로서 추출한다. 이에 의해, 어떠한 득점 장면이어도, 1타석분의 영상으로서 득점 장면도 포함하여 종료 부분이 도중에 끊기지 않고, 또한 장황함을 저감할 수 있는 것과 같은 적절한 개소를 타석의 종료로서 추출할 수 있다.
또한, 타석의 순서를 계산하여, 외부 데이터인 타석의 데이터를 정밀도 좋게 대응시키기 때문에, 타석의 종료를 추출하기 위해서 이용하는 타석 결과로서, 정밀도가 높은 타석 결과를 이용할 수 있다. 이에 의해, 보다 정밀도 좋게 타석의 종료를 추출할 수 있다.
본 실시형태에 의해 추출된 타석의 종료에 기초한 메타 정보가 부가된 영상에 의하면, 타석 단위의 다이제스트 영상을 작성했을 때에, 장황함을 저감할 수 있다. 또한, 외부 데이터를 대응시킨 메타 정보가 부가되어 있기 때문에, 상세한 검색 조건을 설정해서, 원하는 타석의 영상을 검색하여 시청하는 것이 가능하다.
한편, 상기 실시형태에서는, 편집 완료 영상으로부터 타석의 시작을 나타내는 프레임을 추출하고, 외부 데이터로부터 타석 결과를 대응시키는 경우에 대해 설명하였으나, 미리 타석의 시작을 나타내는 개소가 특정되고, 타석 결과가 부여된 영상을, 추출 장치(20)에 입력하도록 해도 좋다. 이 경우, 추출 장치(20)로부터 제1 추출부(21), 계산부(22) 및 대응부(23)를 생략할 수 있다. 또한, 타석의 시작의 특정 방법, 및 타석 결과의 부여 방법은, 본 실시형태에서 설명한 방법에 한정되지 않고, 예컨대, 사람의 손에 의해 추출 및 부여해도 좋다.
또한, 상기 실시형태에서는, 투수의 등 뒤로부터 타자 방향을 촬영한 프레임을, 투구 구도 프레임으로 하는 경우에 대해 설명하였으나, 투구 구도 프레임은 이것에 한정되지 않는다. 예컨대, 구심의 머리 부분에 설치된 카메라로부터 촬영된 프레임(구심으로부터 투수 방향을 촬영한 프레임) 등, 투수의 투구 장면에 사용되는 특징적인 카메라 앵글로 촬영된 프레임이면 된다.
또한, 상기 실시형태에서는, 외부 데이터로부터 대응된 득점의 유무를 나타내는 정보에 기초하여, 득점이 있었는지의 여부를 판정하는 경우에 대해 설명하였으나, 이것에 한정되지 않는다. 예컨대, 프레임 정보 테이블(26)을 참조하여, 다음 타석과의 「득점」의 차이로부터, 그 타석에 있어서 득점이 있었는지의 여부를 판정해도 좋다.
또한, 상기 실시형태에서는, 득점의 유무를 판정한 후에, 득점 텔롭을 검출하여, 득점이 있었던 경우에는, 득점 텔롭을 검출하는 처리를 행하는 경우에 대해 설명하였으나, 이것에 한정되지 않는다. 예컨대, 득점의 유무를 판정하지 않고, 각 프레임으로부터 득점 텔롭을 검출해도 좋다. 이 경우, 득점 텔롭이 검출된 경우에는, 상기 실시형태와 마찬가지로, 득점 텔롭이 사라진 후, 미리 정해진 횟수 컷이 전환된 개소를, 타석의 종료로서 추출하면 된다.
또한, 상기 실시형태에서는, 전송 장치(30)와 추출 장치(20)를 포함하는 영상 전송 시스템(10)을 예로 설명하였으나, 이것에 한정되지 않는다. 전송 장치(30)의 각 기능부와 추출 장치(20)의 각 기능부를, 하나의 컴퓨터로 실현하도록 해도 좋다.
또한, 개시된 기술의 추출 장치는, 영상 전송 시스템에 적용하는 경우에 한정되지 않는다. 예컨대, 네트워크로 접속된 외부의 기억 장치에 저장된 영상 파일을 취득하고, 기존의 외부의 야구 데이터를 메타 정보로서 영상 파일에 대응시켜, 기억 장치에 다시 저장하도록 해도 좋다. 또한, 개시된 기술의 추출 장치는, 야구 외에, 소프트볼 등의 스포츠에도 적용 가능하다.
또한, 상기에서는, 추출 프로그램(70)이 기억부(63)에, 전송 프로그램(90)이 기억부(83)에 미리 기억(인스톨)되어 있는 양태를 설명하였으나, CD-ROM이나 DVD-ROM 등의 기억 매체에 기록된 형태로 제공하는 것도 가능하다.

Claims (7)

  1. 컴퓨터에,
    타석의 시작을 나타내는 개소와, 이 타석의 시작으로부터 특정되는 각 타석의 결과를 나타내는 정보가 대응된 야구 시합의 촬영 영상으로부터, 상기 타석에서의 최후의 투구 장면을 포함하는 컷 후, 상기 타석의 결과에 따른 횟수 컷이 전환된 개소를, 상기 타석의 종료로서 추출하는 것을 포함하는 처리를 실행시키는 것을 특징으로 하는 추출 프로그램을 기억한 컴퓨터 판독가능한 기억 매체.
  2. 제1항에 있어서, 상기 타석의 결과가, 득점이 있었던 것을 나타내는 것이었던 경우에는, 득점이 있었던 것을 나타내는 표시가 사라진 후, 미리 정해진 횟수 컷이 전환된 개소를, 상기 타석의 종료로서 추출하는 것인, 추출 프로그램을 기억한 컴퓨터 판독가능한 기억 매체.
  3. 컴퓨터에,
    야구 시합의 촬영 영상에 부가된 득점이 있었던 것을 나타내는 표시가 사라진 후, 미리 정해진 횟수 컷이 전환된 개소를, 타석의 종료로서 추출하는 것을 포함하는 처리를 실행시키는 것을 특징으로 하는 추출 프로그램을 기억한 컴퓨터 판독가능한 기억 매체.
  4. 컴퓨터에,
    타석의 시작을 나타내는 개소와, 이 타석의 시작으로부터 특정되는 각 타석의 결과를 나타내는 정보가 대응된 야구 시합의 촬영 영상으로부터, 상기 타석에서의 최후의 투구 장면을 포함하는 컷 후, 상기 타석의 결과에 따른 횟수 컷이 전환된 개소를, 상기 타석의 종료로서 추출하는 것을 포함하는 처리를 실행시키는 것을 특징으로 하는 추출 방법.
  5. 컴퓨터에,
    야구 시합의 촬영 영상에 부가된 득점이 있었던 것을 나타내는 표시가 사라진 후, 미리 정해진 횟수 컷이 전환된 개소를, 타석의 종료로서 추출하는 것을 포함하는 처리를 실행시키는 것을 특징으로 하는 추출 방법.
  6. 타석의 시작을 나타내는 개소와, 이 타석의 시작으로부터 특정되는 각 타석의 결과를 나타내는 정보가 대응된 야구 시합의 촬영 영상으로부터, 상기 타석에서의 최후의 투구 장면을 포함하는 컷 후, 상기 타석의 결과에 따른 횟수 컷이 전환된 개소를, 상기 타석의 종료로서 추출하는 추출부를 포함하는 것을 특징으로 하는 추출 장치.
  7. 야구 시합의 촬영 영상에 부가된 득점이 있었던 것을 나타내는 표시가 사라진 후, 미리 정해진 횟수 컷이 전환된 개소를, 타석의 종료로서 추출하는 추출부를 포함하는 것을 특징으로 하는 추출 장치.
KR1020150172668A 2014-12-10 2015-12-04 추출 프로그램, 방법 및 장치 KR101891382B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2014-250152 2014-12-10
JP2014250152A JP2016107001A (ja) 2014-12-10 2014-12-10 抽出プログラム、方法、及び装置

Publications (2)

Publication Number Publication Date
KR20160070688A true KR20160070688A (ko) 2016-06-20
KR101891382B1 KR101891382B1 (ko) 2018-08-24

Family

ID=56111784

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150172668A KR101891382B1 (ko) 2014-12-10 2015-12-04 추출 프로그램, 방법 및 장치

Country Status (4)

Country Link
US (1) US10134445B2 (ko)
JP (1) JP2016107001A (ko)
KR (1) KR101891382B1 (ko)
TW (1) TWI590856B (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10115021B2 (en) * 2015-06-24 2018-10-30 JVC Kenwood Corporation Scorebook creating apparatus, scorebook creating system, scorebook creating method, program, imaging device, and reproducing method
JP6790407B2 (ja) * 2016-03-25 2020-11-25 株式会社Ｊｖｃケンウッド 表示装置、表示方法及び表示プログラム
US10238949B2 (en) * 2016-07-22 2019-03-26 Joe Martin Ploegman System and method for displaying a baseball batter count
CN108744526A (zh) * 2018-05-23 2018-11-06 广州虎牙信息科技有限公司 一种技能主播用户确定方法、装置、设备及存储介质
JP7164334B2 (ja) * 2018-06-27 2022-11-01 ライブリッツ株式会社 動作分析装置、動作分析方法及び動作分析プログラム
TWI715024B (zh) * 2019-05-03 2021-01-01 林淑貞 房仲經紀人工作管理系統及方法
CN110933459B (zh) * 2019-11-18 2022-04-26 咪咕视讯科技有限公司 赛事视频的剪辑方法、装置、服务器以及可读存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007335984A (ja) 2006-06-12 2007-12-27 Matsushita Electric Ind Co Ltd イベント終了点抽出装置、イベント終了点抽出方法および抽出プログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3176893B2 (ja) * 1999-03-05 2001-06-18 株式会社次世代情報放送システム研究所 ダイジェスト作成装置，ダイジェスト作成方法およびその方法の各工程をコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
US7143354B2 (en) * 2001-06-04 2006-11-28 Sharp Laboratories Of America, Inc. Summarization of baseball video content
US8214741B2 (en) * 2002-03-19 2012-07-03 Sharp Laboratories Of America, Inc. Synchronization of video and data
JP4401220B2 (ja) 2004-04-01 2010-01-20 富士通株式会社 ハイライトシーン抽出装置およびハイライトシーン配信システム
KR100785076B1 (ko) * 2006-06-15 2007-12-12 삼성전자주식회사 스포츠 동영상에서의 실시간 이벤트 검출 방법 및 그 장치
JP2008005204A (ja) * 2006-06-22 2008-01-10 Matsushita Electric Ind Co Ltd 映像区間決定装置、方法、プログラム
US7956893B2 (en) * 2006-12-11 2011-06-07 Mavs Lab. Inc. Method of indexing last pitching shots in a video of a baseball game
JP5010292B2 (ja) * 2007-01-18 2012-08-29 株式会社東芝 映像属性情報出力装置、映像要約装置、プログラムおよび映像属性情報出力方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007335984A (ja) 2006-06-12 2007-12-27 Matsushita Electric Ind Co Ltd イベント終了点抽出装置、イベント終了点抽出方法および抽出プログラム

Also Published As

Publication number Publication date
US20160172005A1 (en) 2016-06-16
US10134445B2 (en) 2018-11-20
TW201639615A (zh) 2016-11-16
KR101891382B1 (ko) 2018-08-24
JP2016107001A (ja) 2016-06-20
TWI590856B (zh) 2017-07-11

Similar Documents

Publication Publication Date Title
KR101891382B1 (ko) 추출 프로그램, 방법 및 장치
US9767364B2 (en) Footage extraction method, footage playback method, and device
KR101696984B1 (ko) 정보 처리 방법 및 장치
US9530061B2 (en) Extraction method for extracting a pitching scene and device for the same
KR101792909B1 (ko) 정보 처리 방법 및 장치
KR101988713B1 (ko) 비일시적 컴퓨터 판독 가능 저장 매체 및 표시 제어 장치
KR101860256B1 (ko) 비일시적 컴퓨터 판독 가능한 기억 매체, 재생 제어 방법, 및 재생 제어 장치
KR101701632B1 (ko) 판정 방법 및 장치
US9538244B2 (en) Extraction method for extracting a pitching scene and device for the same
US20170274266A1 (en) Non-transitory computer-readable storage medium, display control device, and display control method
JP4177820B2 (ja) データ入力装置及びデータ入力システム
CN117178285A (zh) 信息处理装置、信息处理方法和程序

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)