KR102184383B1 - 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법 - Google Patents

저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법 Download PDF

Info

Publication number
KR102184383B1
KR102184383B1 KR1020190124351A KR20190124351A KR102184383B1 KR 102184383 B1 KR102184383 B1 KR 102184383B1 KR 1020190124351 A KR1020190124351 A KR 1020190124351A KR 20190124351 A KR20190124351 A KR 20190124351A KR 102184383 B1 KR102184383 B1 KR 102184383B1
Authority
KR
South Korea
Prior art keywords
unmanned
unit
sports
coordinate values
photographing
Prior art date
Application number
KR1020190124351A
Other languages
English (en)
Inventor
장원철
Original Assignee
주식회사 스포카도
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 스포카도 filed Critical 주식회사 스포카도
Priority to KR1020190124351A priority Critical patent/KR102184383B1/ko
Application granted granted Critical
Publication of KR102184383B1 publication Critical patent/KR102184383B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4662—Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • H04N5/23206—
    • H04N5/23299—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Studio Devices (AREA)

Abstract

머신러닝 기술을 이용한 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법이 개시된다. 본 발명은 스포츠 경기에서 선수의 특정동작을 구분동작으로 연속되게 촬영하도록 적어도 둘 이상 구비된 제1무인촬영부와, 상기 제1무인촬영부들에서 촬영된 각각의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 측정하는 측정부와, 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역에 상기 수구가 도달시 상기 수구의 좌표값들을 측정하는 적어도 둘 이상 구비된 제2무인촬영부와, 상기 측정부 및 제2무인촬영부들에서 측정된 좌표값들을 누적하여 저장하는 저장부와, 상기 저장부에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값들과 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 동작을 하면 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들과 대응되게 상기 수구가 진행할 좌표값을 예측하는 예측부와, 상기 예측부에서 예측된 상기 수구가 진행될 좌표값에 따라 각각의 촬영 방향을 결정하고, 결정된 촬영방향으로 상기 스포츠 경기 영상을 촬영하도록 스포츠 경기장에 적어도 둘 이상 구비된 제3무인촬영부와, 상기 제3무인촬영부들에서 촬영된 스포츠 경기 영상들을 수집하여 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하는 무인영상편집부 및 상기 무인영상편집부에서 제작된 스포츠 중계방송의 영상을 외부로 송출하는 송출부를 포함하는 것을 특징으로 한다.
본 발명에 따르면, 머신기술을 기반으로 하여 스포츠 경기 중 선수의 동작에 맞춰 경기장 내부의 무인촬영부들이 자동으로 구동하고, 구동된 무인촬영부들이 촬영한 영상을 바탕으로 스포츠 중계방송 영상을 제작하는 머신러닝 기술을 이용한 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법을 제공하는 데 그 목적이 있다.

Description

저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법{Low cost unmanned sports relay system and manufacturing method of unmanned sports relay using the same}
본 발명은 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법에 관한 것으로서, 더욱 상세하게는 머신러닝 기술을 기반으로 하여 스포츠 경기 중 선수의 동작에 맞춰 경기장 내부의 무인촬영부들이 작동하는 스포츠 중계 스트리밍 자동 제작 방법 및 시스템에 관한 것이다.
영상 및 통신 매체가 발전하면서 스포츠 중계방송 시스템도 날로 발전하고 있다. 특히, 스포츠가 가진 우연성에 의해 각 방송사 및 포털사이트 등 스포츠 중계 프로그램에 실시간으로 다양한 영상을 제공하고자 하는 노력이 지속된다.
그러나 각 방송사 및 포털사이트 등에서 다양한 영상을 제공하려는 노력은 필연적으로 대규모의 투자로 연결되고 이로 인한 비용은 해마다 증가하고 있다. 아울러, 스포츠 중계의 원활한 촬영 및 편집을 위해 경험이 많은 스태프의 참여가 필수적인데, 현장에서의 필요 인력에 비해 경험이 많은 스태프의 수요는 절대 부족한 것이 현실이다.
이러한 문제점을 해결하고자 스포츠 중계방송 시스템의 비용 및 인력 부족 현상을 해소하기 위한 다양한 방법들이 제시되어 있다.
특허문헌 1은 정확한 투구 궤적이 확인될 수 있는 위치에서 획득한 영상으로부터 고품질 피칭 슬로우 모션 영상을 생성하여 실시간 중계방송에 적합하도록 제공함과 아울러, 투수의 피칭과 그에 따른 타자의 스윙 상태를 더욱 정확하게 확인할 수 있도록 한 중계방송을 위한 야구 피칭 영상 제공 시스템에 관한 것이다.
이 경우, 중계방송 영상이 투수와 타자에만 집중되어 투수와 타자 이외의 경기장 상황을 파악하기 어렵고, 고품질 피칭 슬로우 모션 동작을 획득하기 위하여 고가의 장비가 도입되고, 경험이 많은 스태프도 필요하다는 단점이 있었다.
특허문헌 2는 방송객체를 3D 모델링하여 모션 데이터를 실시간으로 제공함으로써 시청자가 시점을 다양하게 선택하여 시청할 수 있도록 하는 방송 객체의 3D 모델링 데이터를 이용한 방송 시청 시점 다각화 시스템 및 그 방법의 제공을 목적으로 한다.
이 경우, 경기장 내의 모든 정보를 3D 모델링 하도록 다수의 카메라가 투입되어야 하고, 이 카메라들에서 유입되는 정보량이 방대하여 이를 처리하기 위한 서버를 증설이 필요하다는 단점이 있었다.
한국 등록특허 제10-1215058호 (2012. 06. 21) 한국 공개특허 제10-20310070035호 (2011. 12. 19)
본 발명은 상기한 종래기술의 문제점을 해소하기 위해 창출된 것으로, 머신러닝 기술을 기반으로 하여 스포츠 경기 중 선수의 동작에 맞춰 경기장 내부의 무인촬영부들이 자동으로 구동하고, 구동된 무인촬영부들이 촬영한 영상을 바탕으로 스포츠 중계방송 영상을 제작하는 머신러닝 기술을 이용한 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법을 제공하는 데 그 목적이 있다.
상기와 같은 목적을 달성하고자 본 발명에 따른 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법은, 스포츠 경기에서 선수의 특정동작을 구분동작으로 연속되게 촬영하도록 적어도 둘 이상 구비된 제1무인촬영부와, 상기 제1무인촬영부들에서 촬영된 각각의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 측정하는 측정부와, 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역에 상기 수구가 도달시 상기 수구의 좌표값들을 측정하는 적어도 둘 이상 구비된 제2무인촬영부와, 상기 측정부 및 제2무인촬영부들에서 측정된 좌표값들을 누적하여 저장하는 저장부와, 상기 저장부에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값들과 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 동작을 하면 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들과 대응되게 상기 수구가 진행할 좌표값을 예측하는 예측부와, 상기 예측부에서 예측된 상기 수구가 진행될 좌표값에 따라 각각의 촬영 방향을 결정하고, 결정된 촬영방향으로 상기 스포츠 경기 영상을 촬영하도록 스포츠 경기장에 적어도 둘 이상 구비된 제3무인촬영부와, 상기 제3무인촬영부들에서 촬영된 스포츠 경기 영상들을 수집하여 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하는 무인영상편집부 및 상기 무인영상편집부에서 제작된 스포츠 중계방송의 영상을 외부로 송출하는 송출부를 포함하는 것을 특징으로 한다.
한편, 저비용 무인 스포츠 중계 시스템에서 스포츠 경기의 중계방송을 무인으로 제작하는 과정은 상기 선수가 특정동작을 시작할 때부터 끝날 때까지 상기 제1무인촬영부들이 상기 선수의 특정동작을 구분동작으로 연속되게 촬영하고, 상기 측정부가 상기 제1무인촬영부들이 촬영한 상기 선수의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 측정하며, 상기 제2무인촬영부가 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역 중 한 지점에 상기 수구가 도달시 상기 수구의 좌표값을 측정하고, 상기 저장부가 상기 측정부 및 제2무인촬영부에서 측정된 좌표값들을 누적하여 저장한다. 이후, 상기 예측부가 상기 저장부에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값들과 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 특정동작을 하면, 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들과 대응되게 상기 수구가 진행할 좌표값을 예측하고, 상기 예측부에서 예측된 상기 수구의 진행 좌표값이 실제 스포츠 경기 중의 상기 수구의 진행 좌표값과 일치하는지 검증하며, 상기 실제 스포츠 경기 중 상기 수구의 진행 좌표값과 상기 예측부에서 예측된 상기 수구의 진행 좌표값을 비교하여, 실제 스포츠 중계에 적합한 수준의 예측 정확도를 보이는지 검토한다. 이때, 상기 검토 단계에서 상기 예측부가 예측한 상기 수구의 진행 좌표값이 실제 스포츠 중계에 적합한 수준에 도달하면 상기 예측부에서 예측된 상기 수구의 진행 좌표값을 이용하여 상기 제3무인촬영부들의 촬영방향을 결정하지만, 상기 예측부가 예측한 상기 수구의 진행 좌표값이 실제 스포츠 중계에 적합한 수준에 도달하지 못하면 상기 측정부 및 제2무인촬영부에서 측정된 좌표값들이 더욱 누적되도록, 상기 측정부가 상기 제1무인촬영부들이 촬영한 상기 선수의 특정동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 누적하여 측정하는 동시에 상기 제2무인촬영부가 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역에 상기 수구가 도달시 상기 수구의 좌표값들을 누적하여 측정하고, 누적된 각각의 좌표값들을 상기 저장부에 저장한다. 이후, 상기 촬영방향이 결정된 제3무인촬영부들이 상기 스포츠 경기 영상을 촬영하여 촬영된 상기 경기 영상을 상기 영상편집부로 전송하고, 상기 무인영상편집부는 상기 제3무인촬영부들에서 촬영된 상기 스포츠 경기 영상들을 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하며, 상기 무인영상편집부에서 제작된 스포츠 중계방송의 영상을 상기 송출부를 통해 외부로 송출하는 것을 특징으로 한다.
본 발명에 따르면, 여러 대의 중계 카메라 중 가장 적합한 화면을 스스로 선택하도록 각 촬영부들을 자동으로 구동할 수 있어, 대규모의 인력 충원 및 장비의 충원 없이 경제적으로 스포츠 중계 영상을 얻을 수 있는 효과가 있다.
또한, 머신러닝 학습을 통해 급변하는 경기 상황에 바로 대응할 수 있고, 각 포지션별 스포츠 중계에 최적화된 영상을 얻을 수 있는 효과가 있다.
도 1은 본 발명의 저비용 무인 스포츠 중계 시스템을 개념적으로 도시한 블록도이다.
도 2는 본 발명의 저비용 무인 스포츠 중계 시스템의 제3무인촬영부가 촬영방향을 결정하는 순서를 도시한 순서도이다.
도 3은 본 발명의 일 실시예에 의한 야구 경기장 내부에 설치된 각 촬영부들을 개념적으로 도시한 도면이다.
도 4는 본 발명의 일 실시예에 의한 야구 경기 중 투수가 투구동작을 할 때 촬영된 구분동작을 토대로 좌표값을 측정하는 방법을 개념적으로 도시한 도면이다.
도 5는 본 발명의 일 실시예에 의한 야구 경기 중 투수가 던진 야구공이 도달한 곳의 좌표값을 측정하는 방법을 개념적으로 도시한 도면이다.
이하, 첨부한 도면을 참조하여 본 발명의 실시예에 따른 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법에 대해 상세히 설명한다. 본 발명은 다양한 변경을 가할 수 있고 여러 가지 형태를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 본문에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 개시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. 첨부된 도면에 대하여, 구조물들의 치수는 본 발명의 명확성을 기하기 위하여 실제보다 확대하여 도시한 것이다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미가 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미가 있다는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
도 1은 본 발명의 저비용 무인 스포츠 중계 시스템을 개념적으로 도시한 도면이다.
도 1을 살펴보면, 본 발명의 저비용 무인 스포츠 중계 시스템(10)은 제1무인촬영부(100), 측정부(150), 제2무인촬영부(200), 저장부(300), 예측부(400), 제3무인촬영부(500), 무인영상편집부(600) 및 송출부(700)를 포함한다.
상기 제1무인촬영부(100)는 스포츠 경기에서 선수의 특정동작을 구분동작으로 연속되게 촬영하고 적어도 둘 이상 구비된다.
상기 측정부(150)는 상기 제1무인촬영부(100)들에서 촬영된 각각의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값(P)들을 측정한다.
상기 제2무인촬영부(200)는 상기 선수가 사용한 수구(H)를 추적하여 경기장(G)에 기 세팅된 다수의 지역에 상기 수구(H)가 도달시 상기 수구(H)의 좌표값들을 측정하고 적어도 둘 이상 구비된다.
상기 저장부(300)는 상기 측정부(150) 및 제2무인촬영부(200)들에서 측정된 좌표값들을 누적하여 저장한다.
상기 예측부(400)는 상기 저장부(300)에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값(P)들과 상기 저장부(300)에 누적하여 저장된 상기 수구(H)의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 특정동작을 하면 상기 저장부(300)에 누적하여 저장된 상기 수구(H)의 좌표값들과 비교하여 상기 수구(H)가 진행할 좌표값을 예측한다.
상기 제3무인촬영부(500)는 상기 예측부(400)에서 예측된 상기 수구(H)가 진행될 좌표값에 따라 각각의 촬영 방향을 결정하고, 결정된 촬영방향으로 상기 스포츠 경기 영상을 촬영하고 스포츠 경기장(G)에 적어도 둘 이상 구비된다.
상기 무인영상편집부(600)는 상기 제3무인촬영부(500)들에서 촬영된 경기 영상들을 수집하여 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작한다.
상기 송출부(700)는 상기 무인영상편집부(600)에서 제작된 스포츠 중계방송의 영상을 외부로 송출한다.
도 2는 본 발명의 저비용 무인 스포츠 중계 시스템에서 스포츠 경기의 중계방송을 무인으로 제작하는 과정을 도시한 순서도이다.
도 2를 살펴보면, 선수가 특정동작을 시작할 때부터 끝날 때까지 상기 제1무인촬영부(100)들이 상기 선수의 특정동작을 구분동작으로 연속되게 촬영한다.
이후, 상기 측정부(150)가 상기 제1무인촬영부(100)들이 촬영한 상기 선수의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값(P)들을 측정한다.
이후, 상기 제2무인촬영부(200)가 상기 선수가 사용한 수구(H)를 추적하여 경기장(G)에 기 세팅된 다수의 지역 중 한 지점에 상기 수구(H)가 도달시 상기 수구(H)의 좌표값을 측정한다.
이때, 상기 저장부(300)는 상기 측정부(150) 및 제2무인촬영부(200)에서 측정된 좌표값들을 누적하여 저장한다.
이후, 상기 예측부(400)가 상기 저장부(300)에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값(P)들과 상기 저장부(300)에 누적하여 저장된 상기 수구(H)의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 특정동작을 하면, 상기 저장부(300)에 누적하여 저장된 상기 수구(H)의 좌표값들과 대응되게 상기 수구(H)가 진행할 좌표값을 예측한다.
이후, 상기 예측부(400)에서 예측된 상기 수구(H)의 진행 좌표값이 실제 스포츠 경기 중의 상기 수구(H)의 진행 좌표값과 일치하는지 검증하고, 실제 스포츠 경기 중의 상기 수구(H)의 진행 좌표값과 상기 예측부(400)에서 예측된 상기 수구(H)의 진행 좌표값을 비교하여, 실제 스포츠 중계에 적합한 수준의 예측 정확도를 보이는지 검토한다.
이때, 상기 검토 단계에서 상기 예측부(400)가 예측한 상기 수구(H)의 진행 좌표값이 실제 스포츠 중계에 적합한 수준에 도달하면 상기 예측부(400)에서 예측된 상기 수구(H)의 진행 좌표값을 이용하여 상기 제3무인촬영부(500)들의 촬영방향을 결정하지만, 상기 예측부(400)가 예측한 상기 수구(H)의 진행 좌표값이 실제 스포츠 중계에 적합한 수준에 도달하지 못하면 상기 측정부(150) 및 추적부(200)에서 측정된 좌표값들이 더욱 누적되도록, 상기 측정부(150)가 상기 제1무인촬영부(100)들이 촬영한 상기 선수의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값(P)들을 누적하여 측정하는 동시에 상기 제2무인촬영부(200)가 상기 선수가 던진 수구(H)를 추적하여 경기장(G)에 기 세팅된 다수의 지역에 상기 수구(H)가 도달시 상기 수구(H)의 좌표값들을 누적하여 측정하고, 누적된 각각의 좌표값들을 상기 저장부(300)에 저장하는 단계를 반복적으로 실행한다.
이후, 실제 스포츠 중계에 적합한 수준에 도달한 상기 예측부(400)의 예측값을 토대로, 상기 촬영방향이 결정된 제3무인촬영부(500)들이 상기 스포츠 경기 영상을 촬영하여 촬영된 상기 경기 영상을 상기 무인영상편집부(600)로 전송한다.
이후, 상기 무인영상편집부(600)는 상기 제3무인촬영부(500)들에서 촬영된 상기 스포츠 경기 영상들을 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하며, 상기 무인영상편집부(600)에서 제작된 스포츠 중계방송의 영상은 상기 송출부(700)를 통해 외부로 송출된다.
상술된 바와 같이 구성된 본 발명의 일실시예에 따른 저비용 무인 스포츠 중계 제작 방법(10)에서 야구 경기의 중계방송을 제작하는 과정을 상세히 설명하면 다음과 같다.
앞서 도시된 도면에서와 동일한 기능을 하는 요소는 동일 참조부호로 표기한다.
도 3 내지 도 5는 본 발명의 저비용 무인 야구 중계 시스템을 개념적으로 도시한 도면이다.
도 3 내지 도 5를 살펴보면, 투수가 투구동작을 시작할 때부터 끝날 때까지 상기 제1무인촬영부(100)들이 상기 투수의 투구동작을 구분동작으로 연속되게 촬영한다.
이후, 상기 측정부(150)가 상기 제1무인촬영부(100)들이 촬영한 상기 투수의 구분동작 중 상기 투수의 팔, 다리 및 관절에 대한 좌표값(P)들을 측정한다.
이후, 상기 제2무인촬영부(200)가 상기 투수가 던진 야구공(B)을 추적하여 경기장(G)에 기 세팅된 다수의 지역 중 한 지점에 상기 야구공(B)이 도달시 상기 야구공(B)의 좌표값을 측정한다.
이때, 상기 저장부(300)는 상기 측정부(150) 및 제2무인촬영부(200)에서 측정된 좌표값들을 누적하여 저장한다.
이후, 상기 예측부(400)가 상기 저장부(300)에 누적하여 저장된 상기 투수의 팔, 다리 및 관절에 대한 좌표값(P)들과 상기 저장부(300)에 누적하여 저장된 상기 야구공(B)의 좌표값들을 비교하여, 상기 투수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 투구동작을 하면, 상기 저장부(300)에 누적하여 저장된 상기 야구공(B)의 좌표값들과 대응되게 상기 야구공(B)이 진행할 좌표값을 예측한다.
이후, 상기 예측부(400)에서 예측된 상기 야구공(B)의 진행 좌표값이 실제 야구 경기 중의 상기 야구공(B)의 진행 좌표값과 일치하는지 검증하고, 실제 야구 경기 중의 상기 야구공(B)의 진행 좌표값과 상기 예측부(400)에서 예측된 상기 야구공(B)의 진행 좌표값을 비교하여, 실제 야구 중계에 적합한 수준의 예측 정확도를 보이는지 검토한다.
이때, 상기 검토 단계에서 상기 예측부(400)가 예측한 상기 야구공(B)의 진행 좌표값이 실제 야구 중계에 적합한 수준에 도달하면 상기 예측부(400)에서 예측된 상기 야구공(B)의 진행 좌표값을 이용하여 상기 제3무인촬영부(500)들의 촬영방향을 결정하지만, 상기 예측부(400)가 예측한 상기 야구공(B)의 진행 좌표값이 실제 야구 중계에 적합한 수준에 도달하지 못하면 상기 측정부(150) 및 제2무인촬영부(200)에서 측정된 좌표값들이 더욱 누적되도록, 상기 측정부(150)가 상기 제1무인촬영부(100)들이 촬영한 상기 투수의 구분동작 중 상기 투수의 팔, 다리 및 관절에 대한 좌표값(P)들을 누적하여 측정하는 동시에 상기 제2무인촬영부(200)가 상기 투수가 던진 야구공(B)을 추적하여 경기장(G)에 기 세팅된 다수의 지역에 상기 야구공(B)이 도달시 상기 야구공(B)의 좌표값들을 누적하여 측정하고, 누적된 각각의 좌표값들을 상기 저장부(300)에 저장하는 단계를 반복적으로 실행한다.
이후, 실제 야구 중계에 적합한 수준에 도달한 상기 예측부(400)의 예측값을 토대로, 상기 촬영방향이 결정된 제3무인촬영부(500)들이 상기 야구 경기 영상을 촬영하여 촬영된 상기 경기 영상을 상기 무인영상편집부(600)로 전송한다.
이후, 상기 무인영상편집부(600)는 상기 제3무인촬영부(500)들에서 촬영된 상기 야구 경기 영상들을 야구 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 야구 중계방송의 영상을 제작하며, 상기 무인영상편집부(600)에서 제작된 야구 중계방송의 영상은 상기 송출부(700)를 통해 외부로 송출된다.
상기의 예를 든 야구 경기는 설명의 편의를 위한 것으로, 본 발명의 머신러닝 기술을 이용한 저비용 무인 스포츠 중계 시스템은 야구뿐만 아니라 다른 스포츠 분야에서 다양하게 활용될 수 있다.
본 발명에 따르면, 여러 대의 중계 카메라 중 가장 적합한 화면을 스스로 선택하도록 각 촬영부들을 자동으로 구동할 수 있어, 대규모의 인력 충원 및 장비의 충원 없이 경제적으로 스포츠 중계 영상을 얻을 수 있는 효과가 있다.
또한, 머신러닝 학습을 통해 급변하는 경기 상황에 바로 대응할 수 있고, 각 포지션별 스포츠 중계에 최적화된 영상을 얻을 수 있는 효과가 있다.
제시된 실시예들에 대한 설명은 임의의 본 발명의 기술분야에서 통상의 지식을 가진 자가 본 발명을 이용하거나 또는 실시할 수 있도록 제공된다. 이러한 실시예들에 대한 다양한 변형들은 본 발명의 기술 분야에서 통상의 지식을 가진자에게 명백할 것이며, 여기에 정의된 일반적인 원리들은 본 발명의 범위를 벗어남이 없이 다른 실시예들에 적용될 수 있다. 그리하여, 본 발명은 여기에 제시된 실시예들로 한정되는 것이 아니라, 여기에 제시된 원리들 및 신규한 특징들과 일관되는 최광의의 범위에서 해석되어야 할 것이다.
10 : 저비용 무인 스포츠 중계 시스템
100 : 제1무인촬영부 150 : 측정부
200 : 제2무인촬영부 300 : 저장부
400 : 예측부 500: 제3무인촬영부
600 : 무인영상편집부 700 : 송출부
B : 야구공 G : 경기장 H : 수구(手具)
P : 선수의 팔, 다리 및 관절의 좌표값

Claims (2)

  1. 스포츠 경기에서 선수의 특정동작을 구분동작으로 연속되게 촬영하도록 적어도 둘 이상 구비된 제1무인촬영부;
    상기 제1무인촬영부들에서 촬영된 각각의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 측정하는 측정부;
    상기 선수가 사용한 수구(手具)를 추적하여 경기장에 기 세팅된 다수의 지역에 상기 수구가 도달시 상기 수구의 좌표값들을 측정하는 적어도 둘 이상 구비된 제2무인촬영부;
    상기 측정부 및 제2무인촬영부들에서 측정된 좌표값들을 누적하여 저장하는 저장부;
    상기 저장부에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값들과 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 동작을 하면 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들과 대응되게 상기 수구가 진행할 좌표값을 예측하는 예측부;
    상기 예측부에서 예측된 상기 수구가 진행될 좌표값에 따라 각각의 촬영 방향을 결정하고, 결정된 촬영방향으로 상기 스포츠 경기 영상을 촬영하도록 스포츠 경기장에 적어도 둘 이상 구비된 제3무인촬영부;
    상기 제3무인촬영부들에서 촬영된 스포츠 경기 영상들을 수집하여 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하는 무인영상편집부; 및
    상기 무인영상편집부에서 제작된 스포츠 중계방송의 영상을 외부로 송출하는 송출부;를 포함하는 것을 특징으로 하는
    저비용 무인 스포츠 중계 시스템.
  2. 스포츠 경기에서 선수의 특정동작을 구분동작으로 연속되게 촬영하도록 적어도 둘 이상 구비된 제1무인촬영부와, 상기 제1무인촬영부들에서 촬영된 각각의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 측정하는 측정부와, 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역에 상기 수구가 도달시 상기 수구의 좌표값들을 측정하는 적어도 둘 이상 구비된 제2무인촬영부와, 상기 측정부 및 제2무인촬영부들에서 측정된 좌표값들을 누적하여 저장하는 저장부와 상기 저장부에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값들과 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 동작을 하면 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들과 대응되게 상기 수구가 진행할 좌표값을 예측하는 예측부와 상기 예측부에서 예측된 상기 수구가 진행될 좌표값에 따라 각각의 촬영 방향을 결정하고, 결정된 촬영방향으로 상기 스포츠 경기 영상을 촬영하도록 스포츠 경기장에 적어도 둘 이상 구비된 제3무인촬영부와, 상기 제3무인촬영부들에서 촬영된 스포츠 경기 영상들을 수집하여 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하는 무인영상편집부 및 상기 무인영상편집부에서 제작된 스포츠 중계방송의 영상을 외부로 송출하는 송출부를 포함하는 것을 특징으로 하는 머신러닝 기술을 이용한 저비용 무인 스포츠 중계 시스템에서 스포츠 경기의 중계방송을 무인으로 제작하는 과정은,
    상기 선수가 특정동작을 시작할 때부터 끝날 때까지 상기 제1무인촬영부들이 상기 선수의 특정동작을 구분동작으로 연속되게 촬영하는 단계;
    상기 측정부가 상기 제1무인촬영부들이 촬영한 상기 선수의 구분동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 측정하는 단계;
    상기 제2무인촬영부가 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역 중 한 지점에 상기 수구가 도달시 상기 수구의 좌표값을 측정하는 단계;
    상기 저장부가 상기 측정부 및 제2무인촬영부에서 측정된 좌표값들을 누적하여 저장하는 단계;
    상기 예측부가 상기 저장부에 누적하여 저장된 상기 선수의 팔, 다리 및 관절에 대한 좌표값들과 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들을 비교하여, 상기 선수의 팔, 다리 및 관절이 특정한 좌표값들을 갖는 지점을 통과하는 특정동작을 하면, 상기 저장부에 누적하여 저장된 상기 수구의 좌표값들과 대응되게 상기 수구가 진행할 좌표값을 예측하는 단계;
    상기 예측부에서 예측된 상기 수구의 진행 좌표값이 실제 스포츠 경기 중의 상기 수구의 진행 좌표값과 일치하는지 검증하는 단계;
    상기 실제 스포츠 경기 중 상기 수구의 진행 좌표값과 상기 예측부에서 예측된 상기 수구의 진행 좌표값을 비교하여, 실제 스포츠 중계에 적합한 수준의 예측 정확도를 보이는지 검토하는 단계;
    상기 검토 단계에서 상기 예측부가 예측한 상기 수구의 진행 좌표값이 실제 스포츠 중계에 적합한 수준에 도달하면 상기 예측부에서 예측된 상기 수구의 진행 좌표값을 이용하여 상기 제3무인촬영부들의 촬영방향을 결정하고,
    상기 예측부가 예측한 상기 수구의 진행 좌표값이 실제 스포츠 중계에 적합한 수준에 도달하지 못하면 상기 측정부 및 제2무인촬영부에서 측정된 좌표값들이 더욱 누적되도록, 상기 측정부가 상기 제1무인촬영부들이 촬영한 상기 선수의 특정동작 중 상기 선수의 팔, 다리 및 관절에 대한 좌표값들을 누적하여 측정하는 동시에 상기 제2무인촬영부가 상기 선수가 사용한 수구를 추적하여 경기장에 기 세팅된 다수의 지역에 상기 수구가 도달시 상기 수구의 좌표값들을 누적하여 측정하고, 누적된 각각의 좌표값들을 상기 저장부에 저장하는 단계;
    상기 촬영방향이 결정된 제3무인촬영부들이 상기 스포츠 경기 영상을 촬영하여 촬영된 상기 경기 영상을 상기 무인영상편집부로 전송하는 단계;
    상기 무인영상편집부는 상기 제3무인촬영부들에서 촬영된 상기 스포츠 경기 영상들을 스포츠 중계방송에 맞도록 상기 경기 영상들을 편집하고, 필요에 따라 편집된 상기 경기 영상에 자막, 컴퓨터 그래픽, 자료 영상 및 광고를 삽입하여 스포츠 중계방송의 영상을 제작하는 단계; 및
    상기 무인영상편집부에서 제작된 스포츠 중계방송의 영상을 상기 송출부를 통해 외부로 송출하는 단계;를 포함하는 것을 특징으로 하는
    저비용 무인 스포츠 중계 제작 방법.
KR1020190124351A 2019-10-08 2019-10-08 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법 KR102184383B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190124351A KR102184383B1 (ko) 2019-10-08 2019-10-08 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190124351A KR102184383B1 (ko) 2019-10-08 2019-10-08 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법

Publications (1)

Publication Number Publication Date
KR102184383B1 true KR102184383B1 (ko) 2020-11-30

Family

ID=73641916

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190124351A KR102184383B1 (ko) 2019-10-08 2019-10-08 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법

Country Status (1)

Country Link
KR (1) KR102184383B1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101105120B1 (ko) * 2011-05-09 2012-01-16 백건수 실시간 스포츠 게임 시스템 및 스포츠 게임 방법
KR101215058B1 (ko) 2012-06-21 2012-12-24 (주)엠비씨플러스미디어 중계방송을 위한 야구 피칭 영상 제공 시스템
KR20130070035A (ko) 2011-12-19 2013-06-27 주식회사 엔씨소프트 방송 객체의 ３ｄ 모델링 데이터를 이용한 방송 시청 시점 다각화 시스템 및 그 방법
KR101291765B1 (ko) * 2013-05-15 2013-08-01 (주)엠비씨플러스미디어 실시간 중계방송을 위한 공 궤적 제공 시스템
KR101684833B1 (ko) * 2016-07-29 2016-12-08 주식회사 에이치아이티 야구경기 영상제공방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101105120B1 (ko) * 2011-05-09 2012-01-16 백건수 실시간 스포츠 게임 시스템 및 스포츠 게임 방법
KR20130070035A (ko) 2011-12-19 2013-06-27 주식회사 엔씨소프트 방송 객체의 ３ｄ 모델링 데이터를 이용한 방송 시청 시점 다각화 시스템 및 그 방법
KR101215058B1 (ko) 2012-06-21 2012-12-24 (주)엠비씨플러스미디어 중계방송을 위한 야구 피칭 영상 제공 시스템
KR101291765B1 (ko) * 2013-05-15 2013-08-01 (주)엠비씨플러스미디어 실시간 중계방송을 위한 공 궤적 제공 시스템
KR101684833B1 (ko) * 2016-07-29 2016-12-08 주식회사 에이치아이티 야구경기 영상제공방법

Similar Documents

Publication Publication Date Title
JP6719465B2 (ja) 放送において風の特性及び影響を表示するためのシステム及び方法
JP6580045B2 (ja) 映像制作物を作るための方法及びシステム
US8599317B2 (en) Scene recognition methods for virtual insertions
CN107871120A (zh) 基于机器学习的体育赛事理解系统及方法
EP1864505B1 (en) Real-time objects tracking and motion capture in sports events
CN106165393A (zh) 用于自动电视制作的方法和系统
US7868914B2 (en) Video event statistic tracking system
US20090324191A1 (en) Coordination and combination of video sequences with spatial and temporal normalization
US20150264258A1 (en) Autonomous camera system for capturing sporting events
US20070296815A1 (en) Image-Based Movement Tracking
EP1366466B1 (en) Sport analysis system and method
US9087380B2 (en) Method and system for creating event data and making same available to be served
JP2009505553A (ja) ビデオストリームへの視覚効果の挿入を管理するためのシステムおよび方法
Thomas Sports TV applications of computer vision
KR102184379B1 (ko) 머신러닝 기술을 이용한 스포츠 중계 스트리밍 시스템 및 이를 이용한 스포츠 중계 스트리밍 자동 제작 방법
KR102184383B1 (ko) 저비용 무인 스포츠 중계 시스템 및 이를 이용한 무인 스포츠 중계 제작 방법
KR101215058B1 (ko) 중계방송을 위한 야구 피칭 영상 제공 시스템
KR20000064088A (ko) 스포츠 영상 분석 방송 시스템 및 방법
KR101164894B1 (ko) 경기 참여자 관점의 야구공 영상생성 장치, 시스템, 및 그 방법의 기록매체
JP4293736B2 (ja) 自動人物特定装置
EP3836012B1 (en) A device, computer program and method for determining handball performed by a player
JP2009519539A (ja) イベントデータを作成し、これをサービス提供可能な状態にするための方法及びシステム
CN111310553B (zh) 用于从终点摄影类型的时间图像显示比赛终点的即时图像的方法和系统
KR102149005B1 (ko) 객체 속도 계산 및 표시 방법 및 장치
Naruo et al. Development of Technology for Generating Panorama and Visualization Using Two-viewpoint Images

Legal Events

Date Code Title Description
GRNT Written decision to grant