KR102657049B1 - 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템 - Google Patents

인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템 Download PDF

Info

Publication number
KR102657049B1
KR102657049B1 KR1020230112400A KR20230112400A KR102657049B1 KR 102657049 B1 KR102657049 B1 KR 102657049B1 KR 1020230112400 A KR1020230112400 A KR 1020230112400A KR 20230112400 A KR20230112400 A KR 20230112400A KR 102657049 B1 KR102657049 B1 KR 102657049B1
Authority
KR
South Korea
Prior art keywords
video
block
artificial intelligence
real
highlight
Prior art date
Application number
KR1020230112400A
Other languages
English (en)
Inventor
김형중
Original Assignee
주식회사 비욘더게임
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 비욘더게임 filed Critical 주식회사 비욘더게임
Priority to KR1020230112400A priority Critical patent/KR102657049B1/ko
Application granted granted Critical
Publication of KR102657049B1 publication Critical patent/KR102657049B1/ko

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8549Creating video summaries, e.g. movie trailer
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B08CLEANING
    • B08BCLEANING IN GENERAL; PREVENTION OF FOULING IN GENERAL
    • B08B5/00Cleaning by methods involving the use of air flow or gas flow
    • B08B5/02Cleaning by the force of jets, e.g. blowing-out cavities
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U20/00Constructional aspects of UAVs
    • B64U20/80Arrangement of on-board electronics, e.g. avionics systems or wiring
    • B64U20/87Mounting of imaging devices, e.g. mounting of gimbals
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/006Apparatus mounted on flying objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4758End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for providing answers, e.g. voting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Mechanical Engineering (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 인공지능을 활용하여 실시간으로 스포츠 하이라이트 영상을 편집하고 생성할 수 있도록 고안된 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템에 관한 것으로, 스포츠 경기의 영상을 촬영하는 영상 촬영 장치; 및 상기 영상 촬영 장치로부터 수신되는 실시간 스포츠 경기 영상을 편집하여 하이라이트 영상을 생성하는 영상 편집 장치;를 포함한다.

Description

인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템{Real-time sports highlight video editing and creation system based on artificial intelligence}
본 발명은 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템에 관한 것으로서, 보다 상세하게는 인공지능을 활용하여 실시간으로 스포츠 하이라이트 영상을 편집하고 생성할 수 있도록 고안된 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템에 관한 것이다.
인공지능(Artificial Intelligence, AI) 시스템은 인간 수준의 지능을 구현하는 컴퓨터 시스템이며, 기존 Rule 기반 스마트 시스템과 달리 기계가 스스로 학습하고 판단하며 똑똑해지는 시스템이다. 인공지능 시스템은 사용 할수록 인식률이 향상되고 사용자 취향을 보다 정확하게 이해할 수 있게 되어, 기존 규칙(Rule) 기반 스마트 시스템은 점차 딥러닝 기반 인공지능 시스템으로 대체되고 있다.
인공지능 기술은 기계학습(딥러닝) 및 기계학습을 활용한 요소 기술들로 구성된다.
기계학습은 입력 데이터들의 특징을 스스로 분류/학습하는 알고리즘 기술이며, 요소기술은 딥러닝 등의 기계학습 알고리즘을 활용하여 인간 두뇌의 인지, 판단 등의 기능을 모사하는 기술로서, 언어적 이해, 시각적 이해, 추론/예측, 지식 표현, 동작 제어 등의 기술 분야로 구성된다.
인공지능 기술이 응용되는 다양한 분야는 다음과 같다. 언어적 이해는 인간의 언어/문자를 인식하고 응용/처리 하는 기술로서, 자연어 처리, 기계 번역, 대화시스템, 질의 응답, 음성 인식/합성 등을 포함한다. 시각적 이해는 사물을 인간의 시각처럼 인식하여 처리하는 기술로서, 객체 인식, 객체 추적, 영상 검색, 사람 인식, 장면이해, 공간 이해, 영상 개선 등을 포함한다. 추론 예측은 정보를 판단하여 논리적으로 추론하고 예측하는 기술로서, 지식/확률 기반 추론, 최적화 예측, 선호 기반 계획, 추천 등을 포함한다. 지식 표현은 인간의 경험정보를 지식데이터로 자동화 처리하는 기술로서, 지식 구축(데이터 생성/분류), 지식 관리(데이터 활용) 등을 포함한다. 동작 제어는 차량의 자율 주행, 로봇의 움직임을 제어하는 기술로서, 움직임 제어(항법, 충돌, 주행), 조작 제어(행동 제어) 등을 포함한다.
한편, 전술한 배경 기술은 발명자가 본 발명의 도출을 위해 보유하고 있었거나, 본 발명의 도출 과정에서 습득한 기술 정보로서, 반드시 본 발명의 출원 전에 일반 공중에게 공개된 공지기술이라 할 수는 없다.
한국등록특허 제10-2201858호 (2021.01.12. 공고)
본 발명의 일측면은 인공지능 모델 구축, 실시간 데이터 처리, 하이라이트 영상 편집, 영상 생성 및 고유, 및 사용자 피드백 기반 개선을 통해 인공지능 모델을 지속적으로 개선하고 사용자 피드백 기반의 개선 절차를 통해 시스템은 관람자들의 선호를 더욱 정확하게 파악하고, 그에 맞게 하이라이트 영상을 더욱 최적화하여 제공할 수 있도록 구현한 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템을 제공한다.
또한, 관람자들과의 긍정적인 상호작용을 촉진하고, 스포츠 하이라이트 영상 편집 시스템의 지속적인 발전과 성장에 기여할 수 있도록 구현한 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템을 제공한다.
또한, 스포츠 관람 경험을 혁신적으로 변화시키고 사용자들에게 즐거움과 편의를 제공하는 기술을 포함하고 있으며, 스포츠 하이라이트 영상 편집 기술과 인공지능 기술의 결합을 통해 스포츠 관람자들의 만족도를 높이고, 스포츠 경기의 매력과 즐거움을 보다 쉽고 편리하게 공유할 수 있도록 구현한 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템을 제공한다.
본 발명의 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따른 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템은, 스포츠 경기의 영상을 촬영하는 영상 촬영 장치; 및 상기 영상 촬영 장치로부터 수신되는 실시간 스포츠 경기 영상을 편집하여 하이라이트 영상을 생성하는 영상 편집 장치;를 포함한다.
일 실시예에서, 상기 영상 편집 장치는, 딥러닝 알고리즘과 머신러닝을 통해 상기 영상 촬영 장치에서 획득한 스포츠 경기 영상 데이터를 학습시키며, 상기 영상 촬영 장치에서 획득한 스포츠 경기 영상에서 특정 이벤트를 감지하고 인식하는 인공지능 모델 구축부; 스포츠 경기가 진행되는 동안 상기 영상 촬영 장치로부터 영상 데이터를 실시간으로 수집하고 처리하며, 상기 인공지능 모델 구축부에서 감지된 각 이벤트에 대한 타임스탬프와 관련 정보를 추출하여 이벤트의 중요성을 평가하는 실시간 데이터 처리부; 상기 인공지능 모델 구축부에 의해 구축된 인공지능 모델을 기반으로 스포츠 경기에서 발생한 중요한 이벤트를 실시간으로 감지하며, 감지된 이벤트를 기준으로 하이라이트 영상을 자동으로 편집하는 하이라이트 영상 편집부; 상기 하이라이트 영상 편집부에서 편집된 하이라이트를 이용하여 하이라이트 영상을 생성하고 다른 플랫폼으로 실시간으로 공유하거나, 스포츠 경기를 시청하고 있는 시청자가 관심을 가질만한 이벤트를 선택하여 맞춤형 하이라이트 영상을 생성하고 시청자에게 공유하는 영상 생성 및 공유부; 및 상기 영상 생성 및 공유부에서 공유된 하이라이트 영상을 시청하고 있는 시청자로부터 피드백과 선호도를 수집하고 분석한 뒤 상기 인공지능 모델 구축부로 제공하는 피드백 기반 개선부;를 포함할 수 있다.
일 실시예에서, 상기 인공지능 모델 구축부는, 상기 피드백 기반 개선부로부터 제공되는 피드백과 선호도 분석 결과를 이용하여 인공지능 모델을 학습시켜 시청자들의 선호도를 보다 정확하게 파악하도록 개선시킬 수 있다.
일 실시예에서, 상기 인공지능 모델은, 관련된 레이블을 효율적으로 생성하여 각 이벤트에 대한 정보를 확보하고, 이를 통해 영상 데이터를 실시간으로 분석하고 이벤트를 인식할 수 있는 기반을 마련할 수 있다.
일 실시예에서, 상기 실시간 데이터 처리부는, 상기 영상 촬영 장치로부터 수신되는 영상 데이터를 컴퓨터 비전 기술을 활용하여 전처리하고 이벤트를 탐지하며, 시간 정보와 함께 추출되는 각 이벤트에 해당 이벤트가 발생한 타임스탬프를 기록할 수 있다.
일 실시예에서, 상기 영상 촬영 장치는, 비행 중 렌즈를 청소하는 렌즈 청소 모듈을 구비하는 영상 촬영용 드론으로 이루어질 수 질 수 있다.
일 실시예에서, 상기 렌즈 청소 모듈은, 상기 영상 촬영용 드론의 카메라 모듈의 일측에 밀착되어 배치되는 회동 블록; 상기 회동 블록의 전단과 상기 카메라 모듈의 각 전단을 서로 연결하는 동시에 상기 회동 블록을 회동 구동시켜 상기 회동 블록의 전단이 상기 카메라 모듈의 전단에 설치되는 렌즈와 밀착되도록 하는 회동 연결부; 상기 회동 블록으로 압축 공기를 공급하는 공기 공급 탱크; 상기 공기 공급 탱크로부터 공급되는 공기를 상기 회동 블록의 전방으로 배출시킬 수 있도록 상기 회동 블록의 전단으로 개구부를 형성하면서 상기 회동 블록의 내측을 따라 전후 길이 방향으로 연장 형성되는 공기 이동 통로; 상기 공기 이동 통로의 전단 개구부를 밀폐시키면서 설치되는 통로 커버; 상기 공기 이동 통로의 전단 내주면으로부터 상기 회동 블록의 전단으로 연통 형성되어 상기 공기 이동 통로를 따라 이동된 공기를 상기 회동 블록의 전방으로 분사시켜 주는 다수 개의 공기 분사 통로; 전단이 평면으로 이루어지는 반구 형태로 형성되며, 상기 통로 커버의 전단에서 동일한 형상으로 함몰 형성되는 블록 안착홈에 회전 가능하도록 안착되는 회전 블록; 상기 회전 블록의 전단을 따라 설치되어 상기 회전 블록이 회전함에 따라 함께 회전하면서 렌즈에 부착되어 있는 이물질을 제거하는 청소 솔; 상기 공기 이동 통로에 수평되도록 배치되되, 전단이 상기 통로 커버를 관통하고 삽입되어 상기 회전 블록의 후단에 설치되며, 회전되어 상기 회전 블록을 회전 구동시켜 주는 블록 샤프트; 상기 블록 샤프트의 후단이 회전 가능하도록 연결 설치되는 베어링; 상기 베어링의 후단과 상기 공기 이동 통로의 후단 사이에 설치되어 상기 베어링을 지지하는 지지 스프링; 및 상기 블록 샤프트를 따라 나선 방향으로 연장 형성되며, 상기 공기 이동 통로를 따라 이동하는 공기에 의해 회전되어 상기 블록 샤프트를 회전 구동시켜 주는 나선 날개;를 포함할 수 있다.
일 실시예에서, 상기 공기 분사 통로는, 공기가 배출되는 배출구가 상기 회전 블록의 전방에 위치하는 회전축을 향하도록 경사지도록 배치될 수 있다.
일 실시예에서, 상기 렌즈 청소 모듈은, 원형의 링 형태로 형성되어 상기 회전 블록의 둘레를 따라 설치되되, 후단을 따라 전후 방향으로의 곡선 형상의 요철이 반복적 형성되는 진동 유도링;을 더 포함할 수 있다.
일 실시예에서, 상기 블록 안착홈은, 상기 진동 유도링이 안착될 수 있도록 상기 진동 유도링의 형상에 대응하는 유도링 안착홈이 내주면을 따라 형성될 수 있다.
일 실시예에서, 상기 회전 블록은, 상기 진동 유도링이 상기 유도링 안착홈에서 회전할 경우 요철 간의 맞물림에 따라 회전하는 동시에 상기 블록 안착홈에서 전후 방향으로 진동될 수 있다.
상술한 본 발명의 일측면에 따르면, 일측면은 인공지능 모델 구축, 실시간 데이터 처리, 하이라이트 영상 편집, 영상 생성 및 고유, 및 사용자 피드백 기반 개선을 통해 인공지능 모델을 지속적으로 개선하고 사용자 피드백 기반의 개선 절차를 통해 시스템은 관람자들의 선호를 더욱 정확하게 파악하고, 그에 맞게 하이라이트 영상을 더욱 최적화하여 제공할 수 있다.
또한, 관람자들과의 긍정적인 상호작용을 촉진하고, 스포츠 하이라이트 영상 편집 시스템의 지속적인 발전과 성장에 기여할 수 있다.
또한, 스포츠 관람 경험을 혁신적으로 변화시키고 사용자들에게 즐거움과 편의를 제공하는 기술을 포함하고 있으며, 스포츠 하이라이트 영상 편집 기술과 인공지능 기술의 결합을 통해 스포츠 관람자들의 만족도를 높이고, 스포츠 경기의 매력과 즐거움을 보다 쉽고 편리하게 공유할 수 있다.
본 발명의 효과는 이상에서 언급한 효과들로 제한되지 않으며, 이하에서 설명할 내용으로부터 통상의 기술자에게 자명한 범위 내에서 다양한 효과들이 포함될 수 있다.
도 1은 본 발명의 일 실시예에 따른 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템의 개략적인 구성이 도시된 도면이다.
도 2는 도 1의 영상 편집 장치를 보여주는 도면이다.
도 3은 본 발명에 따른 영상 촬영용 드론을 보여주는 도면이다.
도 4 및 도 5는 도 3의 렌즈 청소 모듈을 보여주는 도면들이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템의 개략적인 구성이 도시된 도면이다.
도 1을 참조하면, 본 발명의 일 실시예에 따른 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템(10)은, 영상 촬영 장치(100) 및 영상 편집 장치(200)를 포함한다.
영상 촬영 장치(100)는, 스포츠 경기의 영상을 촬영한 뒤 실시간으로 네트워크(N)를 통해 영상 편집 장치(200)로 전송한다.
여기서, 영상 촬영 장치(100)는, 영상을 촬영할 수 있는 카메라 모듈(310)을 구비하고 있는 영상 촬영 장비이면 그 명칭에 구애됨이 없이 모두 적용이 가능할 것이다.
그리고, 네트워크(N)는, 예컨대 무선 통신, 유선 통신, 광 초음파 또는 그 조합을 포함할 수 있다. BAN(Body Area Network), 위성 통신, 셀룰러 통신, 블루투스, NFC(Near Field Communication), IrDA(Infrared Data Association standard), WiFi(Wireless Fidelity), 및 WiMAX(Worldwide Interoperability for Microwave access)는 통신 경로에 포함될 수 있는 무선 통신의 예이며, 이더넷, DSL(Digital Subscriber Line), FTTH(Fiber to the Home), 및 POTS(Plain Old Telephone Service)는 통신망에 포함될 수 있는 유선 통신의 예이다. 또한, 통신망은 다수의 네트워크 토폴로지 및 거리를 횡단할 수 있다. 예컨대, 통신망은 직접 연결, PAN(Personal Area Network), LAN(Local Area Network), MAN(Metropolitan Area Network), WAN(Wide Area Network), 또는 그 임의의 조합을 포함할 수 있다. 또한, LoRaWAN, NB-Fi, RPMA을 포함하는 저전력광대역 네트워크(Low Power Wide Area Network)를 통해 이루어 질 수도 있다. 다만, 네트워크(N)는, 통신망에 관한 설명은 상기한 통신망으로 한정되는 것이 아니며, 임의의 최신 데이터 통신망이 적용될 수 있다.
일 실시예에서, 영상 촬영 장치(100)는, 비행 중 렌즈를 청소하는 렌즈 청소 모듈(400)을 구비하는 영상 촬영용 드론(300)으로 이루어질 수 있다.
영상 편집 장치(200)는, 영상 촬영 장치(100)로부터 네트워크(N)를 통해 수신되는 실시간 스포츠 경기 영상을 편집하여 하이라이트 영상을 생성한다.
도 2는 도 1의 영상 편집 장치를 보여주는 도면이다.
도 2를 참조하면, 영상 편집 장치(200)는, 인공지능 모델 구축부(210), 실시간 데이터 처리부(220), 하이라이트 영상 편집부(230), 영상 생성 및 공유부(240) 및 피드백 기반 개선부(250)를 포함한다.
인공지능 모델 구축부(210)는, 딥러닝 알고리즘과 머신러닝을 통해 영상 촬영 장치(100)에서 획득한 스포츠 경기 영상 데이터를 학습시키며, 영상 촬영 장치(100)에서 획득한 스포츠 경기 영상에서 특정 이벤트를 감지하고 인식한다.
여기서, 인공지능 모델 구축부(210)는, 딥러닝 알고리즘과 머신러닝 기술을 활용하여 스포츠 경기 영상 데이터를 학습시키는 인공지능 모델을 구축하는 구성으로서, 영상에서 특정 이벤트(골, 득점, 패스 등)를 감지하는 모델과 관련된 레이블을 효율적으로 생성하는 모델을 개발할 수 있다.
즉, "인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템"의 핵심적인 기술로서, 딥러닝 알고리즘과 머신러닝 기술을 활용하여 스포츠 경기 영상 데이터를 학습시키는 인공지능 모델을 구축하며, 인공지능 모델은 스포츠 경기에서 발생하는 다양한 이벤트를 감지하고, 이를 정확하게 인식할 수 있도록 학습시킨다.
또한, 인공지능 모델은 관련된 레이블을 효율적으로 생성하여 각 이벤트에 대한 정보를 확보하고, 이를 통해 시스템은 영상 데이터를 실시간으로 분석하고 이벤트를 인식할 수 있는 기반을 마련할 수 있다.
일 실시예에서, 인공지능 모델 구축부(210)는, 피드백 기반 개선부(250)로부터 제공되는 피드백과 선호도 분석 결과를 이용하여 인공지능 모델을 학습시켜 시청자들의 선호도를 보다 정확하게 파악하도록 개선시킨다.
일 실시예에서, 인공지능 모델은, 관련된 레이블을 효율적으로 생성하여 각 이벤트에 대한 정보를 확보하고, 이를 통해 영상 데이터를 실시간으로 분석하고 이벤트를 인식할 수 있는 기반을 마련할 수 있다.
실시간 데이터 처리부(220)는, 스포츠 경기가 진행되는 동안 영상 촬영 장치(100)로부터 영상 데이터를 실시간으로 수집하고 처리하며, 인공지능 모델 구축부(210)에서 감지된 각 이벤트에 대한 타임스탬프와 관련 정보를 추출하여 이벤트의 중요성을 평가한다.
여기서, 실시간 데이터 처리부(220)는, 스포츠 경기가 진행되는 동안 영상 데이터를 실시간으로 수집하고 처리하며, 각 이벤트에 대한 타임스탬프와 관련 정보를 추출하여 이벤트의 중요성을 평가할 수 있다.
즉, 시스템은 스포츠 경기가 진행되는 동안 영상 데이터를 실시간으로 수집하고 처리하고, 영상 데이터는 스포츠 경기장에서 설치된 카메라나 기타 비디오 소스로부터 입력되며, 이러한 데이터를 컴퓨터 비전 기술을 활용하여 전처리하고 이벤트를 탐지할 수 있습니다.
각 이벤트는 시간 정보와 함께 추출되어 해당 이벤트가 발생한 타임스탬프를 기록하고, 이러한 실시간 데이터 처리 기능은 스포츠 경기가 진행되는 동안 즉시 반응하여 중요한 순간들을 기록하고 분석하는데 큰 도움을 줄 수 있다.
일 실시예에서, 실시간 데이터 처리부(220)는, 영상 촬영 장치(100)로부터 수신되는 영상 데이터를 컴퓨터 비전 기술을 활용하여 전처리하고 이벤트를 탐지하며, 시간 정보와 함께 추출되는 각 이벤트에 해당 이벤트가 발생한 타임스탬프를 기록할 수 있다.
하이라이트 영상 편집부(230)는, 인공지능 모델 구축부(210)에 의해 구축된 인공지능 모델을 기반으로 스포츠 경기에서 발생한 중요한 이벤트를 실시간으로 감지하며, 감지된 이벤트를 기준으로 하이라이트 영상을 자동으로 편집한다.
여기서, 하이라이트 영상 편집부(230)는, 인공지능 모델을 기반으로 스포츠 경기에서 발생한 중요한 이벤트를 실시간으로 감지하며, 감지된 이벤트를 기준으로 하이라이트 영상을 자동으로 편집할 수 있다.
즉, 인공지능 모델을 기반으로 시스템은 스포츠 경기에서 발생한 중요한 이벤트를 실시간으로 감지하고, 이러한 이벤트들은 스포츠 경기의 흥미로운 부분을 나타내며, 관람자들이 하이라이트로 감상할 만한 재미있는 순간들이다.
이벤트가 감지되면 시스템은 해당 이벤트의 타임스탬프를 기준으로 하이라이트 영상을 자동으로 편집하고, 이 편집된 하이라이트 영상은 다양한 방식으로 제공될 수 있으며, 관람자들이 쉽게 접근하고 즐길 수 있도록 할 수 있다.
영상 생성 및 공유부(240)는, 하이라이트 영상 편집부(230)에서 편집된 하이라이트를 이용하여 하이라이트 영상을 생성하고 다른 플랫폼으로 실시간으로 공유하거나, 스포츠 경기를 시청하고 있는 시청자가 관심을 가질만한 이벤트를 선택하여 맞춤형 하이라이트 영상을 생성하고 시청자에게 공유한다.
여기서, 영상 생성 및 공유부(240)는, 편집된 하이라이트 영상을 빠르게 생성하고 다양한 플랫폼에서 실시간으로 공유하며, 사용자가 관심 있는 이벤트를 선택하여 맞춤형 하이라이트 영상을 생성하고 손쉽게 공유할 수 있다.
즉, 하이라이트 영상이 편집되고 생성되면, 시스템은 이를 빠르게 생성하여 관람자들과 즉시 공유할 수 있도록 할 수 있다.
스포츠 경기가 진행되는 동안 실시간으로 생성되는 하이라이트 영상은 관람자들이 경기 진행 상황을 실시간으로 파악할 수 있으며, 이 영상은 소셜 미디어 플랫폼이나 온라인 스트리밍 서비스를 통해 쉽게 공유될 수 있으며, 다양한 형식과 플랫폼에 적합하도록 제공된다.
이를 통해 관람자들은 스포츠 경기의 핵심 장면들을 누락 없이 감상할 수 있으며, 하이라이트 영상의 인기도와 공유 횟수를 높일 수 있다.
피드백 기반 개선부(250)는, 영상 생성 및 공유부(240)에서 공유된 하이라이트 영상을 시청하고 있는 시청자로부터 피드백과 선호도를 수집하고 분석한 뒤 인공지능 모델 구축부(210)로 제공한다.
여기서, 피드백 기반 개선부(250)는, 사용자들의 피드백과 선호도를 수집하고 분석하여 인공지능 모델을 지속적으로 개선하고, 개선된 모델을 통해 더욱 정확하고 개인화된 하이라이트 영상을 제공할 수 있다.
상술한 바와 같은 구성을 가지는 영상 편집 장치(200)는, 일측면은 인공지능 모델 구축, 실시간 데이터 처리, 하이라이트 영상 편집, 영상 생성 및 고유, 및 사용자 피드백 기반 개선을 통해 인공지능 모델을 지속적으로 개선하고 사용자 피드백 기반의 개선 절차를 통해 시스템은 관람자들의 선호를 더욱 정확하게 파악하고, 그에 맞게 하이라이트 영상을 더욱 최적화하여 제공할 수 있다.
또한, 관람자들과의 긍정적인 상호작용을 촉진하고, 스포츠 하이라이트 영상 편집 시스템의 지속적인 발전과 성장에 기여할 수 있다.
또한, 스포츠 관람 경험을 혁신적으로 변화시키고 사용자들에게 즐거움과 편의를 제공하는 기술을 포함하고 있으며, 스포츠 하이라이트 영상 편집 기술과 인공지능 기술의 결합을 통해 스포츠 관람자들의 만족도를 높이고, 스포츠 경기의 매력과 즐거움을 보다 쉽고 편리하게 공유할 수 있다.
도 4 및 도 5는 도 3의 렌즈 청소 모듈을 보여주는 도면들이다.
도 4 및 도 5를 참조하면, 렌즈 청소 모듈(400)은, 회동 블록(401), 회동 연결부(402), 공기 공급 탱크(403), 공기 이동 통로(404), 통로 커버(405), 다수 개의 공기 분사 통로(406), 회전 블록(407), 청소 솔(414), 블록 샤프트(408), 베어링(409), 지지 스프링(410) 및 나선 날개(411)를 포함한다.
회동 블록(401)은, 영상 촬영용 드론(300)의 카메라 모듈(310)의 일측에 밀착되어 배치되어 회동 연결부(402)에 의해 회동 구동된다.
카메라 모듈(310)의 일측에는, 회동 블록(401)과의 충격을 방지하기 위한 연성 재질의 받침대(415)가 설치될 수 있다.
회동 연결부(402)는, 회동 블록(401)의 전단과 카메라 모듈(310)의 각 전단을 서로 연결하는 동시에 회동 블록(401)을 회동 구동시켜 회동 블록(401)의 전단이 카메라 모듈(310)의 전단에 설치되는 렌즈(311)와 밀착되도록 한다.
공기 공급 탱크(403)는, 회동 블록(401)으로 압축 공기를 공급한다.
공기 이동 통로(404)는, 공기 공급 탱크(403)로부터 공급되는 공기를 회동 블록(401)의 전방으로 배출시킬 수 있도록 회동 블록(401)의 전단으로 개구부를 형성하면서 회동 블록(401)의 내측을 따라 전후 길이 방향으로 연장 형성된다.
통로 커버(405)는, 공기 이동 통로(404)의 전단 개구부를 밀폐시키면서 설치된다.
다수 개의 공기 분사 통로(406)는, 공기 이동 통로(404)의 전단 내주면으로부터 회동 블록(401)의 전단으로 연통 형성되어 공기 이동 통로(404)를 따라 이동된 공기를 회동 블록(401)의 전방으로 분사시켜 준다.
일 실시예에서, 공기 분사 통로(406)는, 공기가 배출되는 배출구가 회전 블록(407)의 전방에 위치하는 회전축을 향하도록 경사지도록 배치될 수 있다.
회전 블록(407)은, 전단이 평면으로 이루어지는 반구 형태로 형성되며, 통로 커버(405)의 전단에서 동일한 형상으로 함몰 형성되는 블록 안착홈(415)에 회전 가능하도록 안착되며, 블록 샤프트(408)에 의해 회전 구동된다.
청소 솔(414)은, 회전 블록(407)의 전단을 따라 설치되어 회전 블록(407)이 회전함에 따라 함께 회전하면서 렌즈(311)에 부착되어 있는 먼지 등의 이물질을 제거한다.
블록 샤프트(408)는, 베어링(409)에 의해 후단이 회전 가능하도록 지지되어 공기 이동 통로(404)에 수평되도록 배치되되, 전단이 통로 커버(405)를 관통하고 삽입되어 회전 블록(407)의 후단에 설치되며, 회전되어 회전 블록(407)을 회전 구동시켜 준다.
베어링(409)은, 지지 스프링(410)에 의해 지지되어 블록 샤프트(408)의 후단이 회전 가능하도록 연결 설치된다.
지지 스프링(410)은, 베어링(409)의 후단과 공기 이동 통로(404)의 후단 사이에 설치되어 베어링(409)을 지지한다.
나선 날개(411)는, 블록 샤프트(408)를 따라 나선 방향으로 연장 형성되며, 공기 이동 통로(404)를 따라 이동하는 공기에 의해 회전되어 블록 샤프트(408)를 회전 구동시켜 준다.
상술한 바와 같은 구성을 가지는 렌즈(311) 청소 모듈(400)은, 진동 유도링(412)을 더 포함할 수 있다.
진동 유도링(412)은, 원형의 링 형태로 형성되어 회전 블록(407)의 둘레를 따라 설치되되, 후단을 따라 전후 방향으로의 곡선 형상의 요철이 반복적 형성된다.
일 실시예에서, 블록 안착홈(412)은, 진동 유도링(412)이 안착될 수 있도록 진동 유도링(412)의 형상에 대응하는 유도링 안착홈(413)이 내주면을 따라 형성될 수 있다.
일 실시예에서, 회전 블록(407)은, 진동 유도링(412)이 유도링 안착홈(413)에서 회전할 경우 요철 간의 맞물림에 따라 회전하는 동시에 블록 안착홈(412)에서 전후 방향으로 진동될 수 있다.
상술한 바와 같은 구성을 가지는 렌즈 청소 모듈(400)은, 압축 공기를 분사하는 동시에 회전 및 전후 진동을 동시에 수행하는 청소 솔(414)을 이용하여 렌즈(311)에 부착되어 있는 먼지 등의 이물질을 효과적으로 제거함으로써, 비행 도중에 작업자가 수작업으로 청소하기 힘든 카메라(310)에 의한 선명한 영상 획득에 도움을 줄 수 있다.
상술된 실시예들은 예시를 위한 것이며, 상술된 실시예들이 속하는 기술분야의 통상의 지식을 가진 자는 상술된 실시예들이 갖는 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 상술된 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 명세서를 통해 보호받고자 하는 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태를 포함하는 것으로 해석되어야 한다.
10, 20: 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템
100: 영상 촬영 장치
200: 영상 편집 장치
300: 영상 촬영용 드론
400: 렌즈 청소 모듈

Claims (3)

  1. 스포츠 경기의 영상을 촬영하는 영상 촬영 장치; 및
    상기 영상 촬영 장치로부터 수신되는 실시간 스포츠 경기 영상을 편집하여 하이라이트 영상을 생성하는 영상 편집 장치;를 포함하며,
    상기 영상 편집 장치는,
    딥러닝 알고리즘과 머신러닝을 통해 상기 영상 촬영 장치에서 획득한 스포츠 경기 영상 데이터를 학습시키며, 상기 영상 촬영 장치에서 획득한 스포츠 경기 영상에서 특정 이벤트를 감지하고 인식하는 인공지능 모델 구축부;
    스포츠 경기가 진행되는 동안 상기 영상 촬영 장치로부터 영상 데이터를 실시간으로 수집하고 처리하며, 상기 인공지능 모델 구축부에서 감지된 각 이벤트에 대한 타임스탬프와 관련 정보를 추출하여 이벤트의 중요성을 평가하는 실시간 데이터 처리부;
    상기 인공지능 모델 구축부에 의해 구축된 인공지능 모델을 기반으로 스포츠 경기에서 발생한 중요한 이벤트를 실시간으로 감지하며, 감지된 이벤트를 기준으로 하이라이트 영상을 자동으로 편집하는 하이라이트 영상 편집부;
    상기 하이라이트 영상 편집부에서 편집된 하이라이트를 이용하여 하이라이트 영상을 생성하고 다른 플랫폼으로 실시간으로 공유하거나, 스포츠 경기를 시청하고 있는 시청자가 관심을 가질만한 이벤트를 선택하여 맞춤형 하이라이트 영상을 생성하고 시청자에게 공유하는 영상 생성 및 공유부; 및
    상기 영상 생성 및 공유부에서 공유된 하이라이트 영상을 시청하고 있는 시청자로부터 피드백과 선호도를 수집하고 분석한 뒤 상기 인공지능 모델 구축부로 제공하는 피드백 기반 개선부;를 포함하며,
    상기 인공지능 모델 구축부는,
    상기 피드백 기반 개선부로부터 제공되는 피드백과 선호도 분석 결과를 이용하여 인공지능 모델을 학습시켜 시청자들의 선호도를 보다 정확하게 파악하도록 개선시키며,
    상기 인공지능 모델은,
    관련된 레이블을 효율적으로 생성하여 각 이벤트에 대한 정보를 확보하고, 이를 통해 영상 데이터를 실시간으로 분석하고 이벤트를 인식할 수 있는 기반을 마련하며,
    상기 실시간 데이터 처리부는,
    상기 영상 촬영 장치로부터 수신되는 영상 데이터를 컴퓨터 비전 기술을 활용하여 전처리하고 이벤트를 탐지하며, 시간 정보와 함께 추출되는 각 이벤트에 해당 이벤트가 발생한 타임스탬프를 기록하며,
    상기 영상 촬영 장치는,
    비행 중 렌즈를 청소하는 렌즈 청소 모듈을 구비하는 영상 촬영용 드론으로 이루어지며,
    상기 렌즈 청소 모듈은,
    상기 영상 촬영용 드론의 카메라 모듈의 일측에 밀착되어 배치되는 회동 블록;
    상기 회동 블록의 전단과 상기 카메라 모듈의 각 전단을 서로 연결하는 동시에 상기 회동 블록을 회동 구동시켜 상기 회동 블록의 전단이 상기 카메라 모듈의 전단에 설치되는 렌즈와 밀착되도록 하는 회동 연결부;
    상기 회동 블록으로 압축 공기를 공급하는 공기 공급 탱크;
    상기 공기 공급 탱크로부터 공급되는 공기를 상기 회동 블록의 전방으로 배출시킬 수 있도록 상기 회동 블록의 전단으로 개구부를 형성하면서 상기 회동 블록의 내측을 따라 전후 길이 방향으로 연장 형성되는 공기 이동 통로;
    상기 공기 이동 통로의 전단 개구부를 밀폐시키면서 설치되는 통로 커버;
    상기 공기 이동 통로의 전단 내주면으로부터 상기 회동 블록의 전단으로 연통 형성되어 상기 공기 이동 통로를 따라 이동된 공기를 상기 회동 블록의 전방으로 분사시켜 주는 다수 개의 공기 분사 통로;
    전단이 평면으로 이루어지는 반구 형태로 형성되며, 상기 통로 커버의 전단에서 동일한 형상으로 함몰 형성되는 블록 안착홈에 회전 가능하도록 안착되는 회전 블록;
    상기 회전 블록의 전단을 따라 설치되어 상기 회전 블록이 회전함에 따라 함께 회전하면서 렌즈에 부착되어 있는 이물질을 제거하는 청소 솔;
    상기 공기 이동 통로에 수평되도록 배치되되, 전단이 상기 통로 커버를 관통하고 삽입되어 상기 회전 블록의 후단에 설치되며, 회전되어 상기 회전 블록을 회전 구동시켜 주는 블록 샤프트;
    상기 블록 샤프트의 후단이 회전 가능하도록 연결 설치되는 베어링;
    상기 베어링의 후단과 상기 공기 이동 통로의 후단 사이에 설치되어 상기 베어링을 지지하는 지지 스프링; 및
    상기 블록 샤프트를 따라 나선 방향으로 연장 형성되며, 상기 공기 이동 통로를 따라 이동하는 공기에 의해 회전되어 상기 블록 샤프트를 회전 구동시켜 주는 나선 날개;를 포함하는, 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템.
  2. 삭제
  3. 삭제
KR1020230112400A 2023-08-26 2023-08-26 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템 KR102657049B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020230112400A KR102657049B1 (ko) 2023-08-26 2023-08-26 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020230112400A KR102657049B1 (ko) 2023-08-26 2023-08-26 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템

Publications (1)

Publication Number Publication Date
KR102657049B1 true KR102657049B1 (ko) 2024-04-12

Family

ID=90679982

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020230112400A KR102657049B1 (ko) 2023-08-26 2023-08-26 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템

Country Status (1)

Country Link
KR (1) KR102657049B1 (ko)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101954059B1 (ko) * 2018-06-25 2019-06-11 (주)비전정보통신 스마트 IoT 회전형 뷸렛 카메라
KR20190106547A (ko) * 2018-03-09 2019-09-18 에스케이브로드밴드주식회사 영상제작지원장치 및 그 동작 방법
KR20200075086A (ko) * 2018-12-10 2020-06-26 서울대학교산학협력단 개인화된 하이라이트 동영상 생성 시스템
KR102201858B1 (ko) 2019-08-26 2021-01-12 엘지전자 주식회사 인공지능 기반 영상 편집 방법 및 지능형 디바이스
KR20210033677A (ko) * 2019-09-19 2021-03-29 한국생산기술연구원 드론용 카메라 오염 방지 장치 및, 그 방법
KR20230091747A (ko) * 2021-12-16 2023-06-23 주식회사 스포비 야구 경기의 스케줄링 정보를 통한 경기 영상 자동 획득 및 메이킹 시스템

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190106547A (ko) * 2018-03-09 2019-09-18 에스케이브로드밴드주식회사 영상제작지원장치 및 그 동작 방법
KR101954059B1 (ko) * 2018-06-25 2019-06-11 (주)비전정보통신 스마트 IoT 회전형 뷸렛 카메라
KR20200075086A (ko) * 2018-12-10 2020-06-26 서울대학교산학협력단 개인화된 하이라이트 동영상 생성 시스템
KR102201858B1 (ko) 2019-08-26 2021-01-12 엘지전자 주식회사 인공지능 기반 영상 편집 방법 및 지능형 디바이스
KR20210033677A (ko) * 2019-09-19 2021-03-29 한국생산기술연구원 드론용 카메라 오염 방지 장치 및, 그 방법
KR20230091747A (ko) * 2021-12-16 2023-06-23 주식회사 스포비 야구 경기의 스케줄링 정보를 통한 경기 영상 자동 획득 및 메이킹 시스템

Similar Documents

Publication Publication Date Title
US11858118B2 (en) Robot, server, and human-machine interaction method
US9456174B2 (en) Neural network for video editing
EP1433310B1 (en) Automatic photography
EP3713217B1 (en) System and camera device for capturing images
US20160127641A1 (en) Autonomous media capturing
CN103258184B (zh) 用于捕获场景的深度数据并且应用计算机动作的方法
WO2019229748A1 (en) Golf game video analytic system
CN109478095A (zh) 用于使虚拟现实环境中的特定内容聚焦的hmd转换
CN106210450A (zh) 基于slam的影视人工智能
US11544906B2 (en) Mobility surrogates
CN107124662A (zh) 视频直播方法、装置、电子设备及计算机可读存储介质
WO2019041992A1 (zh) 一种图像处理方法、装置和终端设备
US7023454B1 (en) Method and apparatus for creating a virtual video of an object
CN110868554B (zh) 直播中实时换脸的方法、装置、设备及存储介质
US11341689B1 (en) Dynamic virtual audience generation
KR102657049B1 (ko) 인공지능에 기반한 실시간 스포츠 하이라이트 영상 편집 및 생성 시스템
Wu et al. Enhancing fan engagement in a 5G stadium with AI-based technologies and live streaming
US20180124374A1 (en) System and Method for Reducing System Requirements for a Virtual Reality 360 Display
JP6560375B2 (ja) シミュレータ用知能型サービスシステムと装置および方法
US7389002B1 (en) Method for increasing resolution in a camera
US20220272305A1 (en) System for Detection and Video Sharing of Sports Highlights
US11745105B2 (en) Interactive animatronic game/device partner and method for using same
Hösl Understanding and designing for control in camera operation
WO2022269595A1 (en) Unmanned autonomous vehicle camerabot
KR102063581B1 (ko) 시뮬레이터용 지능형 서비스 시스템과 장치와 방법 및 기록매체

Legal Events

Date Code Title Description
GRNT Written decision to grant