WO2021101024A1 - Cloud-based video virtual studio service system - Google Patents

Cloud-based video virtual studio service system Download PDF

Info

Publication number
WO2021101024A1
WO2021101024A1 PCT/KR2020/011285 KR2020011285W WO2021101024A1 WO 2021101024 A1 WO2021101024 A1 WO 2021101024A1 KR 2020011285 W KR2020011285 W KR 2020011285W WO 2021101024 A1 WO2021101024 A1 WO 2021101024A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
video
editing
processing unit
online
Prior art date
Application number
PCT/KR2020/011285
Other languages
French (fr)
Korean (ko)
Inventor
성인호
Original Assignee
주식회사 에스제이테크놀로지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to KR10-2019-0151263 priority Critical
Priority to KR20190151263 priority
Application filed by 주식회사 에스제이테크놀로지 filed Critical 주식회사 에스제이테크놀로지
Publication of WO2021101024A1 publication Critical patent/WO2021101024A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring

Abstract

The present invention provides a cloud-based video virtual studio service system comprising: an online editing unit which allows a low quality preview image to be edited online; an image streaming server which a user accesses to retrieve, through a web browser of a user terminal, a low resolution preview image stored in a preview image storage, and play the retrieved image; a web server which a user accesses to perform editing work through a web browser of a user terminal by using a web editor HTML display unit, an image edit processing unit, an audio edit processing unit, a subtitle edit processing unit, and an image effect processing unit of the online editing unit; and an edited image processing unit which performs editing work of an original image stored in an original image storage according to editing information of editing work performed when the web server is accessed, and stores a completed version image in a master image storage.

Description

클라우드 기반 동영상 가상 스튜디오 서비스 시스템Cloud-based video virtual studio service system
본 발명은 라이브 영상 스트림을 관리 및 편집하여 온라인 플랫폼에 유통시키는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템에 관한 것이다.The present invention relates to a cloud-based video virtual studio service system that manages and edits live video streams and distributes them to an online platform.
영상 콘텐츠를 편집 및 제작할 수 있는 다양한 형태의 제작툴이 상용화 및 배포되고 있다. 일반적인 영상 제작툴은, 프로그램이 무거움에 따라 고사양의 컴퓨팅 자원을 요구하거나, 그 사용법이 어려워 전문지식이 없는 일반인들이 직접 영상소스를 편집하여 고품질의 영상 콘텐츠를 제작하는 데는 어려움이 있다.Various types of production tools that can edit and produce video content are commercialized and distributed. A general video production tool requires high-spec computing resources depending on the heaviness of a program, or it is difficult to use, so it is difficult for ordinary people without specialized knowledge to edit video sources and produce high-quality video content.
웹(Web)을 기반으로 하여 영상소스를 편집할 수 있는 다양한 온라인 영상 제작 솔루션이 제안되었으나, 기존의 웹 기반 동영상 제작 솔루션들은 영상의 재생순서 변경 및 영상 내 텍스트 삽입 등의 슬라이드쇼 수준 정도의 결과물 밖에는 제공하지 못하는 한계가 있었다.Various online video production solutions that can edit video sources based on the web have been proposed, but existing web-based video production solutions are similar to slideshow-level results such as changing the playback order of videos and inserting text within videos. There was a limit that could not be provided outside.
기존의 웹 기반 동영상 제작 솔루션 서비스 업체들은 자체 서버 및 프로그램을 운영함에 따라, 대용량의 영상소스를 업로드, 편집 및 저장하는 프로세스를 수행하기 위해, 고성능 프로세서 및 대용량 저장소를 갖는 시스템을 구비해야 하며, 이에 시스템 운영비용이 상승하여 결국 사용자들의 서비스 비용이 상승하게 되는 단점이 있었다.As existing web-based video production solution service companies operate their own servers and programs, in order to perform the process of uploading, editing and storing large-capacity video sources, they must have a system having a high-performance processor and a large-capacity storage. There is a disadvantage in that the cost of operating the system is increased, which in turn increases the service cost of users.
본 발명은 전술한 문제점을 해결하기 위해 안출된 것으로, 본 발명은 사용자가 라이브로 촬영하는 영상을 실시간으로 저장하고 웹 상에서 용이하게 편집 및 제작하고 온라인 플랫폼에 게시할 수 있도록 하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 제공하는 것을 목적으로 한다.The present invention was conceived to solve the above-described problem, and the present invention is a cloud-based video virtual studio that allows users to easily edit and produce images on the web and post them on an online platform by storing live images in real time. It aims to provide a service system.
전술한 목적을 달성하기 위하여, 본 발명은In order to achieve the above object, the present invention
사용자 단말을 이용하여 촬영되는 동영상을 입수하여 원본 영상을 원본영상 스토리지에 저장하는 영상등록부;An image registration unit for acquiring a video captured using a user terminal and storing the original image in the original image storage;
상기 원본 영상을 저해상도 미리보기 영상으로 변환하여 미리보기 영상 스토리지에 저장하는 트랜스코더;A transcoder for converting the original image into a low-resolution preview image and storing it in a preview image storage;
웹편집기 HTML 표시부, 영상 편집 처리부, 오디오 편집 처리부, 자막 편집 처리부, 영상효과 처리부를 포함하여 상기 저화질 미리보기 영상을 온라인에서 편집하도록 하는 온라인 편집부;An online editing unit configured to edit the low-quality preview image online, including a web editor HTML display unit, an image editing processing unit, an audio editing processing unit, a caption editing processing unit, and a video effect processing unit;
사용자가 사용자 단말의 웹브라우저를 통해 상기 미리보기 영상 스토리지에 저장된 저해상도 미리보기 영상을 불러와서 플레이하도록 접속하는 영상 스트리밍 서버;A video streaming server for accessing a user to load and play a low-resolution preview image stored in the preview image storage through a web browser of a user terminal;
사용자가 사용자 단말의 웹브라우저를 토해 상기 온라인 편집부의 웹편집기 HTML 표시부, 영상 편집 처리부, 오디오 편집 처리부, 자막 편집 처리부, 영상효과 처리부를 이용하여 편집 작업을 하도록 접속하는 웹서버; 및A web server through which a user vomits through a web browser of a user terminal and accesses the online editing unit to perform an editing operation using a web editor HTML display unit, an image editing processing unit, an audio editing processing unit, a caption editing processing unit, and a video effect processing unit; And
상기 웹서버에 접속하여 이루어진 상기 편집 작업의 편집 정보에 따라 상기 원본영상스토리지에 저장된 원본 영상에 편집 작업을 수행하여 완성본 영상을 마스터 영상 스토리지에 저장하는 편집 영상 처리부;를 포함하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 제공한다.Cloud-based video virtual studio including; an edited image processing unit for storing the finished image in a master image storage by performing an editing operation on the original image stored in the original image storage according to the editing information of the editing operation performed by accessing the web server. Provide a service system.
상기 영상 등록부는 사용자가 동영상을 촬영하면 스트리밍 입수기가 사용자가 촬영한 스트리밍 데이터를 입수하여 원본 영상을 등록하는 것을 특징으로 한다.The image registration unit is characterized in that when the user shoots a video, the streaming obtainer acquires the streaming data captured by the user and registers the original image.
상기 미리보기 영상 스토리지에 저장된 미리보기 영상에서 장면을 추출하고 썸네일 이미지를 생성하여 컷편집에 활용하도록 영상DB에 저장하는 장면분석부를 추가로 포함하는 것을 특징으로 한다.It characterized in that it further comprises a scene analysis unit for extracting the scene from the preview image stored in the preview image storage, generating a thumbnail image, and storing it in the image DB to be used for cut editing.
상기 편집 영상 처리부는 상기 완성본 영상을 게시될 온라인 플랫폼에 맞는 영상 포맷으로 자동 변환하여 상기 온라인 플랫폼에 등록하는 것을 특징으로 한다.The edited image processing unit may automatically convert the finished image into an image format suitable for an online platform to be posted and register it in the online platform.
상기 온라인 플랫폼에 등록된 상기 영상에 대한 좋아요, 댓글, 정산정보를 상기 온라인 플랫폼의 각 채널로부터 수집하여 사용자에게 제공하는 비정형데이터수집 분석기를 추가로 포함하는 것을 특징으로 한다.It characterized in that it further comprises an atypical data collection analyzer that collects likes, comments, and settlement information for the video registered on the online platform from each channel of the online platform and provides it to a user.
본 발명의 실시예에 따르면, 라이브 촬영 라이브 스트림을 자동으로 등록하여 온라인으로 편집할 수 있고, 온라인 플랫폼에 자동으로 게시할 수 있다. According to an embodiment of the present invention, a live shooting live stream can be automatically registered and edited online, and automatically posted on an online platform.
또한, 본 발명의 실시예에 따르면 게시될 온라인 플랫폼에 맞는 영상 포맷으로 자동 변환하여 완성된 영상을 온라인 플랫폼에 자동으로 게시할 수 있다.In addition, according to an embodiment of the present invention, it is possible to automatically convert a video format suitable for an online platform to be posted to automatically post a completed video on the online platform.
도 1 은 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 개략적으로 설명하는 도면이다.1 is a diagram schematically illustrating a cloud-based video virtual studio service system according to an embodiment of the present invention.
도 2 는 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 프로세스를 나타내는 도면이다.2 is a diagram illustrating a cloud-based video virtual studio service process according to an embodiment of the present invention.
도 3 은 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템의 구성을 나타내는 도면이다.3 is a diagram illustrating a configuration of a cloud-based video virtual studio service system according to an embodiment of the present invention.
도 4 는 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스의 컨텍스트 데이터 흐름을 나타낸 도면이다.4 is a diagram illustrating a flow of context data of a cloud-based video virtual studio service according to an embodiment of the present invention.
도 5 는 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템 구성을 나타낸 도면이다.5 is a diagram showing the configuration of a cloud-based video virtual studio service system according to an embodiment of the present invention.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.The terms used in the present specification will be briefly described, and the present invention will be described in detail.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.Terms used in the present invention have selected general terms that are currently widely used as possible while taking functions of the present invention into consideration, but this may vary according to the intention or precedent of a technician working in the field, the emergence of new technologies, and the like. In addition, in certain cases, there are terms arbitrarily selected by the applicant, and in this case, the meaning of the terms will be described in detail in the description of the corresponding invention. Therefore, the terms used in the present invention should be defined based on the meaning of the term and the overall contents of the present invention, not a simple name of the term.
본 명세서의 전반에 걸쳐 기재된 "부(Unit)", "단말(Terminal)", "서버(Server)" 및 "시스템(System)" 등의 용어는 하나 또는 둘 이상의 기능이 조합된 동작을 처리하는 단위를 의미하며, 이는 하드웨어, 소프트웨어 또는, 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.Terms such as "Unit", "Terminal", "Server" and "System" described throughout this specification are used to process an operation in which one or more functions are combined. It means a unit, which can be implemented in hardware, software, or a combination of hardware and software.
본 명세서에 설명된 다양한 기법은 하드웨어 또는 소프트웨어와 함께 구현될 수 있거나, 적합한 경우에 이들 모두의 조합과 함께 구현될 수 있다. 본 명세서에 사용된 바와 같은 "부", "단말", "서버" 및 "시스템" 등의 용어는 마찬가지로 컴퓨터 관련 엔티티(Entity), 즉 하드웨어, 하드웨어 및 소프트웨어의 조합, 소프트웨어 또는 실행 시의 소프트웨어와 등가로 취급할 수 있다.The various techniques described herein may be implemented with hardware or software, or, where appropriate, with a combination of both. As used herein, terms such as "unit", "terminal", "server" and "system" are likewise a computer-related entity, that is, a combination of hardware, hardware and software, software or software at the time of execution. Can be treated as equivalent.
또한, 본 발명에서 사용자 단말 및 서버에서 실행되는 프로그램은 "부" 단위로 구성될 수 있고, 읽기, 쓰기 및 지우기가 가능한 형태로 하나의 물리적 메모리에 기록되거나, 둘 이상의 메모리 또는 기록매체 사이에 분산되어 기록될 수 있다.In addition, in the present invention, the program executed in the user terminal and the server may be configured in a "unit" unit, and is recorded in one physical memory in a form capable of reading, writing, and erasing, or distributed between two or more memories or recording media. And can be recorded.
이하, 도면을 참조하여 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 설명한다.Hereinafter, a cloud-based video virtual studio service system according to an embodiment of the present invention will be described with reference to the drawings.
도 1 은 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 개략적으로 설명하는 도면이다.1 is a diagram schematically illustrating a cloud-based video virtual studio service system according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10)은 사용자 단말(20) 및 온라인 플랫폼(30)과 온라인으로 연결되어, 사용자가 접속하여 계정에 로그인을 한 상태에서 사용자 단말(20)로 영상을 촬영하면 영상 스트림이 자동으로 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10)에 등록되고, 등록된 영상은 사용자가 사용자 단말(20)을 통해 온라인으로 영상, 오디오, 자막 편집 등을 수행한다. 촬영 영상 원본은 스튜디오 서비스 시스템(10)에 저장되고 사용자는 저해상도 미리보기 영상으로 온라인으로 편집할 수 있다.편집된 영상 최종본은 사용자가 원하는 온라인 플랫폼(30)에 전송하여 자동으로 게시되도록 한다. 온라인 플랫폼(30)에는 유튜브, 네이버TV, 카카오TV, 페이스북 등이 있다.Referring to FIG. 1, the cloud-based video virtual studio service system 10 according to an embodiment of the present invention is connected online with the user terminal 20 and the online platform 30, and the user logs in to the account. When a video is captured with the user terminal 20 in the state, the video stream is automatically registered in the cloud-based video virtual studio service system 10, and the registered video is received by the user online through the user terminal 20. Edit subtitles, etc. The original photographed image is stored in the studio service system 10, and the user can edit it online as a low-resolution preview image. The final edited image is transmitted to the online platform 30 desired by the user to be automatically posted. Online platforms 30 include YouTube, Naver TV, Kakao TV, and Facebook.
도 2 는 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 프로세스를 나타낸 도면이다. 2 is a diagram illustrating a cloud-based video virtual studio service process according to an embodiment of the present invention.
도시되는 바와 같이, 사용자가 사용자 단말(20)을 이용하여 동영상을 촬영하면 라이브 스트림이 인터넷을 통해 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10)에 자동 등록된다. 등록된 촬영 영상은 미리보기 영상으로 변환되어 사용자에게 제공되고 인터넷을 통해 영상 편집 작업을 가능하게 한다. 편집영상 및 완성본 영상은 저장되고, 유튜브, 네이버TV, 카카오TV 등과 같은 온라인 플랫폼(30)에 개시된다. 개시된 영상의 댓글, 조회수, 수익정보는 빅데이터 분석을 통해 사용자 단말(20)에 전달된다.As shown, when a user shoots a video using the user terminal 20, a live stream is automatically registered in the cloud-based video virtual studio service system 10 through the Internet. The registered captured image is converted into a preview image, provided to the user, and enables image editing through the Internet. The edited video and the finished video are stored, and disclosed on an online platform 30 such as YouTube, Naver TV, and Kakao TV. Comments, views, and revenue information of the disclosed video are transmitted to the user terminal 20 through big data analysis.
도 3 은 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 나타낸 도면이다. 3 is a diagram illustrating a cloud-based video virtual studio service system according to an embodiment of the present invention.
사용자 단말(20)은 사용자인 크리에이터가 영상을 촬영 또는 편집하는 단말장치로, 네트워크를 통해 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10) 에 접속할 수 있는 통신 기능이 있는 장치이다. 단말장치에는 PC, 휴대폰, 스마트폰, DVB(Digital Video Broadcasting)를 포함할 수 있다.The user terminal 20 is a terminal device in which a creator, a user, photographs or edits an image, and is a device having a communication function capable of accessing the cloud-based video virtual studio service system 10 through a network. Terminal devices may include PCs, mobile phones, smart phones, and DVB (Digital Video Broadcasting).
도시되는 바와 같이, 클라우드 기반 동영상 가상 스튜디오 시스템(10)은 영상 등록부(110), 원본 영상을 저장하는 원본 영상 스토리지(120), 영상 관련 정보를 저장하는 영상DB(130), 트랜스코더(140), 미리보기 영상 스토리지(150), 장면분석부(160), 온라인 편집부(170), 편집 영상처리부(180), 마스터 영상 스토리지(190), 영상 스트리밍 서버(410), 웹서버(420)를 포함한다.As shown, the cloud-based video virtual studio system 10 includes an image registration unit 110, an original image storage 120 for storing an original image, an image DB 130 for storing image-related information, and a transcoder 140 , Preview image storage 150, scene analysis unit 160, online editing unit 170, editing image processing unit 180, master image storage 190, image streaming server 410, web server 420 do.
영상 등록부(110)는 영상메타등록기(111), 스트리밍 입수기(112), 영상파일 저장기(113)를 포함한다. 크리에이터가 사용자 단말(20)을 이용하여 클라우드 기반 동영상 가상 스튜디오 시스템(10)에 접속한 상태에서 동영상을 촬영하면 스트리밍 입수기(112)가 사용자가 촬영한 스트리밍 데이터를 입수한다. 영상파일 저장기(113)는 HLS(HTTP Live Streaming) 고화질 원본 영상을 H.265 MPEG2 데이터로 원본 영상 스토리지(120)에 즉시 등록한다. HLS는 HTTP 기반의 스트리밍 프로토콜이다. 영상메타 등록기(111)는 촬영 영상에 대한 메타 데이터를 영상 DB(130)에 저장한다. The image registration unit 110 includes a video meta register 111, a streaming obtainer 112, and a video file storage 113. When a creator captures a video while connected to the cloud-based video virtual studio system 10 using the user terminal 20, the streaming obtainer 112 acquires the streaming data captured by the user. The video file storage 113 immediately registers the HLS (HTTP Live Streaming) high-definition original video as H.265 MPEG2 data in the original video storage 120. HLS is an HTTP-based streaming protocol. The image meta register 111 stores metadata about the captured image in the image DB 130.
트랜스코더(130)는 변환프로파일관리기(131) 및 MP4 저화질 변환기(132)를 포함한다. 트랜스코더(130)는 온라인 편집에 사용할 미리보기 영상으로 활용하기 위하여 원본 영상을 저해상도 영상으로 변환한다. 트랜스코더(130)는 H.265 MPEG2 TS 파일인 원본 영상을 MP4/AAC의 미리보기 영상으로 변환한다. 미리보기 영상은 미리보기 영상 스토리지(140)에 저장된다. The transcoder 130 includes a conversion profile manager 131 and an MP4 low-quality converter 132. The transcoder 130 converts the original image into a low-resolution image in order to use it as a preview image to be used for online editing. The transcoder 130 converts the original video, which is an H.265 MPEG2 TS file, into a preview video of MP4/AAC. The preview image is stored in the preview image storage 140.
장면분석부(160)는 장면 자동 추출기(311)와 썸네일 추출기(312)를 포함한다. 장면 자동 추출기(311)는 미리보기 영상 스토리지에 저장된 미리보기 영상에서 장면을 추출하고, 썸네일 추출기는 컷편집에 활용할 주요장면 자동분류 썸네일 이미지를 생성하여 영상 DB(130)에 저장한다.The scene analysis unit 160 includes an automatic scene extractor 311 and a thumbnail extractor 312. The automatic scene extractor 311 extracts a scene from the preview image stored in the preview image storage, and the thumbnail extractor generates a thumbnail image for automatic classification of main scenes to be used for cut editing and stores it in the image DB 130.
온라인 편집부(170)는 웹편집기 HTML 표시부(171), 편집영상 목록 조회기(172), 영상 편집 처리부(173), 오디오 편집 처리부(174), 자막 편집 처리부(175), 영상효과 처리부(176)를 포함하여 사용자가 온라인으로 트랜스코더(130)에서 변환된 저화질 영상을 편집할 수 있도록 한다. The online editing unit 170 includes a web editor HTML display unit 171, an edited video list inquiry unit 172, an image editing processing unit 173, an audio editing processing unit 174, a caption editing processing unit 175, and a video effect processing unit 176. Including, the user can edit the low-quality video converted by the transcoder 130 online.
사용자는 웹브라우저(10')를 통해 영상 스트리밍 서버(420)에 접속하여 미리보기 영상 스토리지(140)에 저장된 저해상도 미리보기 영상 데이터를 불러와 온라인 편집 작업을 수행한다. 즉, 사용자는 웹브라우저(10')를 통해 영상 스트리밍 서버(420)와 웹서버(410)에 접속하여 온라인 편집부(170)의 편집 영상 목록 조회기를 이용하여 영상 DB(130)에 저장된 영상 목록을 조회하여, 편집할 영상을 선택하면 영상 스트리밍 서버(410)를 통해 미리보기 영상 스토리지(150)에 저장된 저해상도 영상을 불러와 웹브라우저(10')의 웹 편집기(11')를 통해 편집 작업판에서 영상, 오디오, 자막, 효과 편집 처리를 한다. 웹서버를 통해 편집 정보가 온라인 편집부(170)로 전달되면 전달된 편집 정보로 편집 영상 처리부(180)가 원본 영상 스토리지에 저장된 원본 영상에 동일한 편집 작업을 자동으로 수행한다.The user accesses the video streaming server 420 through the web browser 10' to load the low-resolution preview image data stored in the preview image storage 140 to perform online editing. That is, the user accesses the video streaming server 420 and the web server 410 through a web browser 10', and uses the edited video list query device of the online editing unit 170 to view the video list stored in the video DB 130. When a video to be searched and edited is selected, a low-resolution video stored in the preview video storage 150 is retrieved through the video streaming server 410, and the edited image is displayed through the web editor 11' of the web browser 10'. Edit video, audio, subtitles, and effects. When the editing information is transmitted to the online editing unit 170 through the web server, the edited image processing unit 180 automatically performs the same editing operation on the original image stored in the original image storage using the transmitted editing information.
편집 영상 처리부(180)는 영상 자막 합성기, 영상 효과 처리기, 영상 오디오 편집 처리기를 포함하여 원본 영상에 사용자가 웹브라우저를 통해 수행한 편집 작업과 동일한 편집 작업이 동일하게 수행되고, 편집 완성본은 마스터 영상 스토리지(190)에 H.264/AAC의 고화질 영상으로 저장된다. 마스터 영상 스토리지(190)에 저장된 편집 완료된 영상은 온라인 플랫폼(30)에 자동으로 전송된다.The editing image processing unit 180 performs the same editing work as the editing work performed by the user through a web browser on the original image, including a video subtitle synthesizer, a video effect processor, and a video audio editing processor, and the edited version is a master image. It is stored in the storage 190 as a high-definition image of H.264/AAC. The edited video stored in the master video storage 190 is automatically transmitted to the online platform 30.
한편, 도 4에 도시되는 바와 같이 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템은 비정형데이터수집 분석기(430)를 추가로 포함하여 온라인 플랫폼(30)에 자동으로 등록한 영상에 대한 좋아요, 댓글, 정산정보를 온라인 플랫폼(30)의 각 채널로부터 수집하여 사용자에게 제공한다.Meanwhile, as shown in FIG. 4, the cloud-based video virtual studio service system according to the embodiment of the present invention further includes an unstructured data collection analyzer 430 to like, Comments and settlement information are collected from each channel of the online platform 30 and provided to the user.
도 5 는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템을 구성하는 구서 예이다. Rest API로 구현되는 인터페이스서버, 웹서버, 콘텐츠관리서버, 콘텐츠 등록서버, 스트리밍서버, DBMS, 스토리지, 트리밍서버, 원본 트랜스코더, 프록시 트랜스코더, 카탈로거, 온라인 영상 편집기, AI 자동 분석기, 비정형 데이터분석기로 구성될 수 있다. 인터페이스서버는 RestAPI로 개발하여 http를 사용하는 모든 클라이언트들과 통신 가능하게 된다. 스토리지는 비디오, 오디오, 썸네일, 프록시 를 저장할 수 있다. AI 자동 분석기는 AI 분석을 통해 장면별 내용관리, 장면관리를 수행한다. 비정형데이터분석기는 온라인 플랫폼 채널로부터 데이터를 수직하는 데이터 수집기와 수집된 데이터를 분석하는 데이터 분석기를 포함하여, 각 채널별로 좋아요, 댓글, 정산 정보를 사용자에게 제공할 수 있도록 한다.5 is an example of an old document configuring a cloud-based video virtual studio service system. Interface server implemented with Rest API, web server, content management server, content registration server, streaming server, DBMS, storage, trimming server, original transcoder, proxy transcoder, cataloger, online video editor, AI automatic analyzer, unstructured data It can be configured as an analyzer. The interface server is developed with RestAPI to enable communication with all clients using http. Storage can store video, audio, thumbnails and proxies. The AI automatic analyzer performs content management and scene management for each scene through AI analysis. The unstructured data analyzer includes a data collector that verticals data from an online platform channel and a data analyzer that analyzes the collected data, and allows users to provide likes, comments, and settlement information for each channel.
상기와 같이 구성된 클라우드 기반 동영상 가상 스튜디오 서비스 시스템은 영상 비 전문 제작자도 간편하게 촬영, 제작 전송을 원스톱으로 진행할 수 있는 인터넷에 자신만의 전용 가상 제작 스튜디오를 가지게 하는 것이다.The cloud-based video virtual studio service system configured as described above allows non-video producers to have their own dedicated virtual production studio on the Internet where they can easily shoot, produce, and transmit one-stop.
시간 장소에 제약 없이 편집이 가능하게 되고, 현장에서 촬영된 영상을 스트리밍 상태에 서버에 저장하므로 영상 파일의 안전한 저장이 가능하며, 제작자가 별도의 편집 프로그램을 구입하지 않고도 영상 편집이 가능하게 하며 비전문가도 간편하게 이용 가능하므로 초보 크리에이터도 간편하게 개인 미디어 방송 서비스를 가능하게 하는 장점이 있다.Editing is possible without any restrictions on time and place, and video files recorded in the field are stored in a streaming state on the server, so video files can be safely stored, and video editing is possible without the need for the producer to purchase a separate editing program. It is also easy to use, so even beginner creators have the advantage of enabling personal media broadcasting services.
본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10)은 모바일 촬영 라이브 스트림을 받아 클라우드 서비스 시스템(10)에서 수신하여 수신된 라이브 영상 스트림을 영상 콘텐츠로 등록하는 라이브 영상 자동 등록 기능을 가지고 있다.The cloud-based video virtual studio service system 10 according to an embodiment of the present invention provides a live video automatic registration function that receives a mobile shooting live stream and registers the received live video stream as video content. Have.
또한, 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10)은 주요 장면 관리를 위한 씬 단위 분류를 위하여 등록 영상을 자동 카탈로깅을 실시하고, 편집 및 조회를 위한 저해상도 미리보기 영상을 자동으로 생성하고 등록 영상 조회를 가능하게 하는 등록 영상 관리 기능을 가지고 있다.In addition, the cloud-based video virtual studio service system 10 according to an embodiment of the present invention automatically catalogs registered images to classify scenes for main scene management, and provides low-resolution preview images for editing and inquiries. It has a registered image management function that automatically generates and enables registered image search.
또한, 본 발명의 실시예에 따른 클라우드 기반 동영상 가상 스튜디오 서비스 시스템(10)은 사용자가 저해상도로 변환된 웹 기반 등록 영상들을 웹 기반의 온라인 편집부(170)에 의해 컷/자막/오디오/영상전환 효과 편집 작업하는 것을 가능하게 한다. 사용자가 온라인으로 수행한 편집 작업에 따른 편집 정보에 따라 원본 영상 스토리지에 저장된 고해상도 원본 영상을 편집영상처리부(180)가 수행하므로 온라인으로 편집 작업을 가능하게 한다. 편집 완성본 영상은 생성 후 영상 콘텐츠로 자동 등록시킬 수 있다. 또한, 편집 영상 처리부(180)는 편집 완성본 영상을 게시될 온라인 플랫폼에 맞는 영상 포맷으로 자동 변환하여 온라인 플랫폼에 등록시킬 수 있다.In addition, the cloud-based video virtual studio service system 10 according to the embodiment of the present invention cuts/subtitles/audio/video conversion effect by the web-based online editing unit 170 for web-based registered images converted by a user to a low resolution. Makes editing work possible. Since the editing image processing unit 180 performs the high-resolution original image stored in the original image storage according to the editing information according to the editing operation performed by the user online, the editing operation can be performed online. The edited video can be automatically registered as video content after creation. In addition, the edited image processing unit 180 may automatically convert the edited image into an image format suitable for an online platform to be posted and register it in the online platform.

Claims (5)

  1. 사용자 단말을 이용하여 촬영되는 동영상을 입수하여 원본 영상을 원본영상 스토리지에 저장하는 영상등록부;An image registration unit for acquiring a video captured using a user terminal and storing the original image in the original image storage;
    상기 원본 영상을 저해상도 미리보기 영상으로 변환하여 미리보기 영상 스토리지에 저장하는 트랜스코더;A transcoder for converting the original image into a low-resolution preview image and storing it in a preview image storage;
    웹편집기 HTML 표시부, 영상 편집 처리부, 오디오 편집 처리부, 자막 편집 처리부, 영상효과 처리부를 포함하여 상기 저화질 미리보기 영상을 온라인에서 편집하도록 하는 온라인 편집부;An online editing unit configured to edit the low-quality preview image online, including a web editor HTML display unit, an image editing processing unit, an audio editing processing unit, a caption editing processing unit, and a video effect processing unit;
    사용자가 사용자 단말의 웹브라우저를 통해 상기 미리보기 영상 스토리지에 저장된 저해상도 미리보기 영상을 불러와서 플레이하도록 접속하는 영상 스트리밍 서버;A video streaming server for accessing a user to load and play a low-resolution preview image stored in the preview image storage through a web browser of a user terminal;
    사용자가 사용자 단말의 웹브라우저를 토해 상기 온라인 편집부의 웹편집기 HTML 표시부, 영상 편집 처리부, 오디오 편집 처리부, 자막 편집 처리부, 영상효과 처리부를 이용하여 편집 작업을 하도록 접속하는 웹서버; 및A web server through which a user vomits through a web browser of a user terminal and accesses the online editing unit to perform an editing operation using a web editor HTML display unit, an image editing processing unit, an audio editing processing unit, a caption editing processing unit, and a video effect processing unit; And
    상기 웹서버에 접속하여 이루어진 상기 편집 작업의 편집 정보에 따라 상기 원본영상스토리지에 저장된 원본 영상에 편집 작업을 수행하여 완성본 영상을 마스터 영상 스토리지에 저장하는 편집 영상 처리부;를 포함하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템.Cloud-based video virtual studio including; an edited image processing unit for storing the finished image in a master image storage by performing an editing operation on the original image stored in the original image storage according to the editing information of the editing operation performed by accessing the web server. Service system.
  2. 제 1 항에 있어서,The method of claim 1,
    상기 영상 등록부는 사용자가 동영상을 촬영하면 스트리밍 입수기가 사용자가 촬영한 스트리밍 데이터를 입수하여 원본 영상을 등록하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템.The video registration unit is a cloud-based video virtual studio service system in which a streaming obtainer acquires streaming data captured by the user when a user shoots a video and registers the original video.
  3. 제 1 항에 있어서,The method of claim 1,
    상기 미리보기 영상 스토리지에 저장된 미리보기 영상에서 장면을 추출하고 썸네일 이미지를 생성하여 컷편집에 활용하도록 영상DB에 저장하는 장면분석부를 추가로 포함하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템.Cloud-based video virtual studio service system further comprising a scene analysis unit for extracting a scene from the preview image stored in the preview image storage, generating a thumbnail image, and storing it in an image DB to be used for cut editing.
  4. 제 1 항에 있어서,The method of claim 1,
    상기 편집 영상 처리부는 상기 완성본 영상을 게시될 온라인 플랫폼에 맞는 영상 포맷으로 자동 변환하여 상기 온라인 플랫폼에 등록하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템.The edited image processing unit automatically converts the finished image into a video format suitable for an online platform to be posted and registers it in the online platform.
  5. 제 4 항에 있어서,The method of claim 4,
    상기 온라인 플랫폼에 등록된 상기 영상에 대한 좋아요, 댓글, 정산정보를 상기 온라인 플랫폼의 각 채널로부터 수집하여 사용자에게 제공하는 비정형데이터수집 분석기를 추가로 포함하는 클라우드 기반 동영상 가상 스튜디오 서비스 시스템.Cloud-based video virtual studio service system further comprising an unstructured data collection analyzer that collects likes, comments, and settlement information for the video registered on the online platform from each channel of the online platform and provides it to a user.
PCT/KR2020/011285 2019-11-22 2020-08-25 Cloud-based video virtual studio service system WO2021101024A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR10-2019-0151263 2019-11-22
KR20190151263 2019-11-22

Publications (1)

Publication Number Publication Date
WO2021101024A1 true WO2021101024A1 (en) 2021-05-27

Family

ID=75981659

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/011285 WO2021101024A1 (en) 2019-11-22 2020-08-25 Cloud-based video virtual studio service system

Country Status (1)

Country Link
WO (1) WO2021101024A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114615541A (en) * 2022-02-18 2022-06-10 杭州猿马信息科技有限公司 Video production method and production system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150013381A (en) * 2013-07-26 2015-02-05 주현선 An apparatus for providing comments and statistical information to video segments and the method thereof
KR20160089035A (en) * 2015-01-16 2016-07-27 주식회사 에스제이테크놀로지 Media production cloud service system
KR20170082410A (en) * 2016-01-06 2017-07-14 주식회사 에스제이테크놀로지 Method for mobile Ads video production service based on template and Mobile Ads video production system
US20170345459A1 (en) * 2016-05-31 2017-11-30 Dropbox, Inc. Synchronizing edits to low- and high-resolution versions of digital videos
KR102029604B1 (en) * 2018-12-07 2019-10-08 스타십벤딩머신 주식회사 Editing system and editing method for real-time broadcasting

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150013381A (en) * 2013-07-26 2015-02-05 주현선 An apparatus for providing comments and statistical information to video segments and the method thereof
KR20160089035A (en) * 2015-01-16 2016-07-27 주식회사 에스제이테크놀로지 Media production cloud service system
KR20170082410A (en) * 2016-01-06 2017-07-14 주식회사 에스제이테크놀로지 Method for mobile Ads video production service based on template and Mobile Ads video production system
US20170345459A1 (en) * 2016-05-31 2017-11-30 Dropbox, Inc. Synchronizing edits to low- and high-resolution versions of digital videos
KR102029604B1 (en) * 2018-12-07 2019-10-08 스타십벤딩머신 주식회사 Editing system and editing method for real-time broadcasting

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114615541A (en) * 2022-02-18 2022-06-10 杭州猿马信息科技有限公司 Video production method and production system

Similar Documents

Publication Publication Date Title
WO2019205872A1 (en) Video stream processing method and apparatus, computer device and storage medium
WO2019205886A1 (en) Method and apparatus for pushing subtitle data, subtitle display method and apparatus, device and medium
RU2551111C2 (en) Apparatus and method for downloading movie file
CA2473071C (en) Image file container
WO2011108900A2 (en) Method and apparatus for generating bookmark information
JP4352653B2 (en) Video content management system
CN103141069B (en) For retrieving the method and system with transmitting multimedia data
WO2019205870A1 (en) Video stream processing method, apparatus, computer device, and storage medium
US9076488B2 (en) Media file for multi-platform non-linear video editing systems
WO2011059275A2 (en) Method and apparatus for managing data
KR100686521B1 (en) Method and apparatus for encoding and decoding of a video multimedia application format including both video and metadata
JP2017163538A (en) Video streaming device, video editing device, and video distribution system
WO2014103123A1 (en) Device, method, and program for digest generation
JP2007052626A (en) Metadata input device and content processor
Pea et al. Video workflow in the learning sciences: Prospects of emerging technologies for augmenting work practices
WO2021101024A1 (en) Cloud-based video virtual studio service system
KR100393417B1 (en) Method for internet web broadcasting performance in local performing place and apparatus therefor
JP6145748B2 (en) Video playback device and video recording device
US20200117910A1 (en) Methods and apparatus for generating a video clip
JP5909546B2 (en) Apparatus and method for streaming video
KR101396362B1 (en) Method and apparatus for providing a detailed information of personal video recorder
US9264746B2 (en) Content distribution system, content distribution server, content distribution method, software program, and storage medium
KR20200024541A (en) Providing Method of video contents searching and service device thereof
WO2019225793A1 (en) Ai video learning platform-based vod service system
KR102391755B1 (en) Information processing device and information processing method

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20890647

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE