KR20230012727A - 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법 - Google Patents

실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법 Download PDF

Info

Publication number
KR20230012727A
KR20230012727A KR1020210093323A KR20210093323A KR20230012727A KR 20230012727 A KR20230012727 A KR 20230012727A KR 1020210093323 A KR1020210093323 A KR 1020210093323A KR 20210093323 A KR20210093323 A KR 20210093323A KR 20230012727 A KR20230012727 A KR 20230012727A
Authority
KR
South Korea
Prior art keywords
channel matrix
display
display area
video
areas
Prior art date
Application number
KR1020210093323A
Other languages
English (en)
Other versions
KR102595431B1 (ko
Inventor
최준성
Original Assignee
서울사이버대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서울사이버대학교 산학협력단 filed Critical 서울사이버대학교 산학협력단
Priority to KR1020210093323A priority Critical patent/KR102595431B1/ko
Publication of KR20230012727A publication Critical patent/KR20230012727A/ko
Application granted granted Critical
Publication of KR102595431B1 publication Critical patent/KR102595431B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Architecture (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

실감형 영상 콘텐츠 제작 및 배포 시스템이 제공된다. 본 발명의 일 실시예에 따른, 실감형 영상 콘텐츠 제작 및 배포 시스템은 N 채널 매트릭스 스위쳐, 녹화용 서버, 영상 편집부, 및 디스플레이 관리부를 포함한다.

Description

실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법{System and method for producing and distributing realistic video contents}
본 발명은 대상을 멀티 카메라 어레이를 통해 다양한 각도에서 촬영한 실감형 영상 콘텐츠를 제작하고 배포하는 시스템 및 방법에 관한 것이다.
기존에 멀티 카메라 어레이를 통해 실감형 영상 콘텐츠를 제작할 경우, 미디어 스트리밍 서버에 카메라의 수만큼의 영상파일이 존재하고, 사용자는 이 파일 중 하나를 스트리밍 받게 된다.
최초 촬영부터 최종 서비스까지 이 다수개의 파일을 각 파일별로 품질과 편집 점, 재생시간 및 재생순서 등을 일관적으로 제작, 관리하기 위해서는 많은 지원과 인력이 소요된다. 그리고 기술의 특성 상 각 채널의 노출, 화각, 초점, 프레이밍 등이 매우 정교해야 원하는 품질의 UX를 사용자에게 제공할 수 있는데, 위와 같이 관리포인트가 늘어날 경우 각 단계별, 파일별 오류의 발생소지가 크기 때문에 실제로 서비스하기엔 운영상의 어려움이 많이 따를 수 밖에 없다.
또한 사용자 (시청자) 가 재생중인 채널 (시점) 과 다른 채널의 영상을 수신받기 위해서는 다음과 같은 여러 단계를 거쳐야 한다.
채널 변경 명령 입력 → 명령을 서버에 전송 → 명령에 해당하는 다른 시점의 파일에서 사용자의 기존 재생 시간값 로딩 → 스트리밍 시작 → 사용자 단말기에 재생
위의 여러 단계를 서버와 사용자간의 네트워크 환경을 오가며 실행해야하는데, 이 과정에서 필연적으로 지연현상이 발생되게 된다. 이러한 환경에서 여러 채널의 영상을 연속적으로 로딩할 경우 사용자는 지연현상을 더욱 크게 느끼게 되어, 쾌적한 조작감을 제공하기 매우 어렵다.
본 발명은 멀티 카메라 어레이를 통해 하나 또는 복수개의 대상을 다양한 각도에서 촬영한 다채널 동영상 소스를 하나의 동영상 파일에 저장하여 송출하고, 사용자가 전용 UX를 통해 드래그나 스와이프 등의 간단한 동작으로 직관적이고 간편하게 원하는 장면을 선택할 수 있도록 하여 사용자로 하여금 촬영 대상을 직접 손가락으로 돌리는 듯한 실재감을 주고자 하는 기술이다. 일반적으로는 멀티카메라를 이용한 동영상 콘텐츠 제작과 배포에는 여러개의 영상파일을 다루기 때문에 상당한 인력과 컴퓨팅파워, 네트워크자원, 작업시간이 소요되어 실제 서비스를 실현하기 어려움이 많았지만 본 기술을 이용한다면 멀티카메라를 이용한 콘텐츠 개발에 필요한 시간과 자원 소모를 획기적으로 줄일 수 있으므로 상대적으로 적은 노력과 비용으로 실제 서비스까지 도달 할 수 있다. 사용자 측면에서는 학습 실재감과 현장감을 향상시켜 동영상 학습 콘텐츠의 효과성 증대를 기대할 수 있다.
상기 언급된 기술적 과제들을 해결하기 위한, 본 발명의 일 실시예에 따른 실감형 영상 콘텐츠 제작 및 배포 시스템은, 2 이상의 복수개의 카메라들로부터 각 채널의 비디오 영상을 수신하여, N 채널 매트릭스의 형태를 갖는 하나의 영상 파일을 생성하는 N 채널 매트릭스 스위쳐로서, 상기 N 은 상기 복수개의 카메라들의 개수와 동일하고, 상기 N 채널 매트릭스는 상기 복수개의 카메라들로부터 수신한 N 개의 비디오 영상에 대응하는 N 개의 영역으로 구성된, 상기 N 채널 매트릭스 스위쳐, 생성된 상기 하나의 영상 파일을 소정의 해상도로 저장하는 녹화용 서버, 상기 하나의 영상 파일을 일체로 편집하는 영상 편집부, 및 사용자측에 설치되는 디스플레이 관리부로서, 사용자 입력에 의해 상기 N 개의 영역에 대해 표시 영역과 비표시 영역을 설정하며, 상기 하나의 영상 파일을 일체로 재생시켜, 상기 표시 영역에 대응되는 비디오 영상과 상기 비표시 영역에 대응되는 비디오 영상을 모두 재생시키는, 상기 디스플레이 관리부를 포함한다.
상기 N 은 2, 4, 또는 9 이며, 상기 N 이 2 일때, 상기 N 채널 매트릭스는 2x1 형태 또는 1x2 형태이며, 상기 N 이 4 일때, 상기 N 채널 매트릭스는 2x2 형태이고, 상기 N 이 9 일때, 상기 N 채널 매트릭스는 3x3 형태일 수 있다.
상기 소정의 해상도는 4K 해상도일 수 있다.
상기 사용자 입력은 스와이프, 마우스 드래그 또는 마우스 휠 조작이고, 상기 N 개의 영역은 순차적인 일련번호를 가지며, 상기 표시 영역은 1 개이고, 상기 스와이프, 상기 마우스 드래그 또는 상기 마우스 휠 조작에 의해 상기 표시 영역이 순차적으로 설정될 수 있다.
상기 표시 영역은 1 개이고, 상기 디스플레이 관리부는 사용자측의 디스플레이로 하여금 상기 N 채널 매트릭스에서 상기 표시 영역을 크롭하여 표시하도록 할 수 있다.
본 발명의 일 실시예에 따른, 실감형 영상 콘텐츠 제작 및 배포 방법은, 2 이상의 복수개의 카메라들로부터 각 채널의 비디오 영상을 수신하여, N 채널 매트릭스의 형태를 갖는 하나의 영상 파일을 생성하는 단계로서, 상기 N 은 상기 복수개의 카메라들의 개수와 동일하고, 상기 N 채널 매트릭스는 상기 복수개의 카메라들로부터 수신한 N 개의 비디오 영상에 대응하는 N 개의 영역으로 구성된, 상기 N 채널 매트릭스의 형태를 갖는 상기 하나의 영상 파일을 생성하는 단계, 생성된 상기 하나의 영상 파일을 소정의 해상도로 저장하는 단계, 상기 하나의 영상 파일을 일체로 편집하는 단계, 및 사용자측에서 수행되는 디스플레이 관리단계로서, 사용자 입력에 의해 상기 N 개의 영역에 대해 표시 영역과 비표시 영역을 설정하며, 상기 하나의 영상 파일을 일체로 재생시켜, 상기 표시 영역에 대응되는 비디오 영상과 상기 비표시 영역에 대응되는 비디오 영상을 모두 재생시키는, 상기 디스플레이 관리단계를 포함한다.
상기 N 은 2, 4, 또는 9 이며, 상기 N 이 2 일때, 상기 N 채널 매트릭스는 2x1 형태 또는 1x2 형태이며, 상기 N 이 4 일때, 상기 N 채널 매트릭스는 2x2 형태이고, 상기 N 이 9 일때, 상기 N 채널 매트릭스는 3x3 형태일 수 있다.
상기 소정의 해상도는 4K 해상도일 수 있다.
상기 사용자 입력은 스와이프, 마우스 드래그 또는 마우스 휠 조작이고, 상기 N 개의 영역은 순차적인 일련번호를 가지며, 상기 표시 영역은 1 개이고, 상기 스와이프, 상기 마우스 드래그 또는 상기 마우스 휠 조작에 의해 상기 표시 영역이 순차적으로 설정될 수 있다.
상기 표시 영역은 1 개이고, 상기 디스플레이 관리단계에서는 사용자측의 디스플레이로 하여금 상기 N 채널 매트릭스에서 상기 표시 영역을 크롭하여 표시하도록 할 수 있다.
본 발명의 일 실시예에 따른 프로그램을 기록한 컴퓨터 판독 가능 저장 매체는, 상기 실감형 영상 콘텐츠 제작 및 배포 방법들을 수행할 수 있다.
기존 기술의 단점은 다음과 같다.
- 다수 대의 카메라에서 출력된 영상을 정확한 시작/종료 시간을 동기화 시켜 동시에 저장할 수 있는 설비를 갖춰야 함
- 촬영한 영상에 편집이 필요할 경우 각각의 파일을 정확히 동일한 시점에 동일한 편집을 채널의 수만큼 시행해야 함
- 편집한 다수 개의 파일을 각각 인코딩해 저장하고 전송, 스트리밍, 관리해야 함
- 채널 변경 명령의 입력에서 출력까지의 단계가 ‘사용자 단말기-네트워크-서버-네트워크-사용자 단말기’를 거쳐야하기 때문에 필연적으로 채널 변경에 지연시간 발생함
- 사용자의 채널 변경 명령을 실시간으로 전송받아 처리하고 해당하는 채널의 영상파일의 재생시간을 사용자 단말에 재생중이던 영상파일의 시간값과 동기화 시켜서 스트리밍 시켜줄 서버측 어플리케이션 개발과 설치가 필요함
- 다수 채널의 스트리밍 스트림중 네트워크 지연 등의 사유로 하나의 스트림에만 문제가 생겨도 연속적인 채널전환을 자연스럽게 구현할 수 없음
- 채널 전환의 지연시간을 최소화하기 위해 매우 짧은 응답속도의 네트워크 환경이 요구됨
반면, 본원 발명의 효과는 다음과 같다.
- 다수 대의 카메라에서 촬영된 다채널 영상을 멀티뷰어를 통해 하나의 채널로 출력해 단 하나의 고해상도 동영상 파일에 통합해 저장하므로 하나의 동영상 저장장치만 필요함
- 편집이 필요한 경우 한 개의 파일이기 때문에 편집도 1회만 하면 되며, 이후 인코딩, 저장, 전송, 스트리밍 등 모든 절차를 한 개의 파일만 관리하면 됨
- 채널 변경 명령의 입력에서 출력까지 모든 단계가 사용자측 단말기 내에서 이루어지기 때문에 채널 변경에 따른 지연시간이 없음
- 스트리밍 서버에 다채널 스트림의 재생시간 값 동기화, 채널변경 명령 입출력 처리에 필요한 별도의 어플리케이션 설치 불필요. 단순한 스트리밍 기능만 필요함
- 일반적인 네트워크 환경에서도 모든 기능을 원활히 작동 가능함
- 종합하자면, 선행기술에 비해 단순하고 효율적인 워크플로우를 가지며 더 적은 컴퓨팅 파워와 제작인력이 소요되고, 더 적은 관리 포인트로 서비스 오류를 줄일 수 있고, 명령에 대한 빠른 응답속도로 사용자에게 보다 원활하고 쾌적한 작동환경을 제공할 수 있음
도 1, 2 는 일 실시예의 실감형 영상 콘텐츠 제작 및 배포 시스템을 나타낸 도면이다.
도 3 은 일 실시예의 멀티 카메라 어레이를 나타내는 도면이다.
도 4 는 N 이 2, 4, 9 일때의 N 채널 매트릭스를 나타내는 도면이다.
도 5 는 일 실시예에 따른 N 이 9 일때의 N 채널 매트릭스를 나타내는 도면이다.
도 6 은 N 채널 매트릭스에서 표시 영역을 크롭하여 표시하는 실시예를 나타내는 도면이다.
도 7 은 표시 영역이 순차적으로 설정되는 실시예를 나타내는 도면이다.
도 8 은 사용자 입력에 의해 표시 영역이 순차적으로 설정되는 순서도를 나타내는 도면이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다. 본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.
본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다" 및/또는 "포함하는"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다.
본 명세서에서 달리 언급되지 않는다면, "접속되는" 또는 “연결되는” 은 하나의 엘리먼트/특징이 다른 엘리먼트/특징과 직접적으로 접속 또는 연결되는 것 또는 타 엘리먼트/특징을 개재하여 간접적으로 접속 또는 연결되는 것을 포함할 수 있고, 반드시 기계적으로 바로 접속 또는 연결되는 것만을 의미하는 것은 아니다. 따라서, 도면들에 도시된 다양한 모식도들은 엘리먼트들과 컴포넌트들의 예시적인 배열들을 도시하지만, 추가의 중재 엘리먼트들, 디바이스들, 특징들 또는 컴포넌트들이 (도시된 엘리먼트들의 기능이 악영향을 받지 않는다고 가정할 때) 실제 실시형태에서 존재할 수도 있다.
또한, 본 명세서에서 "전송하는" 또는 “수신하는” 은 전송자와 수신자 간에 정보를 직접 전송 또는 수신하는 것뿐만 아니라, 달리 언급되지 않는다면 타 객체를 개재하여 정보를 전송 또는 수신하는 것을 포함할 수 있다.
또한, 본 명세서에서 달리 언급하지 않는다면, “제 1”, “제 2”, “제 3”과 같은 표현은 발명의 설명을 위하여 서로 다르게 지칭될 수 있는 대상을 구별하는 용어로 사용될 뿐, 반드시 순서를 규정하는 것은 아니다. 또한, “제 1”, “제 2” 로 구분되어 지칭된다고 할지라도, 그 지칭되는 대상의 내용이 경우에 따라 동일할 수도 있다.
이하, 도면을 참조하여 본 발명의 실시예들에 따른 실감형 영상 콘텐츠 제작 및 배포 시스템에 대해 설명하기로 한다.
도 1 및 도 2 에는 본 발명의 일 실시예에 따른 실감형 영상 콘텐츠 제작 및 배포 시스템이 도시되어 있다. 본 발명의 일 실시예에 따른, 실감형 영상 콘텐츠 제작 및 배포 시스템 (100) 은, 2 이상의 복수개의 카메라들로부터 각 채널의 비디오 영상을 수신하여, N 채널 매트릭스의 형태를 갖는 하나의 영상 파일을 생성하는 N 채널 매트릭스 스위쳐 (110) 로서, 상기 N 은 상기 복수개의 카메라들의 개수와 동일하고, 상기 N 채널 매트릭스는 상기 복수개의 카메라들로부터 수신한 N 개의 비디오 영상에 대응하는 N 개의 영역으로 구성된, 상기 N 채널 매트릭스 스위쳐 (110), 생성된 상기 하나의 영상 파일을 소정의 해상도로 저장하는 녹화용 서버 (120), 상기 하나의 영상 파일을 일체로 편집하는 영상 편집부 (130), 및 사용자측에 설치되는 디스플레이 관리부 (140) 로서, 사용자 입력에 의해 상기 N 개의 영역에 대해 표시 영역과 비표시 영역을 설정하며, 상기 하나의 영상 파일을 일체로 재생시켜, 상기 표시 영역에 대응되는 비디오 영상과 상기 비표시 영역에 대응되는 비디오 영상을 모두 재생시키는, 상기 디스플레이 관리부 (140) 를 포함한다.
도 3 에는 일 실시예에 따른 멀티 카메라 어레이가 도시되어 있다. 멀티 카메라 어레이에서는 복수개의 카메라들이 고정된 또는 가변의 프레임에 설치되어 있을 수 있다. 이때, 상기 복수개의 카메라들은 하나의 대상을 다양한 각도에서 촬영할 수 있으며, 또한 복수개의 대상을 다양한 각도에서 촬영할 수도 있다. 상기 카메라의 개수는 촬영의 목적, 대상의 크기, 대상의 개수 등에 따라 적합하게 정해질 수 있다.
N 채널 매트릭스 스위쳐 (110) 는 2 이상의 복수개의 카메라들로부터 각 채널의 비디오 영상을 수신하여, N 채널 매트릭스의 형태를 갖는 하나의 영상 파일을 생성한다. 이 때, N 은 상기 복수개의 카메라들의 개수와 동일하고, 상기 N 채널 매트릭스는 상기 복수개의 카메라들로부터 수신한 N 개의 비디오 영상에 대응하는 N 개의 영역으로 구성된다. 구체적으로, 도 4 에는 N 이 2, 4, 9 일 때의 N 채널 매트릭스의 예시가 도시되어 있다. 도 4 의 왼쪽에는 N 이 2 일때 1x2 형태의 N 채널 매트릭스가 도시되어 있으며, 1 번 영역은 상기 복수개의 카메라들 중 제 1 카메라의 영상에 대응되고, 2 번 영역은 상기 복수개의 카메라들 중 제 2 카메라의 영상에 대응될 수 있다. 이때, 1x2 형태가 아니라 2x1 형태로 N 채널 매트릭스가 구성될 수도 있다. 다음으로, 도 4 의 중앙에는 N 이 4 일때 2x2 형태의 N 채널 매트릭스가 도시되어 있으며, 1 내지 4 번 영역은 각각 상기 복수개의 카메라들 중 제 1 내지 제 4 카메라의 영상에 대응될 수 있다. 다음으로, 도 4 의 오른쪽에는 N 이 9 일때 3x3 형태의 N 채널 매트릭스가 도시되어 있으며, 1 내지 9 번 영역은 각각 상기 복수개의 카메라들 중 제 1 내지 제 9 카메라의 영상에 대응될 수 있다.
도 5 에는 N 이 9 일때 3x3 형태의 N 채널 매트릭스가 도시되어 있다. 도 5 에 도시된 바와 같이 하나의 대상을 9 개의 카메라가 서로 다른 각도로 촬영하며, 9 개의 영상이 하나의 영상 파일을 구성하고 있다. 이처럼, N 채널 매트릭스 스위쳐 (110) 는 복수개의 카메라들로부터 수신한 각 채널의 비디오 영상을 복수개의 영상 파일이 아니라 하나의 영상 파일로 생성하고 있다. 이처럼, 하나의 영상 파일로 생성함으로써 편집을 일괄적으로 할 수 있으며, 관리를 위한 컴퓨팅 파워, 네트워크 자원 등을 절약할 수 있다. 또한, 사용자가 다른 채널의 영상을 원할 때 발생하는 지연현상을 줄일 수 있다.
녹화용 서버 (120) 는 N 채널 매트릭스 스위쳐 (110) 에 의해 생성된 상기 하나의 영상 파일을 소정의 해상도로 저장한다. 이때, 상기 소정의 해상도는 4K 해상도일 수 있다.
영상 편집부 (130) 는 상기 하나의 영상 파일을 일체로 편집한다. 즉, 상기 하나의 영상파일을 구성하는 N 개의 영역에 대해 따로 편집이 수행되는 것이 아니라, 소정의 편집 명령이 상기 N 개의 영역에 모두 적용된다. 예를 들어, 3초 내지 5초에 해당하는 비디오 프레임을 삭제하는 편집 명령을 발생시키면, 상기 N 개의 영역 모두에 대해 해당 삭제 명령이 실시될 수 있다.
상기와 같이 영상 편집부 (130) 는 상기 하나의 영상 파일을 일체로 편집되면, 편집된 하나의 영상 파일을 다음과 같은 포맷으로 인코딩하여 서버에 업로드된 뒤 사용자에게 서비스될 수 있다.
- 컨테이너 : mp4
- 비디오포멧 : H.264
- 비디오해상도 : 3840x2160픽셀
- 프레임레이트 : 29.97fps
- 비디오대역폭 : 5Mbps
- 오디오포멧 : AAC
- 오디오대역폭 : 128Kbps
디스플레이 관리부 (140) 는 사용자측에 설치되며, 사용자 입력에 의해 상기 N 개의 영역에 대해 표시 영역과 비표시 영역을 설정한다. 이때 사용자측이란 사용자 (시청자) 의 장비를 의미하며, 예로서 사용자의 디바이스, 컴퓨터, 스마트폰, 태블릿 PC 등이 있다. 즉, N 채널 매트릭스 스위쳐 (110), 녹화용 서버 (120), 영상 편집부 (130) 는 실감형 영상 콘텐츠 제작 및 배포 시스템 (100) 의 관리자측에 위치할 수 있는 반면, 디스플레이 관리부 (140) 는 사용자측에 설치될 수 있다. 예를 들어, N 채널 매트릭스 스위쳐 (110), 녹화용 서버 (120), 영상 편집부 (130) 는 관리자측에 설치된 서버에 위치할 수 있고, 상기 디스플레이 관리부 (140) 가 어플리케이션 또는 프로그램의 형태로 사용자의 장비에 설치되거나, 또는 독자적인 서버형태로 사용자측에 위치될 수도 있다.
한편, 표시 영역은 N 채널 매트릭스의 N 개의 영역 중에서 사용자에게 표시되는 영역을 의미하며, 비표시 영역은 N 개의 영역 중에서 사용자에게 표시되지 않는 영역을 의미한다. 이때, 상기 표시 영역은 1 개일 수 있으며, 상기 디스플레이 관리부 (140) 는 사용자측의 디스플레이로 하여금 상기 표시 영역을 크롭하여 표시하도록 할 수 있다. 구체적으로, 도 6 의 예시에서, 5 번 영역이 표시 영역이며, 나머지 영역은 비표시 영역이다. 이때, 사용자측의 디스플레이에서는 도 6의 오른쪽 그림과 같이 표시 영역인 5 번 영역이 크롭되어 전체화면으로 표시될 수 있다. 한편, 디스플레이 관리부 (140) 는 하나의 영상 파일을 일체로 재생시키므로, 표시 영역에 대응되는 비디오 영상뿐만 아니라 비표시 영역에 대응되는 비디오 영상도 모두 재생시킨다. 구체적으로, 도 6 의 예시에서, 표시 영역인 5 번 영역뿐만 아니라, 비표시 영역인 1, 2, 3, 4, 6, 7, 8, 9 번 영역도 모두 재생된다.
일 실시예에 따라, 상기 사용자 입력은 스와이프, 마우스 드래그 또는 마우스 휠 조작일 수 있다. 이때, 스와이프는 스마트폰, 터치패드, 태블릿 pc, 터치 디스플레이 등에서 소정의 영역을 특정 물체로 터치한 후 터치된 상태를 유지하며 상기 특정 물체를 그 외의 영역으로 이동시키는 것을 의미한다. 이때, 도 7 과 같이, 상기 N 개의 영역은 순차적인 일련번호를 가질 수 있으며, 도 8 과 같이, 스와이프, 마우스 드래그 또는 마우스 휠 조작에 의해 표시 영역이 순차적으로 설정될 수 있다. 예를 들어, 표시 영역이 1 번 영역일 때, 마우스 휠을 돌리면 표시 영역이 2 번 영역으로 설정될 수 있다. 참고로, 도 7 은 설명을 용이하게 하기 위해 각 영역에 숫자를 표시하였을 뿐이며, 상기 숫자가 반드시 화면에 표시되는 것은 아니다.
이러한 실감형 영상 콘텐츠 제작 및 배포 방법들은 프로그램을 기록한 컴퓨터 판독 가능 저장 매체에서 수행될 수 있다.
비제한적인 예로서, 컴퓨터 판독 가능 매체들은 RAM, ROM, EEPROM, CD-ROM 또는 다른 광디스크 스토리지, 자기디스크 스토리지 또는 다른 자기 저장 디바이스들, 또는 원하는 프로그램 코드 수단을 명령들 또는 데이터 구조들의 형태로 저장하는데 사용될 수 있으며 범용 또는 특수-목적 컴퓨터, 또는 범용 또는 특수-목적 프로세서에 의해 액세스될 수 있는 임의의 다른 저장 매체를 포함할 수 있다. 디스크 (disk) 및 디스크 (disc) 는, 본원에서 사용할 때, 컴팩트 디스크 (CD), 레이저 디스크, 광 디스크, 디지털 다기능 디스크 (DVD), 플로피 디스크 및 Blu-ray 디스크를 포함하며, 디스크들 (disks) 은 데이터를 자기적으로 보통 재생하지만, 디스크들 (discs) 은 레이저로 데이터를 광학적으로 재생한다. 앞에서 언급한 것들의 조합들이 또한 컴퓨터 판독 가능 저장 매체의 범위 내에 포함되어야 한다.
이상 첨부된 도면을 참조하여 본 발명의 실시예들을 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.
100: 실감형 영상 콘텐츠 제작 및 배포 시스템
110: N 채널 매트릭스 스위쳐
120: 녹화용 서버
130: 영상 편집부
140: 디스플레이 관리부

Claims (11)

  1. 실감형 영상 콘텐츠 제작 및 배포 시스템으로서,
    2 이상의 복수개의 카메라들로부터 각 채널의 비디오 영상을 수신하여, N 채널 매트릭스의 형태를 갖는 하나의 영상 파일을 생성하는 N 채널 매트릭스 스위쳐로서, 상기 N 은 상기 복수개의 카메라들의 개수와 동일하고, 상기 N 채널 매트릭스는 상기 복수개의 카메라들로부터 수신한 N 개의 비디오 영상에 대응하는 N 개의 영역으로 구성된, 상기 N 채널 매트릭스 스위쳐;
    생성된 상기 하나의 영상 파일을 소정의 해상도로 저장하는 녹화용 서버;
    상기 하나의 영상 파일을 일체로 편집하는 영상 편집부; 및
    사용자측에 설치되는 디스플레이 관리부로서, 사용자 입력에 의해 상기 N 개의 영역에 대해 표시 영역과 비표시 영역을 설정하며, 상기 하나의 영상 파일을 일체로 재생시켜, 상기 표시 영역에 대응되는 비디오 영상과 상기 비표시 영역에 대응되는 비디오 영상을 모두 재생시키는, 상기 디스플레이 관리부를 포함하는, 실감형 영상 콘텐츠 제작 및 배포 시스템.
  2. 제 1 항에 있어서,
    상기 N 은 2, 4, 또는 9 이며,
    상기 N 이 2 일때, 상기 N 채널 매트릭스는 2x1 형태 또는 1x2 형태이며,
    상기 N 이 4 일때, 상기 N 채널 매트릭스는 2x2 형태이고,
    상기 N 이 9 일때, 상기 N 채널 매트릭스는 3x3 형태인, 실감형 영상 콘텐츠 제작 및 배포 시스템.
  3. 제 1 항에 있어서,
    상기 소정의 해상도는 4K 해상도인, 실감형 영상 콘텐츠 제작 및 배포 시스템.
  4. 제 1 항에 있어서,
    상기 사용자 입력은 스와이프, 마우스 드래그 또는 마우스 휠 조작이고,
    상기 N 개의 영역은 순차적인 일련번호를 가지며,
    상기 표시 영역은 1 개이고,
    상기 스와이프, 상기 마우스 드래그 또는 상기 마우스 휠 조작에 의해 상기 표시 영역이 순차적으로 설정되는, 실감형 영상 콘텐츠 제작 및 배포 시스템.
  5. 제 1 항에 있어서,
    상기 표시 영역은 1 개이고,
    상기 디스플레이 관리부는 사용자측의 디스플레이로 하여금 상기 N 채널 매트릭스에서 상기 표시 영역을 크롭하여 표시하도록 하는, 실감형 영상 콘텐츠 제작 및 배포 시스템.
  6. 실감형 영상 콘텐츠 제작 및 배포 방법으로서,
    2 이상의 복수개의 카메라들로부터 각 채널의 비디오 영상을 수신하여, N 채널 매트릭스의 형태를 갖는 하나의 영상 파일을 생성하는 단계로서, 상기 N 은 상기 복수개의 카메라들의 개수와 동일하고, 상기 N 채널 매트릭스는 상기 복수개의 카메라들로부터 수신한 N 개의 비디오 영상에 대응하는 N 개의 영역으로 구성된, 상기 N 채널 매트릭스의 형태를 갖는 상기 하나의 영상 파일을 생성하는 단계;
    생성된 상기 하나의 영상 파일을 소정의 해상도로 저장하는 단계;
    상기 하나의 영상 파일을 일체로 편집하는 단계; 및
    사용자측에서 수행되는 디스플레이 관리단계로서, 사용자 입력에 의해 상기 N 개의 영역에 대해 표시 영역과 비표시 영역을 설정하며, 상기 하나의 영상 파일을 일체로 재생시켜, 상기 표시 영역에 대응되는 비디오 영상과 상기 비표시 영역에 대응되는 비디오 영상을 모두 재생시키는, 상기 디스플레이 관리단계를 포함하는, 실감형 영상 콘텐츠 제작 및 배포 방법.
  7. 제 6 항에 있어서,
    상기 N 은 2, 4, 또는 9 이며,
    상기 N 이 2 일때, 상기 N 채널 매트릭스는 2x1 형태 또는 1x2 형태이며,
    상기 N 이 4 일때, 상기 N 채널 매트릭스는 2x2 형태이고,
    상기 N 이 9 일때, 상기 N 채널 매트릭스는 3x3 형태인, 실감형 영상 콘텐츠 제작 및 배포 방법.
  8. 제 6 항에 있어서,
    상기 소정의 해상도는 4K 해상도인, 실감형 영상 콘텐츠 제작 및 배포 방법.
  9. 제 6 항에 있어서,
    상기 사용자 입력은 스와이프, 마우스 드래그 또는 마우스 휠 조작이고,
    상기 N 개의 영역은 순차적인 일련번호를 가지며,
    상기 표시 영역은 1 개이고,
    상기 스와이프, 상기 마우스 드래그 또는 상기 마우스 휠 조작에 의해 상기 표시 영역이 순차적으로 설정되는, 실감형 영상 콘텐츠 제작 및 배포 방법.
  10. 제 6 항에 있어서,
    상기 표시 영역은 1 개이고,
    상기 디스플레이 관리단계에서는 사용자측의 디스플레이로 하여금 상기 N 채널 매트릭스에서 상기 표시 영역을 크롭하여 표시하도록 하는, 실감형 영상 콘텐츠 제작 및 배포 방법.
  11. 제 6 항 내지 제 10 항 중 어느 한 항의 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능 저장 매체.
KR1020210093323A 2021-07-16 2021-07-16 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법 KR102595431B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210093323A KR102595431B1 (ko) 2021-07-16 2021-07-16 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210093323A KR102595431B1 (ko) 2021-07-16 2021-07-16 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20230012727A true KR20230012727A (ko) 2023-01-26
KR102595431B1 KR102595431B1 (ko) 2023-10-27

Family

ID=85110493

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210093323A KR102595431B1 (ko) 2021-07-16 2021-07-16 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102595431B1 (ko)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140037272A (ko) * 2011-09-29 2014-03-26 뎃페이 에리구치 동화상 표시 장치, 동화상 표시 방법, 프로그램 및 동화상 처리 표시 시스템
WO2017038541A1 (ja) * 2015-09-03 2017-03-09 ソニー株式会社 映像処理装置、映像処理方法、及び、プログラム
JP2018180496A (ja) * 2017-04-21 2018-11-15 株式会社ｃｕｖｉｅ 動画像処理装置、動画像処理システム、動画像処理方法及び動画像処理プログラム
KR20200112802A (ko) * 2017-09-20 2020-10-05 아마텔러스 인크. 영상 배포 장치, 영상 배포 시스템, 영상 배포 방법 및 영상 배포 프로그램

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140037272A (ko) * 2011-09-29 2014-03-26 뎃페이 에리구치 동화상 표시 장치, 동화상 표시 방법, 프로그램 및 동화상 처리 표시 시스템
WO2017038541A1 (ja) * 2015-09-03 2017-03-09 ソニー株式会社 映像処理装置、映像処理方法、及び、プログラム
JP2018180496A (ja) * 2017-04-21 2018-11-15 株式会社ｃｕｖｉｅ 動画像処理装置、動画像処理システム、動画像処理方法及び動画像処理プログラム
KR20200112802A (ko) * 2017-09-20 2020-10-05 아마텔러스 인크. 영상 배포 장치, 영상 배포 시스템, 영상 배포 방법 및 영상 배포 프로그램

Also Published As

Publication number Publication date
KR102595431B1 (ko) 2023-10-27

Similar Documents

Publication Publication Date Title
US12009014B2 (en) Generation and use of user-selected scenes playlist from distributed digital content
US10043549B2 (en) Systems and methods for generation of composite video
US8265450B2 (en) Capturing and inserting closed captioning data in digital video
US7827491B2 (en) Systems and methods for video editing
Belton If film is dead, what is cinema?
US20080126939A1 (en) System, method and medium playing moving images
CN103455539A (zh) 信息处理设备、信息处理方法、和程序
Jago Adobe Premiere Pro CC classroom in a book
O’Dwyer et al. Samuel Beckett in Virtual Reality: Exploring narrative using free viewpoint video
JP2006033841A (ja) デジタル再生のための画面探索方法及び画面探索装置
EP3949369B1 (en) Method and system for combining video sequences
KR102595431B1 (ko) 실감형 영상 콘텐츠 제작 및 배포 시스템 및 방법
CN100587793C (zh) 视频处理方法、电路和系统
KR101027529B1 (ko) 멀티영상 편집장치 및 재생장치
JP2004128570A (ja) コンテンツ作成実演システム及びコンテンツ作成実演方法
Ronfard et al. OpenKinoAI: A Framework for Intelligent Cinematography and Editing of Live Performances
GB2408867A (en) Authoring an audiovisual product to enable scrolling of image data
KR20140088052A (ko) 복합 컨텐츠 제공 서버
Stalbaum et al. Mapping and review of audiovisual editors and streaming platforms based on collaborative technologies in real time
JP2006324941A (ja) 画像処理装置および方法、並びにプログラム
KR101429171B1 (ko) 복합 컨텐츠 제공 서버
KR20050092540A (ko) 디지털미디어의 실시간 제작 및 관리를 위한 자동화시스템
KR20190046101A (ko) 콘텐츠 관리 시스템 및 이의 콘텐츠 관리 방법
Sachdeva et al. Digital Video Editing
CA3079444A1 (en) Systems and methods for processing image data to coincide in a point of time with audio data

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant