KR101919428B1 - 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치 - Google Patents

가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치 Download PDF

Info

Publication number
KR101919428B1
KR101919428B1 KR1020160165564A KR20160165564A KR101919428B1 KR 101919428 B1 KR101919428 B1 KR 101919428B1 KR 1020160165564 A KR1020160165564 A KR 1020160165564A KR 20160165564 A KR20160165564 A KR 20160165564A KR 101919428 B1 KR101919428 B1 KR 101919428B1
Authority
KR
South Korea
Prior art keywords
image
virtual reality
partial
terminals
processor
Prior art date
Application number
KR1020160165564A
Other languages
English (en)
Other versions
KR20180065138A (ko
Inventor
김도성
Original Assignee
주식회사 아프리카티비
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 아프리카티비 filed Critical 주식회사 아프리카티비
Priority to KR1020160165564A priority Critical patent/KR101919428B1/ko
Publication of KR20180065138A publication Critical patent/KR20180065138A/ko
Application granted granted Critical
Publication of KR101919428B1 publication Critical patent/KR101919428B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치에 관한 발명이며, 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상을 생성하는 방법은 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신하는 단계, 가상 현실 영상에서 시점에 따른 제1 부분 영상을 결정하는 단계, BJ 영상이 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리하는 단계 및 출력 영상을 복수의 단말기에 제공하는 단계를 포함하고, 가상 현실 촬영 영상과 개인 영상을 하나의 영상으로 통합시킴으로써, 가상 현실 촬영 영상과 개인 영상을 되감기하여 시청할 수 있도록 하는 효과가 있다.

Description

가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치{METHOD AND APPARATUS FOR PROVIDING VIRTUAL REALITY BROADCAST VIDEO}
본 발명은 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치에 관한 것으로서, 보다 상세하게는 가상 현실 촬영 영상과 개인 영상을 하나의 영상으로 통합시키는 영상 처리를 수행하는 방법 및 장치에 관한 것이다.
가상 현실 (Virtual Reality, VR) 이란, 특정한 환경이나 상황을 영상으로 만들어서, 사용자가 마치 실제 상황 및 환경에 존재하는 것과 같이 만들어주는 사용자와 컴퓨터 사이의 인터페이스를 의미한다. 즉, 가상 현실은 경험 중심적인 관점에서 사용자가 가상 현실을 경험하게 해주는 시뮬레이션 환경이라고 할 수 있다. 가상 현실은 사용자가 일상적으로 경험하기 어려운 환경을 인터페이스로 제공하여 사용자가 그 환경에 들어와 있는 것처럼 느끼게 해주고, 환경을 조작할 수 있는 장점이 있다.
이에 따라, 최근 사물 인터넷 (Internet Of Things, IoT) 을 포함하여 다양한 정보 통신 기기들의 기능 또한 발전함으로써 가상 현실 관련 기술이 상용화되고 있다. 구체적으로, 정보 통신 기기들에 포함된 입력 및 출력 장치 기능의 발달, 높은 처리 속도를 가지는 마이크로 프로세서의 상용화, 대용량 저장 장치 크기의 소형화, 그래픽 엔진 기술의 발달 및 보급형 HMD (Head Mounted Display) 장비의 출현으로 가상 현실 관련 기술의 보급이 가속화되고 있다.
더 나아가, 가상 현실 관련 컨텐츠의 공급 및 수요도 증가하고 있다. 특히, 가상 현실 촬영 영상과 개인 촬영 영상을 동시에 제공하는 컨텐츠의 공급 및 수요가 증가하고 있다. 하지만, 가상 현실 촬영 영상과 개인 촬영 영상을 통합하는 장비와 통합한 영상을 송출하는 장비가 각각 나눠져 있어 송출에 지연이 존재한다. 또한, 가상 현실 촬영 영상과 개인 촬영 영상을 통합하더라도 타임 라인의 싱크가 일치하지 않아 되감기 기능을 제공하는데 어려움이 존재한다.
따라서, 가상 현실 촬영 영상과 개인 촬영 영상을 통합하여 지연없이 송출하고, 되감기 기능을 제공할 수 있는 방법에 대한 요구가 존재한다.
[관련기술문헌]
증강 현실 서비스 제공 방법과 그를 위한 서버 및 휴대용 단말기 (등록 특허 10-1343055호)
본 발명이 해결하고자 하는 과제는 가상 현실 촬영 영상과 개인 영상을 하나의 영상으로 통합시킴으로써, 가상 현실 촬영 영상과 개인 영상을 되감기하여 시청할 수 있도록 하는 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치를 제공하는 것이다.
본 발명이 해결하고자 하는 다른 과제는 가상 현실 촬영 영상과 개인 영상을 하나의 영상으로 통합시키는 동시에 시청자에게 송출함으로써, 딜레이없이 사용자에게 영상을 제공할 수 있는 가상 현실 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치를 제공하는 것이다.
본 발명의 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상을 생성하는 방법은 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신하는 단계, 가상 현실 영상에서 시점에 따른 제1 부분 영상을 결정하는 단계, BJ 영상이 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리하는 단계 및 출력 영상을 복수의 단말기에 제공하는 단계를 포함한다.
본 발명의 다른 특징에 따르면, 가상 현실 브로드캐스트 영상을 생성하는 방법은 출력 영상으로 처리하는 단계 이전에, 제1 부분 영상 및 BJ 영상을 나란히 배치하여 중간 영상을 생성하는 단계를 더 포함하고, 출력 영상으로 처리하는 단계는, 중간 영상에 포함된 BJ 영상이 제1 부분 영상의 전면에 배치되도록 출력 영상으로 처리하는 단계를 더 포함할 수 있다.
본 발명의 다른 특징에 따르면, 출력 영상으로 처리하는 단계는, 중간 영상에서 BJ 영상을 크롭핑하는 단계, 크롭핑한 BJ 영상을 제1 부분 영상의 전면에 오도록 중첩하는 단계 및 중첩하여 배치된 BJ 영상 및 제1 부분 영상을 출력 영상으로 렌더링하는 단계를 포함할 수 있다..
본 발명의 또 다른 특징에 따르면, 가상 현실 브로드캐스트 영상을 생성하는 방법은 가상 현실 영상에 대한 변경된 시점을 복수의 단말기 중 하나로부터 수신하는 단계, 가상 현실 영상으로부터 변경된 시점에 대응하는 제2 부분 영상을 결정하는 단계, BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하는 단계 및 후속 출력 영상을 복수의 단말기 중 하나에 제공하는 단계를 더 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 복수의 단말기 중 하나에 제공하는 후속 출력 영상은 단말기 각각마다 상이할 수 있다.
본 발명의 또 다른 특징에 따르면, 복수의 단말기 중 하나에 제공하는 후속 출력 영상에 포함된 제2 부분 영상은, 복수의 단말기로부터 수신한 변경된 시점에 따라 각각 상이할 수 있다.
본 발명의 또 다른 특징에 따르면, 복수의 단말기 중 하나에 제공하는 후속 출력 영상에 포함된 BJ 영상은, 복수의 단말기에서 모두 동일할 수 있다.
본 발명의 또 다른 특징에 따르면, 가상 현실 브로드캐스트 영상을 생성하는 방법은 실시간으로 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상인 경우, 제1 부분 영상을 결정할 때 까지 BJ 영상을 딜레이 시킴으로써 BJ 영상 및 제1 부분 영상을 시간에 대해 동기화하는 단계를 더 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 가상 현실 브로드캐스트 영상을 생성하는 방법은 가상 현실 영상이 데이터베이스로부터 로딩되어 수신되는 경우, 가상 현실 영상에 대한 변경된 시간을 수신하는 단계, 가상 현실 영상으로부터 변경된 시간에 대응하는 제2 부분 영상을 결정하는 단계, BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하는 단계 및 후속 출력 영상을 복수의 단말기에 제공하는 단계를 더 포함할 수 있다.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상을 생성하는 장치는 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신하도록 구성된 통신부 및 통신부와 동작가능하게 연결된프로세서를 포함하고, 프로세서는, 가상 현실 영상에서 시점에 따른 제1 부분 영상을 결정하고, BJ 영상이 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리하고, 통신부를 통해, 출력 영상을 복수의 단말기에 제공하도록 구성된다.
본 발명의 다른 특징에 따르면, 프로세서는, 제1 부분 영상 및 BJ 영상을 나란히 배치하여 중간 영상을 생성하고, 중간 영상에 포함된 BJ 영상이 제1 부분 영상의 전면에 배치되도록 출력 영상으로 처리하도록 더 구성될 수 있다.
본 발명의 또 다른 특징에 따르면, 프로세서는, 중간 영상에서 BJ 영상을 크롭핑하고, 크롭핑한 BJ 영상을 제1 부분 영상의 전면에 오도록 중첩하고, 중첩하여 배치된 BJ 영상 및 제1 부분 영상을 출력 영상으로 렌더링하도록 더 구성될 수 있다.
본 발명의 또 다른 특징에 따르면, 프로세서는, 통신부를 통해 가상 현실 영상에 변경된 시점을 수신하고, 가상 현실 영상으로부터 변경된 시점에 대응하는 제2 부분 영상을 결정하고, BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하고, 통신부를 통해, 후속 출력 영상을 복수의 단말기에 제공하도록 구성될 수 있다.
본 발명의 또 다른 특징에 따르면, 가상 현실 영상이 실시간으로 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상인 경우, 프로세서는, 제1 부분 영상을 결정할 때 까지 BJ 영상을 딜레이 시킴으로써 BJ 영상 및 제1 부분 영상을 시간에 대해 동기화하도록 더 구성될 수 있다.
본 발명의 또 다른 특징에 따르면, 가상 현실 브로드캐스트 영상을 생성하는 장치는, 가상 현실 영상을 데이터베이스에 저장하는 저장부를 더 포함하고, 가상 현실 영상이 데이터베이스로부터 로딩되어 수신되는 경우, 프로세서는, 통신부를 통해 가상 현실 영상에 대한 변경된 시간을 수신하고, 가상 현실 영상으로부터 변경된 시간에 대응하는 제2 부분 영상을 결정하고, BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하고, 통신부를 통해, 후속 출력 영상을 복수의 단말기에 제공하도록 구성될 수 있다.
기타 실시예의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명은 가상 현실 촬영 영상과 개인 영상을 하나의 영상으로 통합시킴으로써, 가상 현실 촬영 영상과 개인 영상을 되감기하여 시청할 수 있도록 하는 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치를 제공할 수 있는 효과가 있다.
본 발명은 가상 현실 촬영 영상과 개인 영상을 하나의 영상으로 통합시키는 동시에 시청자에게 송출함으로써, 딜레이없이 사용자에게 영상을 제공할 수 있는 가상 현실 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치를 제공할 수 있는 효과가 있다.
본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.
도 1은 본 발명의 일 실시예에 따른 가상 현실 방송 촬영 장치, 영상 생성 서버 및 가상 현실 방송 시청 장치의 관계를 설명하기 위한 개략도이다.
도 2a 내지 도 2b는 본 발명의 일 실시예에 따른 영상 생성 서버, 가상 현실 방송 촬영 장치 및 가상 현실 방송 시청 장치의 개략적인 구성을 도시한 블록도이다.
도 3은 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상을 생성하는 방법에 따라 가상 현실 브로드캐스트 영상을 생성하여 제공하는 절차를 도시한 순서도이다.
도 4의 (a) 내지 도 4의 (d) 는 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상 생성 방법의 단계에 따른 가상 현실 브로드캐스트 영상을 도시한 것이다.
도 5는 본 발명의 일 실시예에 따라 변동된 시점에 따라 변경된 출력 영상 화면을 도시한 것이다.
도 6은 본 발명의 다른 실시예에 따라 BJ 영상 및 제1 부분 영상에 대한 시간 동기화에 대한 그래프를 도시한 것이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 발명의 실시예를 설명하기 위한 도면에 개시된 형상, 크기, 비율, 각도, 개수 등은 예시적인 것이므로 본 발명이 도시된 사항에 한정되는 것은 아니다. 또한, 본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다. 본 명세서 상에서 언급된 '포함한다', '갖는다', '이루어진다' 등이 사용되는 경우, '~만'이 사용되지 않는 이상 다른 부분이 추가될 수 있다. 구성요소를 단수로 표현한 경우에 특별히 명시적인 기재 사항이 없는 한 복수를 포함하는 경우를 포함한다.
구성요소를 해석함에 있어서, 별도의 명시적 기재가 없더라도 오차 범위를 포함하는 것으로 해석한다.
비록 제1, 제2 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않는다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있다.
별도로 명시하지 않는 한 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
본 발명의 여러 실시예들의 각각 특징들이 부분적으로 또는 전체적으로 서로 결합 또는 조합 가능하며, 당업자가 충분히 이해할 수 있듯이 기술적으로 다양한 연동 및 구동이 가능하며, 각 실시예들이 서로에 대하여 독립적으로 실시 가능할 수도 있고 연관 관계로 함께 실시 가능할 수도 있다.
도 1은 본 발명의 일 실시예에 따른 가상 현실 방송 촬영 장치, 영상 생성 서버 및 가상 현실 방송 시청 장치의 관계를 설명하기 위한 개략도이다.
도 1을 참조하면, 가상 현실 방송 제공 시스템 (1000) 은 방송 제공자가 제작한 가상 현실 방송에 포함된 가상 현실 영상과 BJ 영상을 영상처리하여 시청자에게 제공하는 시스템이다. 이 때, 가상 현실 방송 제공 시스템 (1000) 은 가상 현실 방송 제작 장치 (100), 영상 생성 서버 (200) 및 가상 현실 방송 시청 장치 (300) 를 포함한다.
가상 현실 방송 촬영 장치 (100) 는 방송 제공자가 시청자에게 제공할 가상 현실 방송을 제작하는 장치이다. 구체적으로, 가상 현실 방송 촬영 장치 (100) 는 가상 현실 영상을 촬영하는 장치와 BJ 영상을 촬영하는 장치를 포함한다. 여기서, 가상 현실 영상이란, 시청자가 영상에 촬영된 장소에 존재하는 것처럼 느낄 수 있도록 360도 시각으로 촬영한 영상을 의미한다. 또한, BJ 영상이란, 가상 현실 영상과 연관된 영상으로, 방송 제작자 예를 들어 BJ (Broadcast Jacky) 가 직접 출연하여 가상 현실 영상에 대해 설명하는 영상을 의미한다. 이 때, 가상 현실 방송 촬영 장치 (100) 는 다양한 전자 장치를 포함한다. 구체적으로, 가상 현실 방송 촬영 장치 (100) 에서 BJ 영상을 촬영하는 촬영 장치는 스마트폰에 내장된 카메라, 데스크탑 또는 랩탑과 연결된 웹캠 (Webcam) 일 수도 있고, 랩탑에 내장된 카메라일 수 있으다. 도 1에서는 데스크탑으로 표현되었으나 이에 제한되지 않는다. 더 나아가, 가상 현실 방송 촬영 장치 (100) 에서 가상 현실 영상을 촬영하는 가상 현실 촬영 장치는 360도 촬영 카메라를 포함할 수 있다.
영상 생성 서버 (200) 는 가상 현실 방송 촬영 장치 (100) 로부터 가상 현실 영상 및 BJ 영상을 각각 수신하고, 영상처리하여 가상 현실 브로드캐스트 영상을 생성함으로써, 생성한 가상 현실 브로드캐스트를 시청자에게 제공하는 서버이다. 따라서, 영상 관리 서버 (200) 는 가상 현실 방송 촬영 장치 (100) 및 가상 현실 방송 시청 장치 (300) 와 통신한다. 예를 들어, 도 1에 도시된 바와 같이, 영상 생성 서버 (200) 는 가상 현실 방송 촬영 장치 (100) 및 가상 현실 방송 시청 장치 (300) 와 네트워크로 연결될 수 있다. 여기서, 영상 생성 서버 (200) 는 코로케이션 서버 (Co-location Server), 클라우드 서버 등일 수 있으나, 이에 제한되지 않는다.
가상 현실 방송 시청 장치 (300) 는 방송 제공자가 가상 현실 방송 제작 장치 (100) 를 통해 제작한 가상 현실 방송을 시청자가 시청할 수 있도록 제공하는 장치이다. 가상 현실 방송 시청 장치 (300) 는 데스크탑, 랩탑, 태블릿 PC 또는 스마트폰을 포함한다. 또한, 가상 방송 시청 장치 (300) 는 스마트폰을 장착할 수 있는 안경 형태의 프레임 장치를 포함할 수 있다.
도 1에서는 설명의 편의를 위해 가상 현실 방송 촬영 장치 (100) 와 가상 현실 방송 시청 장치 (300) 는 1개인 것으로 도시되었으나, 이에 제한되지 않고, 복수의 가상 현실 방송 제작 장치 및 복수의 가상 현실 방송 시청 장치가 영상 관리 서버 (200) 와 통신할 수 있다.
이하에서는, 가상 현실 방송 제공 시스템 (1000) 에서의 가상 현실 방송 브로드캐스트 영상을 생성하는 방법에 대한 보다 상세한 설명을 위해 도 2를 함께 참조한다.
도 2a 내지 도 2b는 본 발명의 일 실시예에 따른 영상 생성 서버, 가상 현실 방송 제작 장치 및 가상 현실 방송 시청 장치의 개략적인 구성을 도시한 블록도이다. 설명의 편의를 위해 도 1을 참조하여 설명한다.
도 2a를 참조하면, 영상 생성 장치 (200) 는 통신부 (210), 프로세서 (220) 및 저장부 (230) 를 포함한다.
영상 생성 장치 (200) 의 통신부 (210) 는 가상 현실 방송 촬영 장치 (100) 중 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신한다. 또한, 프로세서 (220) 는 수신된 영상을 병합하도록 랜더링할 수 있다. 또한, 통신부 (210) 는 가상 현실 영상 및 BJ 영상을 포함하여 영상처리된 출력 영상을 복수의 단말기 즉, 가상 방송 시청 장치 (300) 에 제공한다. 이 때, 통신부 (210) 는 출력 영상에서 가상 현실 영상에 대한 변경된 시점 및 변경된 시간을 수신할 수 있으며, 변경된 시점 및 변경된 시간에 따른 출력 영상인 후속 출력 영상을 제공할 수 있다.
영상 생성 장치 (200) 의 프로세서 (220) 는 가상 현실 영상에서 시점에 따른 제1 부분 영상을 결정한다. 즉, 프로세서 (220) 는 360도 촬영된 가상 현실 영상에서 일부분이며, 가상 현실 영상에서 특정 시점에 대응하는 제1 부분 영상을 결정한다. 더 나아가, 프로세서 (220) 는 BJ 영상이 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리한다. 이 때, 프로세서 (220) 는 출력 영상으로 처리하기 위해, 제1 부분 영상 및 BJ 영상을 나란히 배치하여 중간 영상으로 생성할 수 있다. 따라서, 프로세서 (220) 는 중간 영상에 포함된 BJ 영상을 크롭핑하여, 크롭핑한 BJ 영상을 제1 부분 영상의 전면에 오도록 중첩하고, 충첩하여 배치된 BJ 영상 및 제1 부분 영상을 출력 영상으로 렌더링한다. 또한, 프로세서 (220) 는 가상 현실 영상으로부터 변경된 시점 및 변경된 시간에 대응하는 제2 부분 영상을 결정한다. 더 나아가, 프로세서 (220) 는 BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상을 처리한다.
영상 생성 장치 (200) 의 저장부 (230) 는 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상을 포함하는 영상 데이터를 저장한다. 또한, 저장부 (230) 는 BJ 영상과 시청자에게 제공한 출력 영상 및 후속 출력 영상을 저장할 수도 있다.
도 2b를 참조하면, 가상 현실 방송 촬영 장치 (100) 는 프로세서 (110), 표시부 (120) 및 입력부 (130) 를 포함한다.
가상 현실 방송 촬영 장치 (100) 의 프로세서 (110) 는 영상을 촬영하는데 있어 필요한 영상 처리를 수행한다. 예를 들어, 프로세서 (110) 는 해상도 조절 및 음성 크기 조절 등의 영상 처리를 수행할 수 있다.
가상 현실 방송 촬영 장치 (100) 의 표시부 (120) 는 촬영 영상을 표시한다. 이 때, 표시부 (120) 는 촬영하고 있는 영상을 실시간으로 표시할 수 도 있고, 촬영을 마친 후 촬영된 영상을 표시할 수 있다.
가상 현실 방송 촬영 장치 (100) 의 입력부 (130) 는 영상 촬영에 있어 필요한 입력 신호를 수신한다. 예를 들어, 입력부 (130) 는 타이머 설정, 해상도 설정 등의 신호를 수신할 수 있다.
도 2b를 참조하면, 가상 현실 방송 시청 장치 (300) 는 프로세서 (310), 표시부 (320), 입력부 (330) 및 센서 (340) 를 포함한다.
가상 현실 방송 시청 장치 (300) 의 프로세서 (310) 는 영상 생성 장치 (200) 가 제공한 출력 영상 및 후속 출력 영상을 표시하기 위한 데이터 연산 처리를 수행한다. 예를 들어, 프로세서 (310) 는 가상 현실 방송 시청 장치 (300) 의 스펙에 대응하게 출력 영상 및 후속 출력 영상을 변환하는 연산 처리를 수행할 수 있다.
가상 현실 방송 시청 장치 (300) 의 표시부 (320) 는 영상 생성 장치 (200) 가 제공한 출력 영상 및 후속 출력 영상을 표시한다. 이 때, 표시부 (320) 는 LCD, LED, OLED, PDP, FED 등일 수 있으나, 이에 제한되지 않는다.
가상 현실 방송 제공 장치 (300) 의 입력부 (330) 는 가상 현실 영상에 대한 변경된 시점 및 변경된 시간에 대한 신호를 수신한다. 가상 현실 방송 시청 장치 (300) 의 입력부 (330) 는 마우스, 키보드, 터치 입력 장치 등일 수 있다.
가상 현실 방송 시청 장치 (300) 의 센서 (340) 는 가상 현실 방송 시청 장치 (300) 의 각도 정보를 감지한다. 구체적으로, 가상 현실 방송 시청 장치 (300) 가 스마트 폰을 장착할 수 있는 안경 형태의 프레임 장치를 포함하는 경우, 센서 (340) 는 HMD의 자이로스코프 센서, 위치 센서, 가속도 센서 등일 수 있으며, 변동된 가상 현실 방송 시청 장치 (300) 의 각도 정보를 직접 감지하거나 감지된 센서 정보를 통해 각도 정보를 산출한다. 여기서, 각도 정보란, x축, y축 및 z축을 기초로 기준 각도에서 변동된 각도에 대한 정보를 의미한다. 센서 (340) 가 가상 현실 방송 시청 장치 (300) 의 각도 정보를 감지함으로써, 표시부 (320) 는 각도 정보에 따라 변동된 시점으로 결정된 제1 부분 영상을 표시할 수 있다. 이 때, 각도 정보에 따라 변동된 시점에 대응하는 제1 부분 영상이 프로세서 (220) 에 의해 결정된다.
이하에서는 영상 생성 장치 (200) 에서의 가상 현실 브로드캐스트 영상을 생성하는 방법에 대한 보다 상세한 설명을 위해 도 3을 함께 참조한다.
도 3은 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상을 생성하는 방법에 따라 가상 현실 브로드캐스트 영상을 생성하여 제공하는 절차를 도시한 순서도이다.
도 4의 (a) 내지 도 4의 (d)는 본 발명의 일 실시예에 따른 가상 현실 브로드캐스트 영상 생성 방법의 단계에 따른 가상 현실 브로드캐스트 영상을 도시한 것이다. 이하에서는 영상 생성 장치 (200) 및 가상 현실 브로드캐스트 영상 생성 방법에 대한 보다 상세한 설명을 위해 도 3 및 도 4의 (a) 내지 도 4의 (d)를 함께 참조한다. 설명의 편의를 위해 도 1, 도 2a, 도 2b, 도 4의 (a) 내지 도 4의 (d)의 구성 요소들과 도면 부호를 참조하여 설명한다.
영상 생성 장치 (200) 의 통신부 (210) 는 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신한다 (S310).
도 4의 (a)를 참조하면, 통신부 (210) 는 가상 현실 영상 및 BJ 영상을 각각 독립된 영상으로 수신한다. 이 때, 통신부 (210) 는 실시간으로 가상 현실 영상 및 BJ 영상을 스트리밍하여 수신할 수도 있고, 기촬영된 가상 현실 영상 및 BJ 영상을 수신할 수도 있다. 더 나아가, 통신부 (210) 가 수신한 가상 현실 영상 및 BJ 영상은 저장부 (230) 의 데이터베이스에 저장될 수 있다.
이어서, 영상 생성 장치 (200) 의 프로세서 (220) 는 가상 현실 영상에서 시점에 따른 제1 부분 영상을 결정한다 (S320).
구체적으로, 프로세서 (220) 는 360도의 시점으로 촬영된 가상 현실 영상에서 시점 예를 들어, 40도에 해당하는 시점에 따른 제1 부분 영상을 결정한다. 이 때, 시점은 가상 현실 방송 제공 시스템 (1000) 에서 미리 결정된 초기값일 수 도 있고, 방송 제작자가 결정한 값 또는 시청자가 결정한 값일 수 있다.
또한, 다른 실시예에서, 영상 생성 장치 (200) 의 통신부 (210) 가 실시간으로 가상 현실 촬영 장치로부터 가상 현실 영상을 수신한 경우, 프로세서 (220) 는 가상 현실 영상이 처리될 때까지 예를 들어, 제1 부분 영상이 결정되고 렌더링될 때까지 BJ 영상을 딜레이시켜 BJ 영상 및 제1 부분 영상을 시간에 대해 동기화할 수 있다. 즉, 프로세서 (220) 가 가상 현실 영상에서 제1 부분 영상을 결정하기까지 적어도 n초의 시간이 소요되기 때문에, 프로세서 (220) 는 BJ 영상을 n초만큼 딜레이시켜 BJ 영상 및 제1 부분 영상을 시간에 동기화할 수 있다. 프로세서 (220) 가 제1 부분 영상을 결정하고 처리할 때 걸리는 시간만큼 BJ 영상을 딜레이시켜 BJ 영상 및 제1 부분 영상을 시간에 대해 동기화함으로써, BJ 영상과 제1 부분 영상의 시간에 대한 싱크를 정확히 일치시킬 수 있다. 구체적인 BJ 영상 및 제1 부분 영상에 대한 시간 동기화에 대한 실시예는 도 6을 참조하여 상세히 후술한다. 이 때, 프로세서 (220) 는 통신 장비의 한계, 통신 상태 등으로 불가피한 경우, BJ 영상을 딜레이시켜 BJ 영상 및 제1 부분 영상을 시간에 대해 동기화할 뿐, BJ 영상의 딜레이없이도 BJ 영상 및 제1 부분 영상을 시간에 대해 동기화할 수 있다.
한편, 또 다른 실시예에서, 도 4의 (b) 를 참조하면, 영상 생성 장치 (200) 의 프로세서 (220) 는 제1 부분 영상 및 BJ 영상을 나란히 배치하여 중간 영상을 생성할 수 있다. 여기서, 중간 영상이란, 가상 방송 시청 장치 (300) 에 제공할 출력 영상을 생성하기 위한 중간 단계에 생성하는 영상으로서, 제1 부분 영상 및 BJ 영상을 나란히 배치한 영상이다. 배치되는 방향은 제한되지 않으며, 제1 부분 영상과 BJ 영상은 위아래 또는 좌우로 배치될 수 있다.
이어서, 영상 생성 장치 (200) 의 프로세서 (220) 는 BJ 영상이 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리한다 (S330).
구체적으로, 도 4의 (c)를 참조하면, 프로세서 (220) 는 중간 영상에서 BJ 영상을 크롭핑한다. 여기서, 크롭핑이란, 중간 영상에서 원하는 부분만 즉, BJ 영상만을 선택하여 잘라냄으로써 잘라낸 영상만 추출하는 것을 의미한다. 크롭핑과 동시에 또는 크롭핑 후 잘라진 영상의 크기만큼 전체 영상의 크기가 감소될 수 있다. 이어서, 도 4의 (d)를 참조하면, 프로세서 (220) 는 크롭핑한 BJ 영상을 제1 부분 영상의 전면에 오도록 중첩한다. 이 때, 제1 부분의 영상의 일부는 BJ 영상에 가려질 수 있다. 더 나아가, 프로세서 (220) 는 중첩하여 배치된 BJ 영상 및 제1 부분 영상을 출력 영상으로 렌더링한다. 여기서, 렌더링이란, 일련의 그래픽 처리 과정으로, 평면적으로 보이는 물체에 그림자나 농도의 변화를 주는 과정을 의미한다. 즉, 프로세서 (220) 는 중간 영상에 포함된 BJ 영상이 제1 부분 영상의 전면에 배치되도록 하여 렌더링함으로써, 중간 영상을 최종적으로 출력 영상으로 처리한다.
이어서, 영상 생성 장치 (200) 의 통신부 (210) 는 출력 영상을 복수의 단말기에 제공한다 (S340).
즉, 통신부 (210) 는 생성된 출력 영상을 스마트폰, 데스크탑, 스마트폰을 포함하는 스마트폰을 장착할 수 있는 안경 형태의 프레임 장치인 가상 방송 시청 장치 (300) 에 제공한다.
이어서, 영상 생성 장치 (200) 의 통신부 (210) 는 가상 현실 영상에 대한 변경된 시점을 수신한다 (S350).
구체적으로, 통신부 (210) 는 가상 현실 방송 제작 장치 (100) 의 입력부 (130) 및 가상 현실 방송 시청 장치 (300) 의 입력부 (330) 를 통해 가상 현실 영상에 대한 변경된 시점을 수신한다. 이 때, 드래그 신호를 통해 예를 들어, 오른쪽에서 왼쪽 또는 위에서 아래로 이동하는 가상 현실 영상에 대한 변경된 시점을 수신할 수 있다. 또한, 가상 현실 방송 시청 장치 (300) 가 스마트폰을 장착할 수 있는 안경 형태의 프레임 장치인 경우, 통신부 (210) 는 센서 (340) 가 감지한 변경된 시점을 수신할 수 있다.
이어서, 영상 생성 장치 (200) 의 프로세서 (220) 는 가상 현실 영상으로부터 변경된 시점에 대응하는 제2 부분 영상을 결정한다 (S360).
여기서, 제2 부분 영상이란, 제1 부분 영상에 대응하는 시점에서 변경된 또 다른 시점에 대응하는 영상으로서, 제1 부분 영상과 다른 시점을 갖는 영상이다. 이 때, 제2 부분 영상의 시점은 통신부 (210) 가 수신한 가상 현실 영상에 대한 변경된 시점이다. 따라서, 제2 부분 영상은 복수의 단말기마다 각각 다르게 결정될 수 있다. 즉, 프로세서 (220) 는 복수의 단말기인 가상 현실 방송 제작 장치 (100) 또는 가상 현실 방송 시청 장치 (300) 중 적어도 하나로부터 수신한 변경된 시점에 따라 각각 상이하게 결정할 수 있다.
이어서, 영상 생성 장치 (200) 의 프로세서 (220) 는 BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리한다 (S370).
여기서, 후속 출력 영상이란, BJ 영상과 변경된 시점에 따라 달라진 제2 부분 영상을 포함하는 영상이다. 구체적인 후속 출력 영상 처리 단계는 출력 영상으로 처리하는 단계 (S330) 와 동일하므로 설명은 생략한다.
이어서, 영상 생성 장치 (200) 의 통신부 (210) 는 후속 출력 영상을 복수의 단말기에 제공한다 (S380).
구체적인 후속 출력 영상을 복수의 단말기인 가상 현실 방송 시청 장치 (300) 에 제공하는 단계는 출력 영상을 복수의 단말기에 제공하는 단계 (S340) 와 동일하므로 설명은 생략한다. 따라서, 제공되는 후속 출력 영상에 포함된 제2 부분 영상은 복수의 단말기로부터 수신한 변경된 시점에 따라 각각 상이하다. 또한, 후속 출력 영상에 포함된 BJ 영상은 복수의 단말기마다 각각 동일하다. 즉, 복수의 시청자는 동일한 BJ 영상을 시청하면서, 가상 현실 영상의 시점은 개인이 원하는 시점으로 변경할 수 있다.
다양한 실시예에서, 가상 현실 영상이 저장부 (230) 에 저장된 데이터베이스로부터 로딩되어 수신되는 경우, 통신부 (210) 는 가상 현실 영상에 대한 변경된 시간을 수신할 수 있다. 구체적으로, 통신부 (210) 는 가상 방송 시청 장치 (300) 의 입력부 (330) 로부터 가상 현실 영상의 타임라인에서 변경된 시간을 수신할 수 있다. 이 때, 변경된 시간은 현재 재생되고 있는 시간의 전 시간 또는 후 시간일 수 있다. 이어서, 프로세서 (220) 는 가상 현실 영상으로부터 변경된 시간에 대응하는 제2 부분 영상을 결정한다. 즉, 프로세서 (220) 는 가상 현실 영상의 타임라인에서 수신한 변경된 시간에 따른 제2 부분 영상을 결정한다. 이어서, 프로세서 (220) 는 BJ 영상이 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리한다. 구체적인 후속 출력 영상 처리 단계는 S370과 동일하므로 설명은 생략한다. 따라서, 통신부 (210) 는 후속 출력 영상을 복수의 단말기에 제공한다. 구체적인 복수의 단말기에 후속 출력 영상을 제공하는 단계는 S380과 동일하므로 설명은 생략한다.
이에 따라, 영상 생성 장치 (200) 는 가상 현실 영상과 BJ 영상을 영상처리하여 출력 영상을 생성하고, 변경된 시점 및 변경된 시간을 수신하여 후속 출력 영상을 생성함으로써, 복수의 장치를 통해 영상처리하였던 종래와 달리 하나의 장치에서 영상처리하고, 복수의 장치를 통해 변경된 시점 및 변경된 시간을 적용하였던 종래에 비해 딜레이없이 제공할 수 있다.
도 5는 본 발명의 일 실시예에 따라 변동된 시점에 따라 변경된 출력 영상 화면을 도시한 것이다.
도 5를 참조하면, 안경 형태의 프레임 장치에서의 가상 현실 방송 시청 장치 (300) 의 표시부 (320) 는 스테레오 스코픽 방식에 따라 동일한 출력 영상을 제1 영역 (321) 및 제2 영역 (322) 에 표시한다. 구체적으로, 표시부 (320) 는 두 개의 출력 영상을 각각 좌안 및 우안에 대응하는 제1 영역 (321) 및 제2 영역 (322) 에 표시한다. 제1 영역 (321) 및 제2 영역 (322) 에 각각 출력 영상을 표시함으로써, 시청자는 출력 영상에 대한 입체감을 느낄 수 있다.
도 5를 참조하면, 안경 형태의 프레임 장치에서의 가상 현실 방송 제공 장치 (300) 의 표시부 (320) 는 센서 (340) 로부터 수신한 각도 정보를 적용한 출력 영상을 표시한다. 예를 들어, 센서 (340) 로부터 윗쪽을 향하는 각도 정보를 수신한 경우, 표시부 (320) 는 출력 영상의 시점을 윗쪽으로 변동하여 표시한다. 마찬가지로, 센서 (340) 로부터 아래로 향하는 각도 정보를 수신한 경우, 표시부 (320) 는 출력 영상의 시점을 아래로 변동하여 표시한다. 이 때, 출력 영상에 포함된 가상 현실 영상의 제1 부분 영상에서 시점만 변동되며, BJ 영상의 시점은 변동하지 않는다. 가상 현실 영상의 제1 부분 영상에서 변동되는 시점은 센서 (340) 로부터 수신한 각도 정보를 기초로 미리 결정된 계산식에 따라 결정된다.
도 5에서는 설명의 편의를 위해 가상 현실 방송 제공 장치 (300) 가 안경 형태의 프레임 장치인 것으로 도시되었으나, 이에 제한되지 않고, 스마트폰, 데스크탑, 랩탑 등일 수 있다. 따라서, 마우스, 키보드, 터치 입력 장치를 통해 제1 부분 영상의 시점이 변동될 수 있다.
이에 따라, 가상 현실 방송 제공 장치 (300) 는 가상 현실 영상에 변경된 시점을 반영하여 BJ 영상을 포함한 출력 영상을 제공함으로써, BJ 영상을 시청하면서 가상 현실 영상의 시점을 변경하여 보다 다양한 시점의 출력 영상을 즐길 수 있다.
도 6은 본 발명의 실시예에 따라 BJ 영상 및 제1 부분 영상에 대한 시간 동기화에 대한 그래프를 도시한 것이다. 설명의 편의를 위해 도 1의 구성 요소들과 도면 부호를 참조하여 설명한다.
도 6을 참조하면, 영상 생성 장치 (200) 는 가상 현실 영상이 가상 현실 방송 제작 장치 (100) 에서 촬영된 후 가상 현실 영상에서 제1 부분 영상을 결정하기 까지 즉, 제1 부분 영상으로 프로세싱하여 송출 준비 완료 때 까지 n초의 시간이 걸릴 수 있다. 이 때, BJ 영상은 가상 현실 방송 제작 장치 (100) 에서 촬영된 직후 바로 송출 준비가 완료되지만 송출 준비 완료 후 바로 송출하는 경우, 제1 부분 영상과 BJ 영상은 시간에 대한 싱크가 일치하지 않을 수 있다. 따라서, 영상 생성 장치 (200) 는 BJ 영상의 송출 시간을 제1 부분 영상의 프로세싱 시간만큼 딜레이 시킴으로써 BJ 영상과 제1 부분 영상의 시간을 동기화한다.
이에 따라, 영상 생성 장치 (200) 는 제1 부분 영상을 결정할 때 까지 BJ 영상을 딜레이시켜 시간에 대해 동기화함으로써, 시청자가 되감기하여 시청할 수 있고 또한 제1 부분 영상의 프로세싱으로 인해 지연됨으로써 발생할 수 있는 싱크 오류를 극복할 수 있다.
본 명세서에서, 각 블록 또는 각 단계는 특정된 논리적 기능 (들) 을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또한, 몇 가지 대체 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
본 명세서에 개시된 실시예들과 관련하여 설명된 방법 또는 알고리즘의 단계는 프로세서에 의해 실행되는 하드웨어, 소프트웨어 모듈 또는 그 2 개의 결합으로 직접 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈형 디스크, CD-ROM 또는 당업계에 알려진 임의의 다른 형태의 저장 매체에 상주할 수도 있다. 예시적인 저장 매체는 프로세서에 커플링되며, 그 프로세서는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있다. 다른 방법으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 주문형 집적회로 (ASIC) 내에 상주할 수도 있다. ASIC는 사용자 단말기 내에 상주할 수도 있다. 다른 방법으로, 프로세서 및 저장 매체는 사용자 단말기 내에 개별 컴포넌트로서 상주할 수도 있다.
이상 첨부된 도면을 참조하여 본 발명의 실시예들을 더욱 상세하게 설명하였으나, 본 발명은 반드시 이러한 실시예로 국한되는 것은 아니고, 본 발명의 기술사상을 벗어나지 않는 범위 내에서 다양하게 변형실시될 수 있다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 그러므로, 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 가상 현실 방송 제작 장치
110, 310: 프로세서
120, 320: 표시부
130, 330: 입력부
200: 영상 생성 서버
210: 통신부
220: 프로세서
230: 저장부
300: 가상 현실 방송 시청 장치
321: 제1 영역
322: 제2 영역
340: 센서
1000: 가상 현실 방송 제공 시스템

Claims (15)

  1. 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 상기 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신하는 단계;
    사용자가 착용한 가상 현실 영상 수신 장치의 움직임에 따른 각도 정보를 수신하는 단계;
    상기 수신된 각도 정보에 대응하는 제1 부분 영상을 상기 가상 현실 영상으로부터 결정하는 단계;
    상기 BJ 영상이 상기 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리하는 단계; 및
    상기 출력 영상을 복수의 단말기에 제공하는 단계를 포함하는, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  2. 제1항에 있어서,
    상기 출력 영상으로 처리하는 단계 이전에,
    상기 제1 부분 영상 및 상기 BJ 영상을 나란히 배치하여 중간 영상을 생성하는 단계를 더 포함하고,
    상기 출력 영상으로 처리하는 단계는,
    상기 중간 영상에 포함된 상기 BJ 영상이 상기 제1 부분 영상의 전면에 배치되도록 상기 출력 영상으로 처리하는 단계를 더 포함하는, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  3. 제2항에 있어서,
    상기 출력 영상으로 처리하는 단계는,
    상기 중간 영상에서 상기 BJ 영상을 크롭핑하는 단계;
    크롭핑한 상기 BJ 영상을 상기 제1 부분 영상의 전면에 오도록 중첩하는 단계; 및
    중첩하여 배치된 상기 BJ 영상 및 상기 제1 부분 영상을 상기 출력 영상으로 렌더링하는 단계를 포함하는, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  4. 제1항에 있어서,
    상기 가상 현실 영상에 대한 변경된 각도 정보를 상기 복수의 단말기 중 하나로부터 수신하는 단계; 및
    상기 가상 현실 영상으로부터 상기 변경된 각도 정보에 대응하는 제2 부분 영상을 결정하는 단계;
    상기 BJ 영상이 상기 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하는 단계; 및
    상기 후속 출력 영상을 상기 복수의 단말기 중 하나에 제공하는 단계를 더 포함하는, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  5. 제4항에 있어서,
    상기 복수의 단말기 중 하나에 제공하는 상기 후속 출력 영상은 단말기 각각마다 상이한, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  6. 제5항에 있어서,
    상기 복수의 단말기 중 하나에 제공하는 상기 후속 출력 영상에 포함된 상기 제2 부분 영상은,
    상기 복수의 단말기로부터 수신한 상기 변경된 시점에 따라 각각 상이한, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  7. 제5항에 있어서,
    상기 복수의 단말기 중 하나에 제공하는 상기 후속 출력 영상에 포함된 상기 BJ 영상은, 상기 복수의 단말기에서 모두 동일한, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  8. 제1항에 있어서,
    실시간으로 상기 가상 현실 촬영 장치로부터 촬영된 상기 가상 현실 영상인 경우,
    상기 제1 부분 영상을 결정할 때 까지 상기 BJ 영상을 딜레이 시킴으로써 상기 BJ 영상 및 상기 제1 부분 영상을 시간에 대해 동기화하는 단계를 더 포함하는, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  9. 제1항에 있어서,
    상기 가상 현실 영상이 데이터베이스로부터 로딩되어 수신되는 경우,
    상기 가상 현실 영상에 대한 변경된 시간을 수신하는 단계;
    상기 가상 현실 영상으로부터 상기 변경된 시간에 대응하는 제2 부분 영상을 결정하는 단계;
    상기 BJ 영상이 상기 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하는 단계; 및
    상기 후속 출력 영상을 복수의 단말기에 제공하는 단계를 더 포함하는, 가상 현실 브로드캐스트 영상을 생성하는 방법.
  10. 가상 현실 촬영 장치로부터 촬영된 가상 현실 영상 및 상기 가상 현실 촬영 장치가 아닌 촬영 장치로부터 촬영된 BJ 영상을 수신하도록 구성된 통신부; 및
    상기 통신부와 동작가능하게 연결된 프로세서를 포함하고,
    상기 프로세서는,
    상기 통신부를 통해 사용자가 착용한 가상 현실 영상 수신 장치의 움직임에 따른 각도 정보를 수신하고,
    상기 수신된 각도 정보에 대응하는 제1 부분 영상을 상기 가상 현실 영상으로부터 결정하고,
    상기 BJ 영상이 상기 제1 부분 영상의 전면에 중첩하여 배치되도록 출력 영상으로 처리하고,
    상기 통신부를 통해 상기 출력 영상을 복수의 단말기에 제공하도록 구성된, 가상 현실 브로드캐스트 영상을 생성하는 장치.
  11. 제10항에 있어서,
    상기 프로세서는,
    상기 제1 부분 영상 및 상기 BJ 영상을 나란히 배치하여 중간 영상을 생성하고,
    상기 중간 영상에 포함된 상기 BJ 영상이 상기 제1 부분 영상의 전면에 배치되도록 상기 출력 영상으로 처리하도록 더 구성된, 가상 현실 브로드캐스트 영상을 생성하는 장치.
  12. 제11항에 있어서,
    상기 프로세서는,
    상기 중간 영상에서 상기 BJ 영상을 크롭핑하고,
    크롭핑한 상기 BJ 영상을 상기 제1 부분 영상의 전면에 오도록 중첩하고,
    중첩하여 배치된 상기 BJ 영상 및 상기 제1 부분 영상을 상기 출력 영상으로 렌더링하도록 더 구성된, 가상 현실 브로드캐스트 영상을 생성하는 장치.
  13. 제10항에 있어서,
    상기 프로세서는,
    상기 통신부를 통해 상기 가상 현실 영상에 대한 변경된 각도 정보를 수신하고,
    상기 가상 현실 영상으로부터 상기 변경된 각도 정보에 대응하는 제2 부분 영상을 결정하고,
    상기 BJ 영상이 상기 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하고,
    상기 통신부를 통해, 상기 후속 출력 영상을 복수의 단말기에 제공하도록 더 구성되는, 가상 현실 브로드캐스트 영상을 생성하는 장치.
  14. 제10항에 있어서,
    상기 가상 현실 영상이 실시간으로 상기 가상 현실 촬영 장치로부터 촬영된 상기 가상 현실 영상인 경우,
    상기 프로세서는,
    상기 제1 부분 영상을 결정할 때 까지 상기 BJ 영상을 딜레이 시킴으로써 상기 BJ 영상 및 상기 제1 부분 영상을 시간에 대해 동기화하도록 더 구성되는, 가상 현실 브로드캐스트 영상을 생성하는 장치.
  15. 제10항에 있어서,
    상기 가상 현실 영상을 데이터베이스에 저장하는 저장부를 더 포함하고,
    상기 가상 현실 영상이 상기 데이터베이스로부터 로딩되어 수신되는 경우,
    상기 프로세서는,
    상기 통신부를 통해 상기 가상 현실 영상에 대한 변경된 시간을 수신하고,
    상기 가상 현실 영상으로부터 상기 변경된 시간에 대응하는 제2 부분 영상을 결정하고,
    상기 BJ 영상이 상기 제2 부분 영상의 전면에 배치되도록 후속 출력 영상으로 처리하고,
    상기 통신부를 통해 상기 후속 출력 영상을 복수의 단말기에 제공하도록 더 구성된, 가상 현실 브로드캐스트 영상을 생성하는 장치.
KR1020160165564A 2016-12-07 2016-12-07 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치 KR101919428B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160165564A KR101919428B1 (ko) 2016-12-07 2016-12-07 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160165564A KR101919428B1 (ko) 2016-12-07 2016-12-07 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20180065138A KR20180065138A (ko) 2018-06-18
KR101919428B1 true KR101919428B1 (ko) 2018-11-16

Family

ID=62767936

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160165564A KR101919428B1 (ko) 2016-12-07 2016-12-07 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101919428B1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100948691B1 (ko) * 2008-11-04 2010-03-18 한국전자통신연구원 삼차원 개인 광고 방송 서비스 제공 장치와 방법 및 인터넷 방송 수신 장치

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101577986B1 (ko) * 2015-03-24 2015-12-16 (주)해든브릿지 양방향 가상 현실 구현 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100948691B1 (ko) * 2008-11-04 2010-03-18 한국전자통신연구원 삼차원 개인 광고 방송 서비스 제공 장치와 방법 및 인터넷 방송 수신 장치

Also Published As

Publication number Publication date
KR20180065138A (ko) 2018-06-18

Similar Documents

Publication Publication Date Title
US11301199B2 (en) Multi-viewpoint switched shooting system and method
CN106413829B (zh) 图像编码和显示
US10257492B2 (en) Image encoding and display
EP2979127B1 (en) Display method and system
WO2017086263A1 (ja) 情報処理装置および画像生成方法
EP3051525A1 (en) Display
US20170150212A1 (en) Method and electronic device for adjusting video
JP2010153983A (ja) 投影型映像表示装置および該方法
WO2019098198A1 (ja) 画像生成装置、ヘッドマウントディスプレイ、画像生成システム、画像生成方法、およびプログラム
WO2023003803A1 (en) Virtual reality systems and methods
CN113382224B (zh) 一种基于全息沙盘的交互手柄展示方法及装置
JP6515512B2 (ja) 表示装置、表示装置のキャリブレーション方法、およびキャリブレーションプログラム
US20210058611A1 (en) Multiviewing virtual reality user interface
KR101919428B1 (ko) 가상 현실 브로드캐스트 영상을 생성하는 방법 및 장치
JP6711803B2 (ja) 画像生成装置および画像生成方法
JP7047085B2 (ja) 画像生成装置、画像生成方法、およびプログラム
KR101923640B1 (ko) 가상 현실 방송을 제공하는 방법 및 장치
JP7253302B1 (ja) 情報処理システム、プログラム及び情報処理方法
CN117745981A (zh) 图像生成方法、装置、电子设备和存储介质
CN117729320A (zh) 图像显示方法、设备及存储介质
CN117749964A (zh) 图像处理方法、装置、电子设备和存储介质
WO2013001839A1 (ja) 撮像装置
EP3175372A1 (en) System and method for providing and interacting with coordinated presentations

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant