KR101781900B1 - 홀로그램 영상 제공 시스템 및 방법 - Google Patents

Abstract

홀로그램 영상 제공 시스템 및 방법이 개시된다. 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템은 실시간 사용자 동영상으로 적어도 하나의 원격지에 위치한 원격지 스테이지에 있는 원격 사용자의 움직임을 촬영하는 제1 카메라; 상기 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상이 현지에 위치한 메인 스테이지에서 현지 사용자와 결합되도록 결합 홀로그램 영상을 생성하는 홀로그램 영상 생성 장치; 및 상기 메인 스테이지에 상기 결합 홀로그램 영상을 디스플레이하는 적어도 하나의 홀로그램 프로젝터를 포함한다.

Description

홀로그램 영상 제공 시스템 및 방법 {HOLOGRAM IMAGE PROVIDING SYSTEM AND METHOD}

본 발명의 실시예들은 홀로그램 영상 제공 시스템 및 방법에 관한 것으로, 더욱 상세하게는 적어도 하나의 원격지로부터 촬영된 실시간 사용자 동영상에 대응하는 홀로그램을 결합하여 현지의 스테이지에서 디스플레이하는 시스템 및 방법에 관련된다.

홀로그래피(holography) 방식은 일반적으로 빛의 간섭성을 이용하여 대상을 입체적으로 기록(촬영)하고 입체적인 홀로그램 영상으로 재생한다. 그리고, 재생된 홀로그램 영상이 빛의 간섭성에 의해 거리와 깊이가 구분됨에 따라, 사용자들은 영상을 기존의 영상보다 더욱 실감나게 감상할 수 있다.

최근 들어서, 많은 디스플레이 방식들이 기술적으로 발전할 뿐 아니라 다양한 분야에서 활용되고 있는 추세이다. 특히, 홀로그래피 방식은 사용자들이 영상을 입체감 있게 감상할 수 있음에 따라, 콘서트, 프레젠테이션, 제품 런칭쇼, 놀이동산 등의 많은 분야에서 이용되고 있다.

본 발명의 실시예들은, 원격지에 위치한 원격 사용자가 원격지 스테이지에 위치하면 현지에 위치한 메인 스테이지에서 원격 사용자의 실시간 사용자 동영상에 대응하는 홀로그램 영상을 디스플레이할 수 있는 홀로그램 영상 제공 시스템 및 방법을 제공한다.

특히, 본 발명의 실시예들에 따르면, 복수의 원격지 스테이지들로부터 복수의 실시간 사용자 동영상들이 수신되면 복수의 실시간 사용자 동영상들에 대응하는 복수의 홀로그램 영상을 결합하여 결합 홀로그램 영상을 생성하고, 생성된 결합 홀로그램 영상을 현지에 위치한 메인 스테이지에서 디스플레이할 수 있는 홀로그램 영상 제공 시스템 및 방법을 제공한다.

또한, 본 발명의 실시예들은, 원격 사용자의 움직임에 대응하는 홀로그램 영상과 미리 저장된 동영상 콘텐츠에 대응하는 다른 홀로그램 영상이 다양하게 결합되어 현지의 메인 스테이지에서 디스플레이될 수 있도록 하는 홀로그램 영상 제공 시스템 및 방법을 제공한다.

본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템은 실시간 사용자 동영상으로 적어도 하나의 원격지에 위치한 원격지 스테이지에 있는 원격 사용자의 움직임을 촬영하는 제1 카메라; 상기 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상이 현지에 위치한 메인 스테이지에서 현지 사용자와 결합되도록 결합 홀로그램 영상을 생성하는 홀로그램 영상 생성 장치; 및 상기 메인 스테이지에 상기 결합 홀로그램 영상을 디스플레이하는 적어도 하나의 홀로그램 프로젝터를 포함한다.

나아가, 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템은 실시간 사용자 동영상으로 상기 현지에 위치하고 상기 메인 스테이지와 구별되는 현지 스테이지에 있는 상기 현지 사용자의 움직임을 촬영하는 제2 카메라를 더 포함하고, 상기 홀로그램 영상 생성 장치는 상기 제2 카메라에 의해 촬영된 실시간 사용자 동영상에 대응하는 제2 홀로그램 영상을 생성하고, 상기 제1 홀로그램 영상과 상기 제2 홀로그램 영상이 상기 메인 스테이지에서 결합되도록 상기 결합 홀로그램 영상을 생성할 수 있다.

더 나아가, 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템은 적어도 하나의 동영상 컨텐츠가 미리 저장된 데이터베이스를 더 포함하고, 상기 홀로그램 영상 생성 장치는 상기 제1 홀로그램 영상과 상기 적어도 하나의 동영상 컨텐츠에 대응하는 제3 홀로그램 영상이 상기 메인 스테이지에서 결합되도록 상기 결합 홀로그램 영상을 생성할 수 있다.

상기 홀로그램 영상 생성 장치는 서로 다른 원격지에 위치한 복수의 원격지 스테이지로부터 원격 사용자들 각각에 대한 실시간 사용자 동영상들이 수신되는 경우 상기 수신된 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상들이 상기 메인 스테이지에서 상기 현지 사용자와 결합되도록 상기 결합 홀로그램 영상을 생성할 수 있다.

더 나아가, 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템은 상기 실시간 사용자 동영상을 유선 통신망 또는 무선 통신망을 통해 상기 홀로그램 영상 생성 장치로 전송하는 송신부를 더 포함하고, 상기 송신부는 상기 원격 사용자의 움직임에 대해 계산된 값과 미리 설정된 기준 값에 기초하여 상기 실시간 사용자 동영상을 전송하는 대역폭을 상이하게 조정할 수 있다.

상기 홀로그램 영상 생성 장치는 상기 원격지 스테이지가 복수인 경우 상기 현지 사용자의 입력에 기초하여 상기 복수의 원격지 스테이지들에서 촬영된 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상의 위치, 디스플레이 순서, 디스플레이 방향, 미리 설정된 홀로그램 효과 중 적어도 하나를 제어하고, 상기 적어도 하나가 제어된 상기 결합 홀로그램 영상을 생성할 수 있다.

상기 원격지 스테이지는 상기 원격지에 미리 설치된 물리적인 스테이지, 디지털 사이니지(digital signage), 스마트폰에 설치된 가상 스테이지 중 적어도 하나를 포함할 수 있다.

본 발명의 일 실시예에 따른 홀로그램 영상 제공 방법은 적어도 하나의 원격지에 위치한 카메라를 이용하여 실시간 사용자 동영상으로 원격지 스테이지에 있는 원격 사용자의 움직임을 촬영하는 단계; 상기 실시간 사용자 동영상을 상기 원격지로부터 수신하는 단계; 상기 수신된 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상이 현지에 위치한 메인 스테이지에서 현지 사용자와 결합되도록 결합 홀로그램 영상을 생성하는 단계; 및 적어도 하나의 홀로그램 프로젝터를 이용하여 상기 메인 스테이지에 상기 결합 홀로그램 영상을 디스플레이하는 단계를 포함한다.

나아가, 본 발명의 일 실시예에 따른 홀로그램 영상 제공 방법은 데이터베이스로부터 적어도 하나의 동영상 컨텐츠를 불러오는 단계를 더 포함하고, 상기 결합 홀로그램 영상을 생성하는 단계는 상기 제1 홀로그램 영상과 상기 적어도 하나의 동영상 컨텐츠에 대응하는 제2 홀로그램 영상이 상기 메인 스테이지에서 결합되도록 상기 결합 홀로그램 영상을 생성할 수 있다.

상기 결합 홀로그램 영상을 생성하는 단계는 서로 다른 원격지에 위치한 복수의 원격지 스테이지로부터 원격 사용자들 각각에 대한 실시간 사용자 동영상들이 수신되는 경우 상기 수신된 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상들이 상기 메인 스테이지에서 상기 현지 사용자와 결합되도록 상기 결합 홀로그램 영상을 생성할 수 있다.

더 나아가, 본 발명의 일 실시예에 따른 홀로그램 영상 제공 방법은 상기 원격 사용자의 움직임에 대해 계산된 값과 미리 설정된 기준 값에 기초하여 상기 실시간 사용자 동영상을 전송하는 대역폭을 상이하게 조정하는 단계; 및 상기 원격지에서 상기 실시간 사용자 동영상을 상기 조정된 대역폭으로 유선 통신망 또는 무선 통신망을 통해 상기 현지로 전송하는 단계를 더 포함할 수 있다.

본 발명의 실시예들에 따르면, 현지에 위치한 메인 스테이지에서 원격지에 위치한 사용자 예를 들어, 연예인에 대한 홀로그램 영상을 실시간으로 디스플레이할 수 있다.

또한, 본 발명의 실시예들에 따르면, 원격지에 위치한 원격 사용자의 실시간 사용자 동영상에 대응하는 홀로그램 영상과 미리 저장된 동영상 컨텐츠의 다른 홀로그램 영상을 다양하게 결합하여 현지에 위치한 메인 스테이지에 디스플레이함으로써, 원격 사용자의 홀로그램 영상과 동영상 컨텐츠의 홀로그램 영상을 함께 감상할 수 있다.

또한, 본 발명의 실시예들에 따르면, 현지 사용자의 입력에 기초하여 복수의 원격지에 위치한 원격 사용자들의 실시간 사용자 동영상에 대응하는 복수의 홀로그램 영상들을 다양하게 결합함으로써, 현지에서 메인 스테이지에 디스플레이되는 원격 사용자의 홀로그램 영상을 제어할 수 있다.

도 1은 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템을 위한 홀로그램 영상들의 예를 나타낸 것이다.
도 2는 원격지 스테이지에서 원격 사용자들을 촬영하고 촬영된 실시간 사용자 동영상을 현지로 전송하는 구성에 대한 일 예를 나타낸 것이다.
도 3은 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템을 설명하기 위한 구성을 나타낸 것이다.
도 4는 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템에서 동영상 컨텐츠와 원격 사용자의 홀로그램 영상을 결합한 일 예를 나타낸 것이다.
도 5는 현지 사용자의 홀로그램 영상을 결합한 예를 설명하기 위한 것이다.
도 6은 복수의 원격 사용자에 대한 홀로그램 영상들을 결합한 예를 설명하기 위한 것이다.
도 7은 현지 사용자의 입력에 기초하여 결합 홀로그램 영상을 제어하는 예들을 나타낸 것이다.
도 8은 본 발명의 일 실시예에 따른 홀로그램 영상 제공 방법에 대한 동작 흐름도를 나타낸 것이다.

이하, 본 발명의 실시예들을 첨부된 도면들을 참조하여 설명한다. 아래에서는 한정된 실시예들이 기술되지만, 이러한 실시예들은 본 발명의 예이며, 당업자는 이러한 실시예들을 용이하게 변경할 수 있다.

본 발명의 실시예들은, 원격지에 위치한 원격지 스테이지에서 촬영된 원격 사용자의 실시간 사용자 동영상을 유선 통신망 또는 무선 통신망을 통해 현지에서 수신하고, 수신된 실시간 사용자 동영상에 대응하는 홀로그램 영상을 현지에 위치한 메인 스테이지에 디스플레이하는 것을 그 요지로 한다.

이 때, 본 발명은 다양한 동영상 컨텐츠에 대한 홀로그램 영상을 원격 사용자의 홀로그램 영상과 결합한 결합 홀로그램 영상을 메인 스테이지에 디스플레이할 수도 있고, 복수의 원격 사용자의 홀로그램 영상들을 결합한 결합 홀로그램 영상을 메인 스테이지에 디스플레이할 수도 있다.

나아가, 본 발명은 원격지에서 현지로 실시간 사용자 동영상을 전송할 때 촬영되는 원격 사용자의 움직임 정도를 계산하고, 계산된 움직임 정도에 따라 송신기 또는 송신부의 전송 대역폭을 조정함으로써, 현지의 메인 스테이지 상에 디스플레이되는 홀로그램 영상의 끊김을 최소화할 수 있다.

도 1은 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템을 위한 홀로그램 영상들의 예를 나타낸 것이다.

도 1을 참조하면, 홀로그램 영상 제공 시스템은 원격지에 위치한 원격 사용자를 촬영하기 위한 원격지 스테이지(110)와, 원격지 스테이지(110)에서 촬영된 원격 사용자(111)의 실시간 사용자 동영상에 대응하는 홀로그램 영상(101)을 현지에서 디스플레이하기 위한 메인 스테이지(100)를 제공한다.

비록 도 1의 원격지 스테이지(110)에서 한 명의 원격 사용자를 촬영하는 것으로 도시하였지만, 이에 한정하지 않으면 하나의 원격지 스테이지(110)에서 복수의 원격 사용자들을 촬영할 수도 있으며, 복수의 원격 사용자들이 촬영되는 경우 복수의 원격 사용자들에 대응하는 복수의 홀로그램 영상을 결합한 결합 홀로그램 영상을 현지에 위치한 메인 스테이지(100)에 디스플레이할 수 있다.

도 1에 도시된 현지 사용자(102)는 영상이 아닌 실제 사용자일 수도 있고, 현지 사용자를 촬영한 실시간 사용자 동영상에 대응하는 홀로그램 영상일 수도 있다. 물론, 현지 사용자가 홀로그램 영상인 경우, 본 발명에 따른 시스템은 원격 사용자의 홀로그램 영상과 현지 사용자의 홀로그램 영상을 결합한 결합 홀로그램 영상을 생성하여 메인 스테이지에 디스플레이할 수 있다.

본 발명에서의 원격지 스테이지(110)는 원격지에 무대와 같이 미리 설치된 물리적인 스테이지, 영상 촬영 기능을 구비한 디지털 사이니지(digital signage), 뿐만 아니라 스마트폰에 앱 등으로 설치된 가상 스테이지를 모두 포함할 수 있다. 즉, 본 발명의 실시예들에 따른 시스템은 물리적인 스테이지, 디지털 사이니지, 스마트폰 등에서 촬영된 실시간 사용자 동영상을 통신망을 통해 수신할 수 있으며, 수신된 실시간 사용자 동영상에 대응하는 홀로그램 영상을 생성하여 현지에 위치한 메인 스테이지 상에 디스플레이할 수 있다.

마찬가지로, 본 발명에서의 메인 스테이지(100) 또한 현지에 무대와 같이 미리 설치된 물리적인 스테이지 뿐만 아니라 스마트폰, 타블렛과 같은 모바일 기기에 앱 등으로 설치된 가상 스테이지를 모두 포함할 수 있다. 예를 들어, 본 발명의 실시예들에 따른 시스템의 메인 스테이지가 스마트폰에 설치된 가상 스테이지인 경우 홀로그램 영상 생성 장치에 의해 생성된 결합 홀로그램 영상을 모바일 기기로 제공함으로써, 모바일 기기에서 휴대용 간이 홀로그램박스 예를 들어, 구글 카드 보드지와 같은 것을 이용하여 개개인이 집 또는 다른 장소에서 관람이 가능하다. 이 때, 모바일 기기는 스트리밍 서버를 통해 스트리밍된 결합 홀로그램 영상을 수신할 수 있다.

도 2는 원격지 스테이지에서 원격 사용자들을 촬영하고 촬영된 실시간 사용자 동영상을 현지로 전송하는 구성에 대한 일 예를 나타낸 것이다.

도 2를 참조하면, 원격 사용자(201)가 원격지 스테이지(200)에 위치하면, 카메라 장치(210)는 카메라 모듈(211)을 이용하여 원격 사용자(201)의 동영상을 연속적으로 촬영한다. 그리고, 카메라 장치(210)는 연속적으로 촬영된 동영상을 송신부(220)로 제공하고, 송신부(220)는 카메라 장치(210)로부터 수신된 실시간 사용자 동영상을 유선 통신망 또는 무선 통신망을 통해 현지에 위치한 홀로그램 영상 생성 장치로 전달한다.

이 때, 원격 사용자는 실시예로서, RFID 모듈과 같은 전자태그를 가지고 있을 수 있다. 따라서, 카메라 모듈(211)은 RFID 모듈로부터 입력되는 신호를 기초로 사용자의 식별자를 획득하거나, 또는 촬영 동작의 진행 여부를 사용자로부터 입력받을 수 있다.

나아가, 송신부(220)는 입력되는 실시간 사용자 동영상에 기초하여 촬영된 원격 사용자(201)의 움직임 정도를 계산하고, 계산된 움직임 정도에 기초하여 실시간 사용자 동영상을 현지로 전송하기 위한 대역폭을 조정할 수 있다. 예를 들어, 송신부(220)는 원격 사용자의 움직임 정도에 대해 계산된 값이 미리 설정된 기준 값보다 작은 경우에는 현지 사용자와 대화를 하는 경우와 같이 사용자의 움직임이 적은 것으로 판단하여 미리 설정된 대역폭 범위 예를 들어, 4~8[Mbps]로 실시간 사용자 동영상을 현지로 전송할 수 있고, 원격 사용자의 움직임 정도에 대해 계산된 값이 미리 설정된 기준 값보다 큰 경우에는 원격 사용자가 춤을 추는 경우와 같이 사용자의 움직임이 많은 것으로 판단하여 미리 설정된 대역폭 범위 예를 들어, 6~10[Mbps]로 실시간 사용자 동영상을 현지로 전송할 수 있다.

본 발명의 실시예들에서, 통신망은 이더넷(Ethernet) 망, LTE 망과 같은 이동 통신망 등과 같이 유선으로 동영상을 멀리 전송할 수 있는 유선 통신망 뿐만 아니라 스마트폰과 같은 휴대 단말기에서 촬영한 실시간 사용자 동영상을 무선으로 전송할 수 있는 무선 통신망을 포함할 수 있으며, 영상 전송 방식은 캡쳐 카드(capture card)를 이용한 방식, 스트리밍 방식, 텔레프레즌스(telepresence) 방식 등이 있을 수 있다.

도 3은 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템을 설명하기 위한 구성을 나타낸 것이다.

도 3을 참조하면, 데이터베이스(310)는 적어도 하나의 동영상 컨텐츠가 미리 저장되어 있는데, 본 발명의 실시예에 따른 시스템에서 데이터베이스(310)는 필수 구성 요소가 아닌 선택적인 구성 요소일 수 있다. 즉, 데이터베이스(310)에 저장된 적어도 하나의 동영상 컨텐츠에 대응하는 홀로그램 영상을 사용하고자 하는 경우에는 데이터베이스(310)의 동영상 컨텐츠가 반드시 필요하지만, 원격지 스테이지에 위치한 원격 사용자와 메인 스테이지에 위치한 현지 사용자만을 메인 스테이지 상에 디스플레이하고자 하는 경우에는 동영상 컨텐츠에 대한 구성을 생략할 수 있다.

홀로그램 영상 생성 장치(300)는 원격지 스테이지를 촬영하는 카메라 장치로부터 촬영된 실시간 사용자 동영상을 유선 또는 무선 통신망을 통해 수신하고, 수신된 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상을 생성한다.

이때, 제1 홀로그램 영상은 3차원 영상을 포함할 수 있다. (=> 3차원 영상으로 디스플레이될 수 있다는 것을 의미하며, 3D 안경을 통해 보는 것과는 무관한 영상일 수 있습니다. 간단하게 홀로그램 영상에 대한 종류만을 의미한 것으로 기재한 것입니다.)

물론, 홀로그램 영상 생성 장치(300)는 현지 사용자에 의해 데이터베이스(310)에 저장된 동영상 컨텐츠 중 적어도 하나가 선택된 경우에는 선택된 동영상 컨텐츠에 대응하는 제2 홀로그램 영상을 생성하고, 제1 홀로그램 영상과 제2 홀로그램 영상이 메인 스테이지에서 결합되어 디스플레이되도록 하는 결합 홀로그램 영상을 생성할 수 있다. 여기서, 제2 홀로그램 영상 또한 3차원 영상을 포함할 수 있다.

홀로그램 영상 생성 장치(300)에 의해 생성된 결합 홀로그램 영상은 적어도 하나의 홀로그램 프로젝터(320 내지 340)로 전송되고, 홀로그램 프로젝터(320 내지 340)는 결합 홀로그램 영상을 메인 스테이지에 디스플레이한다.

이 때, 결합 홀로그램 영상이 디스플레이되는 메인 스테이지 상의 위치는 현지 사용자에 의해 결정되거나 미리 설정될 수 있다.

도 4는 본 발명의 일 실시예에 따른 홀로그램 영상 제공 시스템에서 동영상 컨텐츠와 원격 사용자의 홀로그램 영상을 결합한 일 예를 나타낸 것으로, 메인 스테이지 상에 원격 사용자와 두 개의 동영상 컨텐츠에 대응하는 결합 홀로그램 영상을 디스플레이한 예를 나타낸 것이다.

도 4를 참조하면, 원격지에 설치된 카메라 장치(410)는 원격지 스테이지(A)에 위치한 원격 사용자의 움직임을 촬영하고, 그 촬영된 실시간 사용자 동영상을 유선 통신망 또는 무선 통신망을 통해 현지에 위치한 홀로그램 영상 생성 장치(420)로 전달한다.

홀로그램 영상 생성 장치(420)는 현지 사용자(d) 또는 시스템에 의해 데이터베이스(440)에 저장된 동영상 컨텐츠들 중 제1 동영상 컨텐츠(4410)와 제2 동영상 컨텐츠(442)가 선택된 경우 원격지 스테이지로부터 실시간 사용자 동영상을 수신함에 응답하여, 데이터베이스(440)로부터 제1 동영상 컨텐츠와 제2 동영상 컨텐츠(441 및 442)를 획득하고, 획득된 동영상 컨텐츠들(441 및 442) 각각에 대응하는 제1 홀로그램 영상들(b, c)을 생성한다. 그리고, 홀로그램 영상 생성 장치(420)는 원격지 스테이지(A)로부터 수신된 실시간 사용자 동영상에 대응하는 제2 홀로그램 영상(a)을 생성하고, 생성된 제1 홀로그램 영상들(b, c) 및 제2 홀로그램 영상(a)을 하나의 결합 홀로그램 영상으로 결합하여 결합된 결합 홀로그램 영상을 적어도 하나의 홀로그램 프로젝터(430)로 전송한다.

이 때, 홀로그램 영상 생성 장치(420)는 현지 사용자(d)의 입력에 기초하여 제1 홀로그램 영상(b, c)과 제2 홀로그램 영상(a)의 위치, 디스플레이 방향, 시선 방향 등을 제어함으로써, 위치, 방향 등이 제어된 결합 홀로그램 영상을 생성할 수 있다.

홀로그램 프로젝터(430)는 전송된 결합 홀로그램 영상을 현지에 위치한 메인 스테이지(B)에 디스플레이함으로써, 메인 스테이지(B)에는 원격 사용자에 대응하는 홀로그램 영상(a)과, 미리 저장된 동영상 컨텐츠들(441, 442)에 대응하는 다른 홀로그램 영상(b, c)이 결합된 홀로그램 영상이 디스플레이될 수 있다.

따라서, 현지 사용자(d)는 메인 스테이지(B) 상에서 원격지에 위치한 원격 사용자와 홀로그램 영상을 통해 실시간으로 대화 또는 인터뷰 등을 수행할 수 있고, 나아가, 동영상 컨텐츠들에 대응하는 홀로그램 영상을 이용하여 댄스 등을 원격 사용자와 함께 배울 수도 있다.

나아가, 홀로그램 영상 생성 장치(420)는 원격 사용자에 대응되는 식별자를 판독하는 판독기를 더 포함할 수도 있다. 이 경우, 홀로그램 영상 생성 장치(420)는 식별자가 원격 사용자가 원격지 스테이지에 올라갈 자격이 있는 지, 원격 사용자의 움직임을 촬영할 것이 허락되어 있는 지, 또는 홀로그램 영상을 생성할 것이 허락되어 있는 지 중 적어도 하나의 여부를 나타내는 지를 판단하고, 판단 결과에 따라 제1 홀로그램 영상과 제2 홀로그램 영상의 결합 여부를 결정할 수 있다.

이때, 데이터베이스(440)는 원격지 사용자들의 식별자에 대응하여, 원격지 스테이지에 올라갈 자격, 움직임을 촬영할 것에 대한 허락 여부, 또는 홀로그램 영상을 생성할 것에 대한 허락 여부를 미리 설정할 수도 있다.

그리고, 홀로그램 영상 생성 장치(420)는 판독기를 통해 획득되는 식별자를 기초로, 원격 사용자가 원격지 스테이지에 올라갈 자격이 있거나, 원격 사용자의 움직임을 촬영할 것이 허락되어 있거나, 홀로그램 영상이 생성될 것이 허락된 것으로 판단되면, 제1 홀로그램 영상을 생성하고, 제2 홀로그램 영상과 결합할 수 있다.

물론, 홀로그램 영상 생성 장치(420)는 원격지 스테이지(A)로부터 실시간 사용자 동영상 수신 시 원격 사용자의 식별자를 함께 수신함으로써, 상술한 기능을 수행할 수 있다.

한편, 홀로그램 영상 생성 장치(420)는 제1 홀로그램 영상(b, c)과 제2 홀로그램 영상(a)이 메인 스테이지(B) 상의 미리 결정된 적어도 하나의 위치에서 보여지도록 결합 홀로그램 영상을 생성할 수 있다. 이 때, 제1 홀로그램 영상(b, c)과 제2 홀로그램 영상(a)의 위치는 홀로그램 영상 제공 시스템에서 미리 결정될 수도 있지만, 이에 한정하지 않으며 현지에 위치한 현지 사용자의 입력에 기초하여 결정될 수도 있다.

특히, 홀로그램 영상 생성 장치(420)는 제2 홀로그램 영상(a)이 제1 홀로그램 영상(b, c) 속에 포함된 오브젝트들를 방해하지 않도록 자동 또는 수동으로 위치를 결정하여 결합 홀로그램 영상을 생성할 수 있다.

나아가, 홀로그램 영상 생성 장치(420)는 제2 홀로그램 영상(a)의 재생 구간에서 미리 설정된 시점들이 존재하는 경우, 미리 설정된 시점들에서 제2 홀로그램 영상(a)의 위치가 적응적으로 변경되도록 결합 홀로그램 영상을 생성할 수도 있다.

상술한 본 발명의 실시예들에 따른 홀로그램 영상 제공 시스템에서 현지 사용자가 영상이 아닌 메인 스테이지 상에 실제 인물로 서 있는 것으로 설명하였지만, 이에 한정하지 않으며 도 5에 도시된 바와 같이 현지 사용자를 촬영한 실시간 사용자 동영상에 대응하는 제3 홀로그램 영상을 메인 스테이지에 디스플레이되도록 할 수도 있다.

예컨대, 도 5에 도시된 바와 같이 본 발명의 실시예에 따른 시스템은 현지에 현지 스테이지(520)를 구비하고, 현지에 위치한 현지 사용자(521) 예를 들어, MC가 현지 스테이지(520) 상에 위치하면 카메라 장치가 현지 스테이지(520)에 위치한 현지 사용자(521)의 움직임을 촬영함으로써, 촬영된 현지 사용자(521)의 실시간 사용자 동영상을 홀로그램 영상 생성 장치로 전달한다.

홀로그램 영상 생성 장치는 원격지 스테이지(530)에서 촬영된 원격 사용자(531)의 실시간 사용자 동영상과 현지 스테이지(520)에서 촬영된 현지 사용자(521)의 실시간 사용자 동영상을 수신하고, 수신된 원격 사용자(531)의 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상(511a)과 현지 사용자(521)의 실시간 사용자 동영상에 대응하는 제2 홀로그램 영상(511b)을 결합한 결합 홀로그램 영상(511)을 생성하여 홀로그램 프로젝터로 전달한다. 홀로그램 프로젝터는 원격 사용자의 제1 홀로그램 영상(511a)과 현지 사용자의 제2 홀로그램 영상(511b)이 결합된 결합 홀로그램 영상(511)을 메인 스테이지(510)에 디스플레이한다.

물론, 현지 사용자(521)는 결합 홀로그램 영상(510)에 포함된 제1 홀로그램 영상(511a)과 제2 홀로그램 영상(511b)의 디스플레이 위치, 디스플레이 방향, 얼굴 방향, 홀로그램 디스플레이 순서 등을 사용자 입력에 기초하여 제어할 수 있다.

또한, 본 발명의 실시예에 따른 홀로그램 영상 제공 시스템은 원격지 스테이지를 하나가 아닌 서로 다른 지역에 각각 설치된 경우에도 적용할 수 있다. 즉, 본 발명의 시스템은 복수의 원격지 스테이지들이 구성된 경우에도 적용할 수 있으며, 이에 대해 도 6을 참조하여 설명한다.

예컨대, 본 발명의 시스템은 도 6에 도시된 바와 같이, 원격지 스테이지(620, 630, 640)가 제1 원격지(예를 들어, 서울), 제2 원격지(예를 들어, 부산), 제3 원격지(예를 들어, 대전)에 있고, 메인 스테이지(610)가 현지(예를 들어, 제주도)에 있는 경우 제1 원격지의 제1 사용자(621)에 대한 홀로그램 영상(611a), 제2 원격지의 제2 사용자(631)에 대한 홀로그램 영상(611b), 제3 원격지의 제3 사용자(641)에 대한 홀로그램 영상(611c)을 결합한 결합 홀로그램 영상(611)을 현지의 메인 스테이지(610)에 디스플레이할 수 있다.

이 때, 제1 사용자(621)의 홀로그램 영상(611a), 제2 사용자(631)의 홀로그램 영상(611b), 제3 사용자(641)의 홀로그램 영상(611c)을 모두 결합하여 결합 홀로그램 영상을 생성할 수도 있고, 제1 사용자(621)의 홀로그램 영상(611a), 제2 사용자(631)의 홀로그램 영상(611b), 제3 사용자(641)의 홀로그램 영상(611c) 중 두 개의 홀로그램 영상을 결합하여 결합 홀로그램 영상을 생성할 수도 있다. 물론, 필요에 따라 어느 하나의 홀로그램 영상만을 결합 홀로그램 영상으로 생성할 수도 있다.

그리고, 상술한 결합 홀로그램 영상에 포함되는 홀로그램 영상은 현지 사용자(612) 예를 들어, 메인 MC에 의해 선택될 수 있으며, 결합 홀로그램 영상에 포함된 적어도 하나의 홀로그램 영상에 대한 위치, 디스플레이 방향, 시선 방향, 디스플레이 순서 등 또한 현지 사용자의 입력에 기초하여 제어될 수 있다.

예를 들어, 현지 사용자의 입력에 기초하여 도 7a에 도시된 바와 같이 제2 사용자의 홀로그램 영상(611b)과 제3 사용자의 홀로그램 영상(611c)의 위치를 서로 바꿔서 디스플레이할 수도 있고, 도 7b에 도시된 바와 같이, 제2 사용자의 홀로그램 영상(611b)에 대한 시선 위치를 오른쪽에서 왼쪽으로 변경하여 디스플레이할 수도 있으며, 도 7c에 도시된 바와 같이, 메인 스테이지 상에 제1 사용자의 홀로그램 영상(611a)과 제2 사용자의 홀로그램 영상(611b)만을 디스플레이할 수도 있다.

나아가, 본 발명에 따른 시스템은 결합 홀로그램 영상에 특정 효과 예를 들어, 밝기, 음향, 주변 효과 등을 추가적으로 결합할 수 있으며, 이 또한 현지 사용자 또는 관리자에 의해 선택적으로 제어될 수 있다.

도 8은 본 발명의 일 실시예에 따른 홀로그램 영상 제공 방법에 대한 동작 흐름도를 나타낸 것으로, 상기 도 1 내지 도 7에 도시된 시스템에서의 동작 흐름도를 나타낸 것이다.

도 8을 참조하면, 본 발명의 일 실시예에 따른 홀로그램 영상 제공 방법은 적어도 하나의 원격지에 위치한 카메라를 이용하여 실시간 사용자 동영상으로 원격지 스테이지에 있는 원격 사용자의 움직임을 촬영하고, 촬영된 원격 사용자의 실시간 사용자 동영상을 유선 통신망 또는 무선 통신망을 통해 현지로 전송한다(S810).

이 때, 단계 S810은 원격 사용자의 실시간 사용자 동영상을 현지로 전송하기 전에, 원격 사용자의 움직임에 대해 계산된 값과 미리 설정된 기준 값에 기초하여 실시간 사용자 동영상을 전송하는 대역폭을 조정하고, 원격 사용자의 실시간 사용자 동영상을 조정된 대역폭으로 유선 통신망 또는 무선 통신망을 통해 현지로 전송할 수 있다.

단계 S810에 의해 원격 사용자의 실시간 사용자 동영상이 전송되면 현지에서 즉, 상술한 홀로그램 영상 생성 장치에서 원격 사용자에 대한 실시간 사용자 동영상을 수신하고, 실시간 사용자 동영상에 대응하는 홀로그램 영상을 생성하며, 생성된 홀로그램 영상을 포함하는 결합 홀로그램 영상을 생성한다(S820, S830).

여기서, 결합 홀로그램 영상은 원격 사용자의 홀로그램 영상일 수도 있고, 원격 사용자의 홀로그램 영상과 적어도 하나 이상의 동영상 컨텐츠에 대응하는 홀로그램 영상이 결합된 홀로그램 영상일 수도 있으며, 복수의 원격 사용자들의 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상들이 결합된 홀로그램 영상일 수도 있다. 물론, 현지 사용자에 대한 실시간 사용자 동영상이 촬영되고, 현지 사용자의 홀로그램 영상이 생성되는 경우 결합 홀로그램 영상은 원격 사용자의 홀로그램 영상과 현지 사용자의 홀로그램 영상이 결합된 홀로그램 영상일 수도 있다.

단계 S830는 적어도 하나 이상의 동영상 컨텐츠를 저장하는 데이터베이스로부터 적어도 하나의 동영상 컨텐츠를 불러옴으로써, 원격 사용자의 홀로그램 영상과 불러온 적어도 하나의 동영상 컨텐츠에 대응하는 홀로그램 영상이 결합된 결합 홀로그램 영상을 생성할 수 있다.

단계 S830에 의해 결합 홀로그램 영상이 생성되면, 생성된 결합 홀로그램 영상을 적어도 하나의 홀로그램 프로젝터를 이용하여 현지에 위치 또는 설치된 메인 스테이지에 디스플레이한다(S840).

상술한 방법에 대한 동작 이외의 본 발명의 방법에 대한 동작은 상술한 도 1 내지 도 7의 동작을 모두 포함할 수 있다.

이상에서 설명된 시스템 또는 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 시스템, 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.

실시예들에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (12)

1. 실시간 사용자 동영상으로 적어도 하나의 원격지에 위치한 원격지 스테이지에 있는 원격 사용자의 움직임을 촬영하는 제1 카메라;
   상기 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상이 현지에 위치한 메인 스테이지에서 현지 사용자와 결합되도록 결합 홀로그램 영상을 생성하는 홀로그램 영상 생성 장치; 및
   상기 메인 스테이지에 상기 결합 홀로그램 영상을 디스플레이하는 적어도 하나의 홀로그램 프로젝터
   를 포함하고,
   상기 실시간 사용자 동영상을 유선 통신망 또는 무선 통신망을 통해 상기 홀로그램 영상 생성 장치로 전송하는 송신부
   를 더 포함하며,
   상기 송신부는
   상기 실시간 사용자 동영상에 기초하여 상기 원격 사용자의 움직임 정도를 계산하고, 상기 계산된 움직임 정도에 대한 값과 미리 설정된 기준 값에 기초하여 상기 실시간 사용자 동영상을 전송하는 대역폭을 상이하게 조정하며,
   상기 홀로그램 영상 생성 장치는
   서로 다른 원격지에 위치한 복수의 원격지 스테이지로부터 원격 사용자들 각각에 대한 실시간 사용자 동영상들이 수신되는 경우 상기 수신된 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상들이 상기 메인 스테이지에서 상기 현지 사용자와 결합되도록 상기 결합 홀로그램 영상을 생성하는 홀로그램 영상 제공 시스템.
   
2. 제1항에 있어서,
   실시간 사용자 동영상으로 상기 현지에 위치하고 상기 메인 스테이지와 구별되는 현지 스테이지에 있는 상기 현지 사용자의 움직임을 촬영하는 제2 카메라
   를 더 포함하고,
   상기 홀로그램 영상 생성 장치는
   상기 제2 카메라에 의해 촬영된 실시간 사용자 동영상에 대응하는 제2 홀로그램 영상을 생성하고, 상기 제1 홀로그램 영상과 상기 제2 홀로그램 영상이 상기 메인 스테이지에서 결합되도록 상기 결합 홀로그램 영상을 생성하는 것을 특징으로 하는 홀로그램 영상 제공 시스템.
   
3. 제1항에 있어서,
   적어도 하나의 동영상 컨텐츠가 미리 저장된 데이터베이스
   를 더 포함하고,
   상기 홀로그램 영상 생성 장치는
   상기 제1 홀로그램 영상과 상기 적어도 하나의 동영상 컨텐츠에 대응하는 제3 홀로그램 영상이 상기 메인 스테이지에서 결합되도록 상기 결합 홀로그램 영상을 생성하는 것을 특징으로 하는 홀로그램 영상 제공 시스템.
   
4. 삭제
5. 삭제
6. 제1항에 있어서,
   상기 홀로그램 영상 생성 장치는
   상기 원격지 스테이지가 복수인 경우 상기 현지 사용자의 입력에 기초하여 상기 복수의 원격지 스테이지들에서 촬영된 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상의 위치, 디스플레이 순서, 디스플레이 방향, 미리 설정된 홀로그램 효과 중 적어도 하나를 제어하고, 상기 적어도 하나가 제어된 상기 결합 홀로그램 영상을 생성하는 것을 특징으로 하는 홀로그램 영상 제공 시스템.
   
7. 제1항에 있어서,
   상기 원격지 스테이지는
   상기 원격지에 미리 설치된 물리적인 스테이지, 디지털 사이니지(digital signage), 스마트폰에 설치된 가상 스테이지 중 적어도 하나를 포함하는 것을 특징으로 하는 홀로그램 영상 제공 시스템.
   
8. 적어도 하나의 원격지에 위치한 카메라를 이용하여 실시간 사용자 동영상으로 원격지 스테이지에 있는 원격 사용자의 움직임을 촬영하는 단계;
   상기 실시간 사용자 동영상을 상기 원격지로부터 수신하는 단계;
   상기 수신된 실시간 사용자 동영상에 대응하는 제1 홀로그램 영상이 현지에 위치한 메인 스테이지에서 현지 사용자와 결합되도록 결합 홀로그램 영상을 생성하는 단계; 및
   적어도 하나의 홀로그램 프로젝터를 이용하여 상기 메인 스테이지에 상기 결합 홀로그램 영상을 디스플레이하는 단계
   를 포함하고,
   상기 실시간 사용자 동영상에 기초하여 상기 원격 사용자의 움직임 정도를 계산하고, 상기 계산된 움직임 정도에 대한 값과 미리 설정된 기준 값에 기초하여 상기 실시간 사용자 동영상을 전송하는 대역폭을 상이하게 조정하는 단계; 및
   상기 원격지에서 상기 실시간 사용자 동영상을 상기 조정된 대역폭으로 유선 통신망 또는 무선 통신망을 통해 상기 현지로 전송하는 단계
   를 더 포함하며,
   상기 결합 홀로그램 영상을 생성하는 단계는
   서로 다른 원격지에 위치한 복수의 원격지 스테이지로부터 원격 사용자들 각각에 대한 실시간 사용자 동영상들이 수신되는 경우 상기 수신된 실시간 사용자 동영상들 각각에 대응하는 홀로그램 영상들이 상기 메인 스테이지에서 상기 현지 사용자와 결합되도록 상기 결합 홀로그램 영상을 생성하는 홀로그램 영상 제공 방법.
   
9. 제8항에 있어서,
   데이터베이스로부터 적어도 하나의 동영상 컨텐츠를 불러오는 단계
   를 더 포함하고,
   상기 결합 홀로그램 영상을 생성하는 단계는
   상기 제1 홀로그램 영상과 상기 적어도 하나의 동영상 컨텐츠에 대응하는 제2 홀로그램 영상이 상기 메인 스테이지에서 결합되도록 상기 결합 홀로그램 영상을 생성하는 것을 특징으로 하는 홀로그램 영상 제공 방법.
   
10. 삭제
11. 삭제
12. 제8항 내지 제9항 중 어느 한 항의 방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
    

Images