KR20210081104A - 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치 - Google Patents

홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치 Download PDF

Info

Publication number
KR20210081104A
KR20210081104A KR1020190173317A KR20190173317A KR20210081104A KR 20210081104 A KR20210081104 A KR 20210081104A KR 1020190173317 A KR1020190173317 A KR 1020190173317A KR 20190173317 A KR20190173317 A KR 20190173317A KR 20210081104 A KR20210081104 A KR 20210081104A
Authority
KR
South Korea
Prior art keywords
priority
recognition area
image
location information
edge server
Prior art date
Application number
KR1020190173317A
Other languages
English (en)
Inventor
김기혁
김이길
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020190173317A priority Critical patent/KR20210081104A/ko
Publication of KR20210081104A publication Critical patent/KR20210081104A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04—Processes or apparatus for producing holograms
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G03H2001/0088—Adaptation of holography to specific applications for video-holography, i.e. integrating hologram acquisition, transmission and display
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H2226/00—Electro-optic or electronic components relating to digital holography
    • G03H2226/04—Transmission or communication means, e.g. internet protocol

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Holo Graphy (AREA)
  • Processing Or Creating Images (AREA)

Abstract

홀로그램(Hologram) 영상을 제공하는 엣지 서버는 다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체의 위치 정보를 수신하는 위치 정보 수신부, 상기 수신한 적어도 하나의 객체의 위치 정보에 기초하여 상기 적어도 하나의 객체 간의 우선 순위를 결정하는 우선 순위 결정부, 상기 결정된 객체 간의 우선 순위 및 상기 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정하는 투영 행렬 조정부, 상기 조정된 투영 행렬에 기초하여 상기 홀로그램 영상을 렌더링하는 렌더링부 및 상기 렌더링된 홀로그램 영상을 상기 다면 디스플레이 장치로 전송하는 전송부를 포함한다.

Description

홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치{EDGE SERVER AND METHOD FOR PROVIDING HOLOGRAM VIDEO AND MULTIPLE DISPLAY APPARATUS FOR DISPLAYING HOLOGRAM VIDEO}
본 발명은 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치에 관한 것이다.
홀로그램(Hologram)이란 공간에 놓인 물체를 보는 것과 같은 착각을 불러일으키는 영상을 의미한다. 홀로그램은 생성 및 재생 방식에 따라, 아날로그 홀로그램(Analog Hologram), 디지털 홀로그램(Digital Hologram), 슈도 홀로그램(유사 홀로그램, Pseudo Hologram)으로 분류된다.
아날로그 홀로그램은 사진 촬영 기술을 응용하여 광원으로 레이저를 사용하여 촬영한 3차원 영상 이미지를 생성하는 기술을 의미하고, 디지털 홀로그램은 CCD 카메라, CMOS 센서 등의 이미지 센서로 촬영한 3차원 디지털 데이터를 획득하여 홀로그램을 생성하는 기술을 의미하고, 슈도 홀로그램은 완전한 홀로그램은 아니지만 초다시점 입체영상을 촬영하여 홀로그램 효과를 만들어내는 기술과 특수한 반투과형 스크린을 통해 영상을 투영하여 홀로그램 영상 효과를 모방하도록 하는 기술을 의미한다.
최근에는 콘서트장, 전시장 등에서 슈도 홀로그램 기술이 주로 이용되고 있으며, 이러한 슈도 홀로그램 기술과 관련하여 선행기술인 한국공개특허 제 2015-0008727호는 양방향 슈도 홀로그램 장치를 개시하고 있다.
종래에는 가상 카메라의 비대칭 투영 행렬을 변화시키는 슈도 홀로그램 은 특성상 한 명의 관람자에 한해서만 입체 효과를 느끼며 관람할 수 있다는 단점을 가지고 있다. 또한, 슈도 홀로그램을 콘서트장, 전시장 등에서 이용하고자 하는 경우, 슈도 홀로그램 장비를 설치할 때마다 고가의 컴퓨팅 장비를 구비해야 하며, 이로 인해 비용이 많이 소요 된다는 단점을 가지고 있다.
다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 위치 인식 영역 내에 위치한 적어도 하나의 객체의 위치 정보를 이용하여 가상 카메라의 투영 행렬을 조정함으로써, 슈도 홀로그램 영상을 제공하도록 하는 엣지 서버, 방법 및 다면 디스플레이 장치를 제공하고자 한다.
적어도 하나의 객체의 위치 정보에 기초하여 적어도 하나의 객체 간의 우선 순위를 결정하고, 결정된 객체 간의 우선 순위 및 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정함으로써, 복수의 객체가 위치 인식 영역에 위치한 경우에도 슈도 홀로그램 영상을 제공하도록 하는 엣지 서버, 방법 및 다면 디스플레이 장치를 제공하고자 한다.
다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상술한 기술적 과제를 달성하기 위한 수단으로서, 본 발명의 일 실시예는, 다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체의 위치 정보를 수신하는 위치 정보 수신부, 상기 수신한 적어도 하나의 객체의 위치 정보에 기초하여 상기 적어도 하나의 객체 간의 우선 순위를 결정하는 우선 순위 결정부, 상기 결정된 객체 간의 우선 순위 및 상기 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정하는 투영 행렬 조정부, 상기 조정된 투영 행렬에 기초하여 상기 홀로그램을 렌더링하는 렌더링부 및 상기 렌더링된 홀로그램 영상을 상기 다면 디스플레이 장치로 전송하는 전송부를 포함하는 엣지 서버를 제공할 수 있다.
본 발명의 다른 실시예는, 다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체를 인식하는 객체 인식부, 상기 인식된 적어도 하나의 객체의 위치 정보를 엣지 서버로 전송하는 전송부, 상기 엣지 서버로부터 상기 적어도 하나의 객체의 위치 정보에 기초하여 출력할 홀로그램 영상을 수신하는 영상 수신부 및 상기 수신한 홀로그램 영상을 적어도 하나의 면을 통해 출력하는 출력부를 포함하고, 상기 홀로그램 영상은 상기 적어도 하나의 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)이 조정되어 렌더링된 것인 다면 디스플레이 장치를 제공할 수 있다.
본 발명의 또 다른 실시예는, 다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체의 위치 정보를 수신하는 단계, 상기 수신한 적어도 하나의 객체의 위치 정보에 기초하여 상기 적어도 하나의 객체 간의 우선 순위를 결정하는 단계, 상기 결정된 우선 순위 및 상기 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정하는 단계, 상기 조정된 투영 행렬에 기초하여 홀로그램을 렌더링하는 단계 및 상기 렌더링된 홀로그램 영상을 상기 다면 디스플레이 장치로 전송하는 단계를 포함하는 홀로그램 영상 제공 방법을 제공할 수 있다.
상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.
전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 전시장에 설치된 다면 디스플레이 장치의 각 면에 설정된 위치 인식 영역에 위치한 적어도 하나의 객체를 인식하여, 객체의 위치 정보에 기초하여 슈도 홀로그램 영상이 출력되도록 하는 엣지 서버, 방법 및 다면 디스플레이 장치를 제공할 수 있다.
종래에는 슈도 홀로그램 기법의 특성상 한 명의 관람자에 한해서만 입체 효과를 느낄 수 있었지만, 본 발명에서는 다면 디스플레이 장치를 통해 다수의 관람자가 동시에 입체적으로 구성된 슈도 홀로그램 영상을 관람할 수 있도록 하는 엣지 서버, 방법 및 다면 디스플레이 장치를 제공할 수 있다.
슈도 홀로그램 기법이 적용된 영상을 제공하는 경우, 부하가 큰 처리를 엣지 서버에서 수행하도록 함으로써, 고가의 컴퓨팅 장비를 구비하지 않고도, 최소한의 센서 장비, 다면 디스플레이 장치, 네트워크 환경 구성만으로 시스템을 구축하여 비용을 절감시킬 수 있도록 하는 엣지 서버, 방법 및 다면 디스플레이 장치를 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 슈도 홀로그램 영상 제공 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 엣지 서버의 구성도이다.
도 3a 내지 도 3d는 본 발명의 일 실시예에 따른 객체가 위치한 위치 정보에 기초하여 적어도 하나의 면을 이용하여 슈도 홀로그램 영상을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 4a 및 도 4b는 본 발명의 일 실시예에 따른 복수의 객체가 위치한 위치 정보에 기초하여 적어도 하나의 면을 이용하여 슈도 홀로그램 영상을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 5는 본 발명의 일 실시예에 따른 엣지 서버에서 슈도 홀로그램 영상을 제공하는 방법의 순서도이다.
도 6은 본 발명의 일 실시예에 따른 다면 디스플레이 장치의 구성도이다.
도 7은 본 발명의 일 실시예에 따른 다면 디스플레이 장치에서 슈도 홀로그램 영상을 출력하는 방법의 순서도이다.
아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 하나 또는 그 이상의 다른 특징이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다.
본 명세서에 있어서 단말 또는 디바이스가 수행하는 것으로 기술된 동작이나 기능 중 일부는 해당 단말 또는 디바이스와 연결된 서버에서 대신 수행될 수도 있다. 이와 마찬가지로, 서버가 수행하는 것으로 기술된 동작이나 기능 중 일부도 해당 서버와 연결된 단말 또는 디바이스에서 수행될 수도 있다.
이하 첨부된 도면을 참고하여 본 발명의 일 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 슈도 홀로그램 영상 제공 시스템의 구성도이다. 도 1을 참조하면, 슈도 홀로그램 영상 제공 시스템(1)은 엣지 서버(110) 및 다면 디스플레이 장치(120)를 포함할 수 있다. 엣지 서버(110) 및 다면 디스플레이 장치(120)는 슈도 홀로그램 영상 제공 시스템(1)에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다.
도 1의 슈도 홀로그램 영상 제공 시스템(1)의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 엣지 서버(110)는 다면 디스플레이 장치(120)와 동시에 또는 시간 간격을 두고 연결될 수 있다.
네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷 (WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 블루투스 통신, 적외선 통신, 초음파 통신, 가시광 통신(VLC: Visible Light Communication), 라이파이(LiFi) 등이 포함되나 이에 한정되지는 않는다.
홀로그램 영상 제공 시스템(1)은 엣지 컴퓨팅 환경을 이용하여 슈도 홀로그램 영상을 제공할 수 있다. 엣지(Edge)는 가장자리라는 의미로, 중앙 서버가 모든 데이터를 처리하는 클라우드 컴퓨팅과 달리, 네트워크의 가장자리에서 데이터를 처리한다는 의미를 내포하고 있다.
엣지 컴퓨팅은 모든 데이터를 클라우드 서버로 보내서 분석하는 대신, 엣지 게이트웨이에 의해 처리 가능한 데이터는 엣지 게이트웨이를 통해 실시간으로 처리된다. 즉, 엣지 컴퓨팅은 분산된 소형 서버를 통해 실시간으로 데이터를 처리할 수 있다.
이러한 엣지 컴퓨팅은 실시간으로 응답이 필요한 자율주행차, 스마트 팩토리, 가상 현실(AR) 등의 4차 산업에 주로 이용되고 있다.
엣지 서버(110)는 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 기초하여 위치 인식 영역(125) 내에 위치한 적어도 하나의 객체의 위치 정보를 수신할 수 있다.
엣지 서버(110)는 수신한 적어도 하나의 객체의 위치 정보에 기초하여 적어도 하나의 객체 간의 우선 순위를 결정할 수 있다. 예를 들어, 엣지 서버(110)는 위치 정보를 수신한 적어도 하나의 객체를 우선 순위 테이블을 통해 관리하고, 우선 순위 테이블에 기초하여 적어도 하나의 객체 간의 우선 순위를 계산할 수 있다.
엣지 서버(110)는 다면 디스플레이 장치(120)의 적어도 하나의 면을 통해 대기 영상이 출력 중인지 여부에 기초하여 적어도 하나의 객체에 대해 우선권을 부여할 수 있다. 예를 들어, 엣지 서버(110)는 적어도 하나의 면을 통해 대기 영상이 출력 중인 경우, 대기 영상이 출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에 포함된 객체를 신규 객체로 레이블링할 수 있다. 다른 예를 들어, 엣지 서버(110)는 적어도 하나의 면을 통해 대기 영상이 미출력 중인 경우, 대기 영상이 미출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역(125) 내에 다른 객체가 존재하는지를 판단하고, 다른 객체가 존재하는 경우, 위치 인식 영역(125) 내에 포함된 객체를 신규 객체로 레이블링하고, 다른 객체를 기존 객체로 레이블링하고, 기존 객체에게 우선권을 부여할 수 있다. 이 때, 엣지 서버(110)는 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에서 기존 객체의 위치 정보가 소정 시간 동안 수신되지 않은 경우, 기존 객체를 우선 순위 테이블에서 삭제하고, 위치 인식 영역 내에서 다른 기존 객체가 존재하는지를 판단할 수 있다.
엣지 서버(110)는 적어도 하나의 객체의 위치 정보가 동시에 수신된 경우, 다면 디스플레이 장치(120)의 적어도 하나의 면으로부터 가장 근접한 위치에 위치한 어느 하나의 객체에게 우선권을 부여할 수 있다.
엣지 서버(110)는 결정된 객체 간의 우선 순위 및 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정할 수 있다. 예를 들어, 엣지 서버(110)는 우선권이 부여된 기존 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정할 수 있다.
엣지 서버(110)는 조정된 투영 행렬에 기초하여 슈도 홀로그램을 렌더링하고, 렌더링된 슈도 홀로그램 영상을 다면 디스플레이 장치(120)로 전송할 수 있다.
다면 디스플레이 장치(120)는 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 기초하여 위치 인식 영역(125) 내에 위치한 적어도 하나의 객체를 인식할 수 있다. 여기서, 위치 인식 영역(125)은 제 1 면과 근접한 '1번 영역', 제 2 면과 근접한 '2번 영역', 제 3 면과 근접한 '3번 영역', 제 4 면과 근접한 '4번 영역', 제 1 면 및 제 2 면 사이에 위치한 '1&2 영역', 제 2 면 및 제 3 면 사이에 위치한 '2&3 영역', 제 3 면 및 제 4 면 사이에 위치한 '3&4 영역', 제 1 면 및 제 4 면 사이에 위치한 '1&4 영역'으로 구분될 수 있다.
다면 디스플레이 장치(120)는 다면 디스플레이 장치(120)의 각 면에 구비된 위치 인식 센서를 이용하여 적어도 하나의 객체를 인식할 수 있다.
다면 디스플레이 장치(120)는 인식된 적어도 하나의 객체의 위치 정보를 엣지 서버(110)로 전송할 수 있다.
다면 디스플레이 장치(120)는 엣지 서버(110)로부터 적어도 하나의 객체의 위치 정보에 기초하여 출력할 슈도 홀로그램 영상을 수신할 수 있다.
다면 디스플레이 장치(120)는 수신한 슈도 홀로그램 영상을 적어도 하나의 면을 통해 출력할 수 있다.
다면 디스플레이 장치(120)는 위치 인식 영역(125) 내에 적어도 하나의 객체가 인식되지 않은 경우 적어도 하나의 면을 통해 대기 영상을 출력할 수 있다.
도 2는 본 발명의 일 실시예에 따른 엣지 서버의 구성도이다. 도 2를 참조하면, 엣지 서버(110)는 위치 정보 수신부(210), 우선 순위 결정부(220), 투영 행렬 조정부(230), 렌더링부(240) 및 전송부(250)를 포함할 수 있다.
위치 정보 수신부(210)는 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 기초하여 위치 인식 영역(125) 내에 위치한 적어도 하나의 객체의 위치 정보를 수신할 수 있다. 예를 들어, 다면 디스플레이 장치(120)가 4면으로 구성되고, 객체가 4면 중 제 1 면과 인접하게 위치한 경우, 위치 정보 수신부(210)는 4면의 각 면으로부터 설정된 위치 인식 영역(125) 내에서 제 1 면과 위치한 객체의 위치 정보를 수신할 수 있다.
우선 순위 결정부(220)는 수신한 적어도 하나의 객체의 위치 정보에 기초하여 적어도 하나의 객체 간의 우선 순위를 결정할 수 있다. 우선 순위 결정부(220)는 위치 정보를 수신한 적어도 하나의 객체를 우선 순위 테이블을 통해 관리하고, 우선 순위 테이블에 기초하여 적어도 하나의 객체 간의 우선 순위를 계산할 수 있다. 예를 들어, 우선 순위 결정부(220)는 위치 정보를 수신한 적어도 하나의 객체를 우선 순위 테이블을 통해 신규 객체 또는 기존 객체로 구분하고, 구분된 신규 객체 또는 기존 객체에 대해 우선권을 부여하여 객체 간의 우선 순위를 계산할 수 있다.
우선 순위 결정부(220)는 다면 디스플레이 장치(120)의 적어도 하나의 면을 통해 대기 영상이 출력 중인지 여부에 기초하여 적어도 하나의 객체에 대해 우선권을 부여할 수 있다. 여기서, 대기 영상은 슈도 홀로그램 영상이 출력되지 않을 때 출력되는 영상으로, 전시 홍보 영상, 배경 영상, 화면 조정 영상 등을 포함할 수 있다.
예를 들어, 우선 순위 결정부(220)는 적어도 하나의 면을 통해 대기 영상이 출력 중인 경우, 대기 영상이 출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에 포함된 객체를 신규 객체로 레이블링할 수 있다. 여기서, 다면 디스플레이 장치(120)의 제 1 면을 통해 대기 영상이 출력 중인 경우, 제 1 면을 통해 슈도 홀로그램 영상을 관람 중인 객체가 없었음을 의미하므로, 우선 순위 결정부(220)는 제 1 면으로부터 설정된 위치 인식 영역 내에 포함된 객체를 신규 객체로 레이블링할 수 있다.
다른 예를 들어, 우선 순위 결정부(220)는 적어도 하나의 면을 통해 대기 영상이 미출력 중인 경우, 대기 영상이 미출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역(125) 내에 다른 객체가 존재하는지를 판단할 수 있다. 여기서, 다면 디스플레이 장치(120)의 제 1 면을 통해 대기 영상이 미출력 중인 경우, 제 1 면을 통해 슈도 홀로그램 영상을 관람 중인 객체가 존재함을 의미하므로, 우선 순위 결정부(220)는 제 1 면으로부터 설정된 위치 인식 영역 내에 다른 객체가 존재하는지, 얼마나 존재하는지 등을 판단할 수 있다.
우선 순위 결정부(220)는 다른 객체가 존재하는 경우, 위치 인식 영역(125) 내에 포함된 객체를 신규 객체로 레이블링하고, 다른 객체를 기존 객체로 레이블링할 수 있다.
이 때, 우선 순위 결정부(220)는 기존 객체에게 우선권을 부여할 수 있다. 이는, 우선 순위 결정부(220)가 기존 객체에게 우선권을 부여함으로써, 먼저 관람을 시작한 객체에게 슈도 홀로그램 영상을 제공하기 위함이다. 또한, 해당 위치 인식 영역 내를 제 1 객체→제 2 객체→제 3 객체 순으로 진입한 경우, 제 3 객체가 위치 인식 영역에 진입한 시점을 기준으로 제 1 객체를 제 1 기존 객체로 제 2 객체를 제 2 기존 객체로 레이블링하고, 제 3 객체를 신규 객체로 레이블링할 수 있다. 이를 통해, 제 1 기존 객체가 관람 중인 슈도 홀로그램 영상이 종료되면, 신규 객체보다 제 2 기존 객체가 우선적으로 슈도 홀로그램 영상을 관람하도록 하기 위함이다.
우선 순위 결정부(220)는 적어도 하나의 면으로부터 설정된 위치 인식 영역(125) 내에서 기존 객체의 위치 정보가 소정 시간 동안(예를 들어, 3초) 수신되지 않은 경우, 기존 객체를 우선 순위 테이블에서 삭제하고, 위치 인식 영역 내에서 다른 기존 객체가 존재하는지를 판단할 수 있다. 예를 들어, 기존 객체의 위치 정보가 소정 시간 동안 수신되지 않은 경우, 우선 순위 결정부(220)는 기존 객체가 위치 인식 영역을 완전히 벗어난 것으로 판단하여 기존 객체를 우선 순위 테이블에서 삭제할 수 있다. 또한, 우선 순위 결정부(220)는 기존 객체가 관람 중인 슈도 홀로그램 영상의 출력을 중지되도록 하고, 다른 기존 객체가 슈도 홀로그램 영상을 우선적으로 관람하도록 할 수 있다. 이와 달리, 기존 객체의 위치 정보가 위치 인식 영역(125)을 벗어난 후, 소정 시간 내에 기존 객체의 위치 정보가 재수신된 경우, 기존 객체의 우선권이 더 높으므로, 기존 객체가 슈도 홀로그램 영상을 먼저 시청하도록 할 수 있다.
우선 순위 결정부(220)는 적어도 하나의 객체의 위치 정보가 동시에 수신된 경우, 다면 디스플레이 장치(120)의 적어도 하나의 면으로부터 가장 근접한 위치에 위치한 어느 하나의 객체에게 우선권을 부여할 수 있다. 예를 들어, 우선 순위 결정부(220)는 제 1 객체의 위치 정보(제 1 면으로부터 30㎝ 위치) 및 제 2 객체의 위치 정보(제 1 면으로부터 50㎝)가 동시에 수신된 경우, 우선 순위 결정부(220)는 제 1 면으로부터 가장 근접한 위치에 위치한 제 1 객체에게 우선권을 부여할 수 있다.
투영 행렬 조정부(230)는 결정된 객체 간의 우선 순위 및 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정할 수 있다. 예를 들어, 투영 행렬 조정부(230)는 우선권이 부여된 기존 객체의 위치 정보에 기초하여 비대칭 투영 행렬을 계산하고, 이를 가상 카메라에 적용시켜 투영 행렬을 조정할 수 있다.
가상의 카메라는 컴퓨터의 성능의 한계 때문에 실제 세상의 카메라와는 다르게 시야가 제한되어 있다. 따라서, 가상의 카메라 시점에서 세상을 바라볼 수 있게 되면, 바라볼 가상의 3차원의 세상을 모니터와 같은 2차원으로 표현하기 위한 원근법으로 투영 변환이 이용될 수 있다.
렌더링부(240)는 조정된 투영 행렬에 기초하여 슈도 홀로그램을 렌더링할 수 있다.
전송부(250)는 렌더링된 슈도 홀로그램 영상을 다면 디스플레이 장치(120)로 전송할 수 있다. 예를 들어, 전송부(250)는 객체가 다면 디스플레이 장치(120)의 제 1 면과 근접하게 위치한 경우, 제 1 면으로 렌더링된 슈도 홀로그램 영상을 스트리밍할 수 있다.
도 3a 내지 도 3d는 본 발명의 일 실시예에 따른 객체가 위치한 위치 정보에 기초하여 적어도 하나의 면을 이용하여 슈도 홀로그램 영상을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 3a를 참조하면, 제 1 객체(300)가 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 진입하지 않은 경우, 다면 디스플레이 장치(120)는 각 면을 통해 대기 화면을 출력할 수 있다. 여기서, 위치 인식 영역(125)은 제 1 면과 근접한 '1번 영역', 제 2 면과 근접한 '2번 영역', 제 3 면과 근접한 '3번 영역', 제 4 면과 근접한 '4번 영역', 제 1 면 및 제 2 면 사이에 위치한 '1&2 영역', 제 2 면 및 제 3 면 사이에 위치한 '2&3 영역', 제 3 면 및 제 4 면 사이에 위치한 '3&4 영역', 제 1 면 및 제 4 면 사이에 위치한 '1&4 영역'으로 구분될 수 있다.
도 3b를 참조하면, 제 1 객체(300)가 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 진입하여 '1번 영역'에 위치한 경우, 엣지 서버(110)는 다면 디스플레이 장치(120)로부터 제 1 객체(300)의 위치 정보를 수신할 수 있다.
엣지 서버(110)는 제 1 객체(300)가 위치 인식 영역(125) 내에 위치한 위치 정보에 기초하여 제 1 객체(300)를 우선 순위 테이블에 등록하여, 신규 객체로 레이블링할 수 있다. 엣지 서버(110)는 제 1 객체(300)의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정한 후, 슈도 홀로그램을 렌더링할 수 있다.
엣지 서버(110)가 렌더링된 슈도 홀로그램 영상을 다면 디스플레이 장치(120)로 스트리밍하면, 다면 디스플레이 장치(120)는 제 1 객체(300)의 위치와 가장 근접한 제 1 면(310)에 위치한 디스플레이를 통해 슈도 홀로그램 영상(320)을 출력할 수 있다.
도 3c를 참조하면, 제 1 객체(300)가 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 진입하여 '1&2번 영역'에 위치한 경우, 엣지 서버(110)는 다면 디스플레이 장치(120)로부터 제 1 객체(300)의 위치 정보를 수신할 수 있다.
엣지 서버(110)는 제 1 객체(300)가 위치 인식 영역(125) 내에 위치한 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정한 후, 슈도 홀로그램을 렌더링할 수 있다.
엣지 서버(110)가 렌더링된 슈도 홀로그램 영상을 다면 디스플레이 장치(120)로 스트리밍하면, 다면 디스플레이 장치(120)는 제 1 객체(300)의 위치와 가장 근접한 제 1 면(310) 및 제 2 면(311)에 위치한 디스플레이를 통해 슈도 홀로그램 영상(330)을 출력할 수 있다.
도 3d를 참조하면, 제 1 객체(300)가 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)을 벗어난 후, 엣지 서버(110)가 다면 디스플레이 장치(120)로부터 소정의 시간 동안 제 1 객체(300)의 위치 정보를 수신하지 못한 경우, 제 1 객체(300)가 위치 인식 영역(125)을 벗어난 것으로 판단하여, 우선 순위 테이블에서 제 1 객체(300)를 삭제할 수 있다.
도 4a 및 도 4b는 본 발명의 일 실시예에 따른 복수의 객체가 위치한 위치 정보에 기초하여 적어도 하나의 면을 이용하여 슈도 홀로그램 영상을 출력하는 과정을 설명하기 위한 예시적인 도면이다.
도 4a를 참조하면, 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)은 제 1 면과 근접한 '1번 영역', 제 2 면과 근접한 '2번 영역', 제 3 면과 근접한 '3번 영역', 제 4 면과 근접한 '4번 영역', 제 1 면 및 제 2 면 사이에 위치한 '1&2 영역', 제 2 면 및 제 3 면 사이에 위치한 '2&3 영역', 제 3 면 및 제 4 면 사이에 위치한 '3&4 영역', 제 1 면 및 제 4 면 사이에 위치한 '1&4 영역'으로 구분될 수 있다.
다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 진입한 제 1 객체(410)가 '1&4번 영역'에 위치하고, 제 2 객체(420)가 '2&3번 영역'에 위치한 경우, 엣지 서버(110)는 다면 디스플레이 장치(120)로부터 제 1 객체(410) 및 제 2 객체(420)의 위치 정보를 각각 수신할 수 있다.
엣지 서버(110)는 제 1 객체(410) 및 제 2 객체(420)의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정한 후, 슈도 홀로그램을 렌더링할 수 있다.
엣지 서버(110)가 렌더링된 슈도 홀로그램 영상을 다면 디스플레이 장치(120)로 스트리밍하면, 다면 디스플레이 장치(120)는 제 1 객체(410)의 위치와 가장 근접한 제 1 면(401) 및 제 4 면(404)에 위치한 디스플레이를 이용하여 슈도 홀로그램 영상(450)을 출력하고, 다면 디스플레이 장치(120)는 제 2 객체(420)의 위치와 가장 근접한 제 2 면(402) 및 제 3 면(403)에 위치한 디스플레이를 이용하여 슈도 홀로그램 영상(451)을 출력할 수 있다.
도 4b를 참조하면, 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 진입한 제 1 객체(410)가 '4번 영역'에 위치하고, 제 2 객체(420)가 '2번 영역'에 위치하고, 제 3 객체(430)가 '1번 영역'에 위치하고, 제 4 객체(440)가 '3번 영역'에 위치한 경우, 엣지 서버(110)는 다면 디스플레이 장치(120)로부터 제 1 객체(410) 내지 제 4 객체(440)의 위치 정보를 각각 수신할 수 있다.
엣지 서버(110)는 제 1 객체(410) 내지 제 4 객체(440)의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정한 후, 슈도 홀로그램을 렌더링할 수 있다.
엣지 서버(110)가 렌더링된 슈도 홀로그램 영상을 다면 디스플레이 장치(120)로 스트리밍하면, 다면 디스플레이 장치(120)는 제 1 객체(410)의 위치와 가장 근접한 제 4 면(404)에 위치한 디스플레이를 이용하여 슈도 홀로그램 영상(451)을 출력하고, 제 2 객체(420)의 위치와 가장 근접한 제 2 면(402)에 위치한 디스플레이를 이용하여 슈도 홀로그램 영상(452)을 출력하고, 제 3 객체(430)의 위치와 가장 근접한 제 1 면(401)에 위치한 디스플레이를 이용하여 슈도 홀로그램 영상을 출력하고, 제 4 객체(440)의 위치와 가장 근접한 제 4 면(404)에 위치한 디스플레이를 이용하여 슈도 홀로그램 영상을 출력할 수 있다.
도 5는 본 발명의 일 실시예에 따른 엣지 서버에서 슈도 홀로그램 영상을 제공하는 방법의 순서도이다. 도 5에 도시된 엣지 서버(110)에서 슈도 홀로그램 영상을 제공하는 방법은 도 1 내지 도 4b에 도시된 실시예에 따른 슈도 홀로그램 영상 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 4b에 도시된 실시예에 따른 엣지 서버(110)에서 슈도 홀로그램 영상을 제공하는 방법에도 적용된다.
단계 S510에서 엣지 서버(110)는 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역에 기초하여 위치 인식 영역(125) 내에 위치한 적어도 하나의 객체의 위치 정보를 수신할 수 있다.
단계 S520에서 엣지 서버(110)는 수신한 적어도 하나의 객체의 위치 정보에 기초하여 적어도 하나의 객체 간의 우선 순위를 결정할 수 있다.
단계 S530에서 엣지 서버(110)는 결정된 객체 간의 우선 순위 및 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정할 수 있다.
단계 S540에서 엣지 서버(110)는 조정된 투영 행렬에 기초하여 홀로그램 영상을 렌더링할 수 있다.
단계 S550에서 엣지 서버(110)는 렌더링된 홀로그램 영상을 다면 디스플레이 장치(120)로 전송할 수 있다.
상술한 설명에서, 단계 S510 내지 S550은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 6은 본 발명의 일 실시예에 따른 다면 디스플레이 장치의 구성도이다. 도 6을 참조하면, 다면 디스플레이 장치(120)는 객체 인식부(610), 전송부(620), 영상 수신부(630) 및 출력부(640)를 포함할 수 있다.
객체 인식부(610)는 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 기초하여 위치 인식 영역(125) 내에 위치한 적어도 하나의 객체를 인식할 수 있다. 예를 들어, 객체 인식부(610)는 다면 디스플레이 장치(120)의 각 면에 구비된 위치 인식 센서를 이용하여 적어도 하나의 객체를 인식할 수 있다. 여기서, 위치 인식 센서는 객체의 움직임이나 위치를 인식하는 센서로, 지자기 센서, 가속도 센서, 근접 센서 등의 각종 센서와 고도계, 자이로 등의 기능을 포함할 수도 있다.
전송부(620)는 인식된 적어도 하나의 객체의 위치 정보를 엣지 서버(110)로 전송할 수 있다.
객체 인식부(610)는 재입장 안전 장치를 이용하여 소정 시간 동안 내에서 우선권이 부여된 객체를 인식하여, 객체의 관람을 유지시키도록 할 수 있다. 여기서, 우선권이 부여된 객체는 기존 객체일 수 있다. 재입장 안전 장치는 센서의 일시적 오류로 우선권이 부여된 기존 객체의 위치가 위치 인식 영역을 벗어난 것으로 인식되거나, 우선권이 부여된 객체가 특정 면의 위치 인식 영역의 경계선에서 움직이는 경우 등에 대해 해당 우선권이 부여된 객체의 관람을 유지시키도록 할 수 있다.
전송부(620)는 우선권이 부여된 객체의 위치 정보를 엣지 서버(110)로 전송할 수 있다.
영상 수신부(630)는 엣지 서버(110)로부터 적어도 하나의 객체의 위치 정보에 기초하여 출력할 슈도 홀로그램 영상을 수신할 수 있다.
출력부(640)는 수신한 슈도 홀로그램 영상을 적어도 하나의 면을 통해 출력할 수 있다. 예를 들어, 객체가 제 3 면과 근접하게 위치한 경우, 출력부(640)는 제 3 면을 통해 슈도 홀로그램 영상을 출력할 수 있다.
출력부(640)는 위치 인식 영역(125) 내에 적어도 하나의 객체가 인식되지 않은 경우 적어도 하나의 면을 통해 대기 영상을 출력할 수 있다. 예를 들어, 위치 인식 영역(125) 내에 적어도 하나의 객체가 인식되지 않은 경우, 출력부(640)는 현재 아무도 슈도 홀로그램 영상을 관람 중인 객체가 없으므로, 홍보 영상, 배경 영상, 화면 조정 영상 등의 대기 영상을 출력할 수 있다.
도 7은 본 발명의 일 실시예에 따른 다면 디스플레이 장치에서 슈도 홀로그램 영상을 출력하는 방법의 순서도이다. 도 7에 도시된 다면 디스플레이 장치(120)엥서 슈도 홀로그램 영상을 출력하는 방법은 도 1 내지 도 6에 도시된 실시예에 따른 슈도 홀로그램 영상 제공 시스템(1)에 의해 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 6에 도시된 실시예에 따른 다면 디스플레이 장치(120)에서 슈도 홀로그램 영상을 출력하는 방법에도 적용된다.
단계 S710에서 다면 디스플레이 장치(120)는 다면 디스플레이 장치(120)의 각 면으로부터 설정된 위치 인식 영역(125)에 기초하여 위치 인식 영역(125) 내에 위치한 적어도 하나의 객체를 인식할 수 있다.
단계 S720에서 다면 디스플레이 장치(120)는 인식된 적어도 하나의 객체의 위치 정보를 엣지 서버(110)로 전송할 수 있다.
단계 S730에서 다면 디스플레이 장치(120)는 엣지 서버(110)로부터 적어도 하나의 객체의 위치 정보에 기초하여 출력할 홀로그램 영상을 수신할 수 있다.
단계 S740에서 다면 디스플레이 장치(120)는 수신한 홀로그램 영상을 적어도 하나의 면을 통해 출력할 수 있다.
상술한 설명에서, 단계 S710 내지 S740은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.
도 1 내지 도 7을 통해 설명된 엣지 서버에서 홀로그램 영상을 제공하는 방법 및 다면 디스플레이 장치에서 홀로그램 영상을 출력하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램 또는 컴퓨터에 의해 실행 가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 또한, 도 1 내지 도 7을 통해 설명된 엣지 서버에서 슈도 홀로그램 영상을 제공하는 방법 및 다면 디스플레이 장치에서 슈도 홀로그램 영상을 출력하는 방법은 컴퓨터에 의해 실행되는 매체에 저장된 컴퓨터 프로그램의 형태로도 구현될 수 있다.
컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
110: 엣지 서버
120: 다면 디스플레이 장치
210: 위치 정보 수신부
220: 우선 순위 결정부
230: 투영 행렬 조정부
240: 렌더링부
250: 전송부
610: 객체 인식부
620: 전송부
630: 영상 수신부
640: 출력부

Claims (15)

  1. 홀로그램(Hologram) 영상을 제공하는 엣지 서버에 있어서,
    다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체의 위치 정보를 수신하는 위치 정보 수신부;
    상기 수신한 적어도 하나의 객체의 위치 정보에 기초하여 상기 적어도 하나의 객체 간의 우선 순위를 결정하는 우선 순위 결정부;
    상기 결정된 객체 간의 우선 순위 및 상기 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정하는 투영 행렬 조정부;
    상기 조정된 투영 행렬에 기초하여 상기 홀로그램 영상을 렌더링하는 렌더링부; 및
    상기 렌더링된 홀로그램 영상을 상기 다면 디스플레이 장치로 전송하는 전송부
    를 포함하는, 엣지 서버.
  2. 제 1 항에 있어서,
    상기 우선 순위 결정부는 상기 위치 정보를 수신한 적어도 하나의 객체를 우선 순위 테이블을 통해 관리하고, 상기 우선 순위 테이블에 기초하여 상기 적어도 하나의 객체 간의 우선 순위를 계산하는 것인, 엣지 서버.
  3. 제 2 항에 있어서,
    상기 우선 순위 결정부는 상기 다면 디스플레이 장치의 적어도 하나의 면을 통해 대기 영상이 출력 중인지 여부에 기초하여 상기 적어도 하나의 객체에 대해 우선권을 부여하는 것인, 엣지 서버.
  4. 제 3 항에 있어서,
    상기 우선 순위 결정부는 상기 적어도 하나의 면을 통해 상기 대기 영상이 출력 중인 경우, 상기 대기 영상이 출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에 포함된 객체를 신규 객체로 레이블링하는 것인, 엣지 서버.
  5. 제 4 항에 있어서,
    상기 우선 순위 결정부는 상기 적어도 하나의 면을 통해 상기 대기 영상이 미출력 중인 경우, 상기 대기 영상이 미출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에 다른 객체가 존재하는지를 판단하고,
    상기 다른 객체가 존재하는 경우, 상기 위치 인식 영역 내에 포함된 객체를 상기 신규 객체로 레이블링하고, 상기 다른 객체를 기존 객체로 레이블링하고,
    상기 기존 객체에게 우선권을 부여하는 것인, 엣지 서버.
  6. 제 5 항에 있어서,
    상기 투영 행렬 조정부는 상기 우선권이 부여된 기존 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬을 조정하는 것인, 엣지 서버.
  7. 제 6 항에 있어서,
    상기 우선 순위 결정부는 상기 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에서 상기 기존 객체의 위치 정보가 소정 시간 동안 수신되지 않은 경우, 상기 기존 객체를 상기 우선 순위 테이블에서 삭제하고, 상기 위치 인식 영역 내에서 다른 기존 객체가 존재하는지를 판단하는 것인, 엣지 서버.
  8. 제 2 항에 있어서,
    상기 적어도 하나의 객체의 위치 정보가 동시에 수신된 경우,
    상기 우선 순위 결정부는 상기 다면 디스플레이 장치의 상기 적어도 하나의 면으로부터 가장 근접한 위치에 위치한 어느 하나의 객체에게 우선권을 부여하는 것인, 엣지 서버.
  9. 홀로그램 영상을 출력하는 다면 디스플레이 장치에 있어서,
    상기 다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체를 인식하는 객체 인식부;
    상기 인식된 적어도 하나의 객체의 위치 정보를 엣지 서버로 전송하는 전송부;
    상기 엣지 서버로부터 상기 적어도 하나의 객체의 위치 정보에 기초하여 출력할 홀로그램 영상을 수신하는 영상 수신부; 및
    상기 수신한 홀로그램 영상을 적어도 하나의 면을 통해 출력하는 출력부를 포함하고,
    상기 홀로그램 영상은 상기 적어도 하나의 객체의 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)이 조정되어 렌더링된 것인, 다면 디스플레이 장치.
  10. 제 9 항에 있어서,
    상기 객체 인식부는 상기 다면 디스플레이 장치의 상기 각 면에 구비된 위치 인식 센서를 이용하여 상기 적어도 하나의 객체를 인식하는 것인, 다면 디스플레이 장치.
  11. 제 9 항에 있어서,
    상기 출력부는 상기 위치 인식 영역 내에 상기 적어도 하나의 객체가 인식되지 않은 경우 상기 적어도 하나의 면을 통해 대기 영상을 출력하는 것인, 다면 디스플레이 장치.
  12. 제 11 항에 있어서,
    상기 대기 영상이 상기 다면 디스플레이 장치의 적어도 하나의 면을 통해 출력 중인지 여부에 기초하여 상기 적어도 하나의 객체에 대해 우선권이 부여되는 것인, 다면 디스플레이 장치.
  13. 제 12 항에 있어서,
    상기 적어도 하나의 면을 통해 상기 대기 영상이 출력 중인 경우, 상기 대기 영상이 출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에 포함된 객체가 신규 객체로 레이블링되는 것인, 다면 디스플레이 장치.
  14. 제 13 항에 있어서,
    상기 적어도 하나의 면을 통해 상기 대기 영상이 미출력 중인 경우, 상기 대기 영상이 미출력 중인 적어도 하나의 면으로부터 설정된 위치 인식 영역 내에 다른 객체가 존재하는지가 판단되고,
    상기 다른 객체가 존재하는 경우, 상기 위치 인식 영역 내에 포함된 객체가 상기 신규 객체로 레이블링되고, 상기 다른 객체가 기존 객체로 레이블링되고,
    상기 기존 객체에게 우선권이 부여되는 것인, 디스플레이 장치.
  15. 엣지 서버에서 홀로그램 영상을 제공하는 방법에 있어서,
    다면 디스플레이 장치의 각 면으로부터 설정된 위치 인식 영역에 기초하여 상기 위치 인식 영역 내에 위치한 적어도 하나의 객체의 위치 정보를 수신하는 단계;
    상기 수신한 적어도 하나의 객체의 위치 정보에 기초하여 상기 적어도 하나의 객체 간의 우선 순위를 결정하는 단계;
    상기 결정된 우선 순위 및 상기 위치 정보에 기초하여 가상 카메라의 투영 행렬(projection matrix)을 조정하는 단계;
    상기 조정된 투영 행렬에 기초하여 홀로그램 영상을 렌더링하는 단계; 및
    상기 렌더링된 홀로그램 영상을 상기 다면 디스플레이 장치로 전송하는 단계
    를 포함하는, 홀로그램 영상 제공 방법.
KR1020190173317A 2019-12-23 2019-12-23 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치 KR20210081104A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190173317A KR20210081104A (ko) 2019-12-23 2019-12-23 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190173317A KR20210081104A (ko) 2019-12-23 2019-12-23 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치

Publications (1)

Publication Number Publication Date
KR20210081104A true KR20210081104A (ko) 2021-07-01

Family

ID=76860191

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190173317A KR20210081104A (ko) 2019-12-23 2019-12-23 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치

Country Status (1)

Country Link
KR (1) KR20210081104A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022271514A1 (en) 2021-06-22 2022-12-29 Corning Incorporated Phase grating liquid crystal (pglc) device and method of manufacturing the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022271514A1 (en) 2021-06-22 2022-12-29 Corning Incorporated Phase grating liquid crystal (pglc) device and method of manufacturing the same

Similar Documents

Publication Publication Date Title
US10681342B2 (en) Behavioral directional encoding of three-dimensional video
US11025959B2 (en) Probabilistic model to compress images for three-dimensional video
US10491711B2 (en) Adaptive streaming of virtual reality data
US10171792B2 (en) Device and method for three-dimensional video communication
CN106251403B (zh) 一种虚拟立体场景实现的方法、装置和系统
US11024083B2 (en) Server, user terminal device, and control method therefor
EP3560195B1 (en) Stereoscopic omnidirectional imaging
US20150358539A1 (en) Mobile Virtual Reality Camera, Method, And System
CN113038111A (zh) 用于图像捕获和处理的方法、系统和介质
EP3185562A1 (en) Method and apparatus for processing panoramic live video resource
US11037321B2 (en) Determining size of virtual object
KR20100002035A (ko) 3차원 비디오 영상 처리 방법 및 장치
CN110419224A (zh) 用于封装和流传输虚拟现实媒体内容的方法和装置
KR102644833B1 (ko) Vr 스트림의 지연을 보상하는 방법 및 시스템
KR20210036212A (ko) 증강 현실 서비스를 제공하는 서버, 사용자 단말 및 방법
US11415935B2 (en) System and method for holographic communication
KR20210081104A (ko) 홀로그램 영상을 제공하는 엣지 서버, 방법 및 홀로그램 영상을 출력하는 다면 디스플레이 장치
CN112333438B (zh) 立体图像处理方法、装置、设备及计算机可读存储介质
CN112558761A (zh) 一种面向移动端的远程虚拟现实交互系统及交互方法
KR101295976B1 (ko) 3ｄ 화상 회의 시스템
US20200252585A1 (en) Systems, Algorithms, and Designs for See-through Experiences With Wide-Angle Cameras
KR102190388B1 (ko) 복수의 디바이스를 이용하여 증강 현실 객체가 포함된 콘텐츠를 제공하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능한 기록 매체
EP3564905A1 (en) Conversion of a volumetric object in a 3d scene into a simpler representation model
Yuan et al. An overview of interactive immersive services
JPH0522753A (ja) 立体映像表示装置