KR102098225B1 - 전방위 영상 표시 장치 및 그 표시 방법 - Google Patents

전방위 영상 표시 장치 및 그 표시 방법 Download PDF

Info

Publication number
KR102098225B1
KR102098225B1 KR1020160140786A KR20160140786A KR102098225B1 KR 102098225 B1 KR102098225 B1 KR 102098225B1 KR 1020160140786 A KR1020160140786 A KR 1020160140786A KR 20160140786 A KR20160140786 A KR 20160140786A KR 102098225 B1 KR102098225 B1 KR 102098225B1
Authority
KR
South Korea
Prior art keywords
event
image data
omnidirectional
area
display device
Prior art date
Application number
KR1020160140786A
Other languages
English (en)
Other versions
KR20180046044A (ko
Inventor
이광국
임재균
김용성
강봉주
Original Assignee
에스케이텔레콤 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이텔레콤 주식회사 filed Critical 에스케이텔레콤 주식회사
Priority to KR1020160140786A priority Critical patent/KR102098225B1/ko
Publication of KR20180046044A publication Critical patent/KR20180046044A/ko
Application granted granted Critical
Publication of KR102098225B1 publication Critical patent/KR102098225B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Abstract

본 발명은 전방위 영상 표시 장치 및 그 표시 방법에 관한 것이다. 개시된 전방위 영상 표시 장치의 영상 표시 방법은, 전방위 영상 중에서 일부 영역에 대응하는 일부 영상 데이터를 전방위 영상 표시 장치의 제1 영역에 표시하는 단계와, 전방위 영상 중 일부 영역을 제외한 잔여 영역 내에서 소정의 이벤트가 검출된 경우에, 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터와 이벤트에 대한 정보 중 적어도 하나를 전방위 영상 표시 장치의 제1 영역 또는 제2 영역에 표시하는 단계를 포함한다. 본 발명의 실시예에 따르면 전방위 영상 중에서 사용자가 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트를 사용자가 용이하게 인지할 수 있도록 표시하여 주기 때문에 사용자가 자신이 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트에 대한 인지성이 향상되며, 이벤트가 발생한 해당 영역의 영상을 그만큼 쉽게 감상할 수 있다.

Description

전방위 영상 표시 장치 및 그 표시 방법{OMNIDIRECTIONAL IMAGE DISPLAY APPARATUS AND METHOD}
본 발명은 전방위 영상 표시에 관한 것으로, 더욱 상세하게는 전방위 영상 중에서 사용자가 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트를 알려주는 전방위 영상 표시 장치 및 그 표시 방법에 관한 것이다.
주지하는 바와 같이, 전방위 영상은 여러 대의 카메라를 이용하여 360도 전방위 영상을 동시에 촬영하고, 촬영된 영상을 심리스(seamless)하게 합성하여, 사용자가 시점을 자유롭게 변경하여 감상할 수 있도록 360도 전방위를 확인할 수 있는 넓은 시야각을 제공한다. 이러한 전방위 영상은 자연 경관, 건축물, 부동산, 시설물의 보안감시, 지도, 가상 여행 등 다양한 분야에 적용될 수 있다.
이러한 전방위 영상 서비스는 특정 장소에서 촬영된 360도 영상을 인터넷 등과 같은 통신망을 이용하여 원격지에서 화면으로 출력하여 원격지에 위치한 사용자가 볼 수 있도록 할 수 있다.
이렇게 화면으로 출력된 전방위 영상에서는 사용자를 둘러싸고 있는 가상의 구(sphere)가 존재하며, 이 중 사용자가 보고 있는 일부분만이 스크린 또는 VR(Virtual Reality) 장치 등을 통하여 표시된다.
예컨대, 영상이 스크린에 표시되는 경우에 사용자는 마우스 등과 같은 입력장치를 이용하여 표시 영역을 가상의 구의 다른 부분으로 변경할 수 있으며, VR 장치인 경우에 고개를 돌려서 다른 방향을 쳐다봄으로써 표시 영역을 변경할 수 있다.
그런데, 전방위 영상은 사용자가 보고 있는 영역 이외에 다른 부분에도 영상이 존재하기 때문에, 사용자가 모든 장면의 영상을 동시에 관찰하기에는 어려움이 따르는 문제점이 있다. 예컨대, 360도 영상을 이용한 실시간 방송을 가정할 때, 사용자가 현재 관찰하고 있는 영역의 반대쪽에서 다른 흥미로운 이벤트가 발생한다고 하여도 사용자는 해당 이벤트의 발생을 인지하기 어렵다.
대한민국 등록특허공보 10-1639275, 등록일자 2016년 07월 07일.
본 발명의 실시예에 따르면, 전방위 영상 중에서 사용자가 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트를 사용자가 인지하기 용이하게 표시하여 주는 전방위 영상 표시 장치 및 그 표시 방법을 제공한다.
본 발명의 해결하고자 하는 과제는 이상에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 해결하고자 하는 과제는 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 관점에 따른 전방위 영상 표시 장치에 의한 영상 표시 방법은, 전방위 영상 중에서 일부 영역에 대응하는 일부 영상 데이터를 상기 전방위 영상 표시 장치의 제1 영역에 표시하는 단계와, 상기 전방위 영상 중 상기 일부 영역을 제외한 잔여 영역 내에서 소정의 이벤트가 검출된 경우에, 상기 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터와 상기 이벤트에 대한 정보 중 적어도 하나를 상기 제1 영역 또는 상기 전방위 영상 표시 장치의 제2 영역에 표시하는 단계를 포함할 수 있다.
본 발명의 다른 관점에 따른 전방위 영상 표시 장치는, 전방위 영상 중에서 일부 영역에 대응하는 일부 영상 데이터를 표시하는 디스플레이부와, 상기 디스플레이부를 제어하는 제어부를 포함하며, 상기 제어부는, 상기 일부 영상 데이터가 상기 전방위 영상 표시 장치의 제1 영역에 표시되도록 상기 디스플레이부를 제어하고, 상기 전방위 영상 중 상기 일부 영역을 제외한 잔여 영역 내에서 소정의 이벤트가 검출된 경우에, 상기 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터와 상기 이벤트에 대한 정보 중 적어도 하나가 상기 제1 영역 또는 상기 전방위 영상 표시 장치의 제2 영역에 표시되도록 상기 디스플레이부를 제어할 수 있다.
본 발명의 실시예에 따르면, 전방위 영상 중에서 사용자가 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트를 사용자가 용이하게 인지할 수 있도록 표시하여 준다.
따라서, 사용자가 자신이 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트에 대한 인지성이 향상되며, 이벤트가 발생한 해당 영역의 영상을 그만큼 쉽게 감상할 수 있는 효과가 있다.
도 1은 본 발명의 실시예에 따른 전방위 영상 표시 장치를 포함하는 전방위 영상 서비스 시스템의 구성도이다.
도 2는 본 발명의 실시예에 따른 전방위 영상 표시 장치에 의한 영상 표시 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명의 실시예에 따른 전방위 영상 표시 장치에서 일부 영역에 대응하는 일부 영상 데이터가 화면으로 표시되는 상태를 나타낸 것이다.
도 4는 본 발명의 실시예에 따른 전방위 영상 표시 장치에서 화면 표시 영역을 제외한 잔여 영역에 대한 이벤트 정보가 획득된 상태를 나타낸 것이다.
도 5는 본 발명의 실시예에 따른 전방위 영상 표시 장치에서 화면 표시 영역을 제외한 잔여 영역에 대한 이벤트 정보를 사용자 시점 화면에 표시한 상태를 나타낸 것이다.
도 6은 본 발명의 실시예에 따른 전방위 영상 표시 장치에서 화면 표시 영역을 제외한 잔여 영역에 대한 이벤트 정보를 사용자 시점 화면의 주변에 표시한 상태를 나타낸 것이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 발명의 실시예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하, 첨부된 도면들을 참조하여 본 발명의 실시예들에 대해 살펴보기로 한다.
도 1은 본 발명의 실시예에 따른 전방위 영상 표시 장치를 포함하는 전방위 영상 서비스 시스템의 구성도이다.
이에 나타낸 바와 같이 실시예에 따른 전방위 영상 서비스 시스템은 서버 장치(100)와 전방위 영상 표시 장치(200)가 통신망(10)을 통해 연결될 수 있다. 전방위 영상 표시 장치(200)는 디스플레이부(210), 제어부(220), 통신부(230), 저장부(240), 인터페이스부(250)를 포함한다.
서버 장치(100)는 특정 장소의 전방위 영상 데이터를 획득하고, 획득된 전방위 영상 데이터를 통신망(10)을 이용하여 전방위 영상 표시 장치(200)에게 전송할 수 있다.
또는, 서버 장치(100)는 전방위 영상 데이터 중에서 일부 영상 데이터를 제외하여 나머지에 해당하는 잔여 영상 데이터를 분류하고, 분류된 잔여 영상 데이터는 제외하고 일부 영상 데이터를 통신망(10)을 이용하여 전방위 영상 표시 장치(200)에게 전송할 수 있다. 여기서, 일부 영상 데이터는 전방위 영상 표시 장치(200)를 사용하는 사용자의 시점에 대응하는 일부 영역의 영상 데이터일 수 있다. 이때, 서버 장치(100)는 일부 영상 데이터를 제외한 잔여 영상 데이터 내에서 소정의 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터를 획득 및 저장하며, 획득된 이벤트에 관한 정보를 통신망(10)을 이용하여 전방위 영상 표시 장치(200)에게 전송할 수 있다. 예컨대, 획득하고자 하는 이벤트에 대한 설정 정보는 서버 장치(100) 내에 사전에 저장될 수 있으며, 전방위 영상 표시 장치(200)로부터 통신망(10)을 통해 제공될 수도 있다.
전방위 영상 표시 장치(200)는 전방위 영상 중에서 사용자의 시점에 대응하는 일부 영역의 영상 데이터를 화면의 제1 영역에 표시하며, 표시된 일부 영역을 제외한 잔여 영역에 대응하는 잔여 영상 데이터 내의 이벤트 정보를 획득한다. 그리고, 획득된 이벤트 정보를 화면의 제1 영역 또는 화면의 제2 영역에 표시한다. 여기서, 일부 영역으로부터 이벤트 검출 영역과의 이격거리 또는 일부 영역에 대한 이벤트 검출 영역의 상대적 방향을 포함하는 관계 정보를 이벤트 검출 영상 데이터와 이벤트에 대한 정보 중 적어도 하나와 함께 표시할 수 있다.
이러한 전방위 영상 표시 장치(200)는 서버 장치(100)로부터 통신망(10)을 통해 특정 장소의 전방위 영상 데이터를 전송 받을 수 있다. 이 경우에, 전방위 영상 표시 장치(200)는 전방위 영상 데이터를 사용자의 시점에 대응하는 일부 영역에 해당하는 일부 영상 데이터와 잔여 영역 내에서 소정의 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터로 분류할 수 있다. 또는, 사용자의 시점에 대응하는 일부 영역에 해당하는 일부 영상 데이터는 서버 장치(100)에 의해 분류된 후에 전방위 영상 표시 장치(200)로 전송될 수 있다. 이 경우라면 잔여 영상 데이터 내의 이벤트 정보 또한 서버 장치(100)에 의해 추출된 후에 전방위 영상 표시 장치(200)로 전송될 수 있다.
전방위 영상 표시 장치(200)의 디스플레이부(210)에는 전방위 영상 데이터 중에서 사용자의 시점에 의한 일부 영역에 대응하는 일부 영상 데이터가 화면의 제1 영역에 표시된다. 또, 전방위 영상 데이터에서 일부 영역을 제외한 잔여 영역에 대응하는 잔여 영상 데이터 내의 이벤트 정보가 화면의 제1 영역 또는 제2 영역에 표시된다. 예컨대, 디스플레이부(210)는 VR HMD(Head Mounted Display)로 구현할 수 있다.
제어부(220)는 디스플레이부(210)에 의한 전방위 영상 데이터 및 이벤트 정보의 표시 과정을 제어한다. 그리고, 제어부(220)는 사용자 시점에 의한 일부 영역과 잔여 영역과의 이격거리 또는 상대적 방향이 포함된 관계 정보가 이벤트 정보와 함께 표시되도록 디스플레이부(210)를 제어한다. 예컨대, 제어부(220)는 CPU(Central Processing Unit) 등과 같은 프로세서로 구현할 수 있다.
통신부(230)는 통신망(10)에 연결된 서버 장치(100)로부터 전방위 영상 표시 장치(200)의 제어에 따라 통신망을 통해 데이터를 수신한다. 제어부(220)의 제어에 따라 전방위 영상 데이터를 수신하거나 전방위 영상 데이터 중에서 일부 영역에 대한 일부 영상 데이터와 함께 이벤트 정보를 수신하도록 제어한다. 예컨대, 통신부(230)는 인터넷 접속이 가능한 LAN(Local Area Network) 카드로 구현할 수 있다.
저장부(240)에는 통신부(230)에 의해 수신된 전방위 영상 데이터와 사용자의 시점에 의한 일부 영역에 대응하는 일부 영상 데이터 및 잔여 영상 데이터가 저장된다. 또, 저장부(240)에는 전방위 영상 데이터 내의 이벤트 정보가 저장되거나 일부 영상 데이터를 제외한 잔여 영상 데이터 내의 이벤트 정보가 저장될 수 있다. 이러한 전방위 영상 데이터, 일부 영상 데이터, 잔여 영상 데이터, 이벤트 정보에 대한 저장 과정은 제어부(220)의 제어 신호에 따라 수행될 수 있다. 예컨대, 저장부(160)는 EEPROM(Electrically Erasable Programmable Read-Only Memory) 등의 비휘발성 메모리 소자로 구현할 수 있다.
인터페이스부(250)는 전방위 영상 표시 장치(200)의 사용자의 명령을 입력받아서 제어부(220)에게 전달한다. 사용자는 디스플레이부(210)에 표시되는 영상을 변경하기 위해 마우스 등과 같은 입력장치를 조작할 수 있으며, VR 장치를 사용하는 경우에는 고개를 돌려서 다른 방향을 쳐다볼 수 있는데, 인터페이스부(250)는 이러한 사용자의 행위를 파악하여 대응하는 명령으로 입력받을 수 있다. 예컨대, 인터페이스부(250)는 VR 장치의 경우라면 자이로(Gyro) 센서로 구현할 수 있다.
도 2는 본 발명의 실시예에 따른 전방위 영상 표시 장치에 의한 영상 표시 방법을 설명하기 위한 흐름도이다.
도 1 및 도 2를 참조하면 실시예에 따른 전방위 영상 표시 장치에 의한 영상 표시 방법은, 전방위 영상 중에서 일부 영역에 대응하는 일부 영상 데이터를 전방위 영상 표시 장치의 제1 영역에 표시하는 단계(S310 내지 S330)를 포함한다. 여기서, 전방위 영상 표시 장치(200)는 서버 장치(100)로부터 통신망(10)을 통해 특정 장소의 전방위 영상 데이터를 전송 받을 수 있다. 이 경우에, 전방위 영상 표시 장치(200)는 전방위 영상 데이터를 사용자의 시점에 대응하는 일부 영역에 해당하는 일부 영상 데이터와 잔여 영역에 해당하는 잔여 영상 데이터로 분류할 수 있다. 또는, 사용자의 시점에 대응하는 일부 영역에 해당하는 일부 영상 데이터는 서버 장치(100)에 의해 분류된 후에 전방위 영상 표시 장치(200)로 전송될 수 있다.
아울러, 전방위 영상 중 일부 영역을 제외한 잔여 영역 내에서 소정의 이벤트가 검출된 경우에, 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터와 이벤트에 대한 정보 중 적어도 하나를 전방위 영상 표시 장치의 제1 영역 또는 제2 영역에 표시하는 단계(S340)를 더 포함한다. 여기서, 제어부(220)는 전방위 영상 데이터에 대한 분석을 통해 이벤트에 대한 정보를 추출 및 획득할 수 있다. 또는, 전방위 영상 데이터 내의 이벤트에 대한 정보는 서버 장치(100)에 의해 추출된 후에 전방위 영상 표시 장치(200)로 전송될 수 있다.
그리고, 획득된 이벤트에 대한 정보를 화면의 제1 영역 또는 화면의 제2 영역에 표시하는 단계(S350)를 더 포함한다. 예컨대, 전방위 영상 데이터 중에서 사용자의 시점에 대응하는 일부 영역의 영상 데이터가 화면의 제1 영역에 표시되며, 표시된 일부 영역을 제외한 잔여 영역에 대응하는 잔여 영상 데이터 내의 이벤트에 대한 정보가 화면의 제1 영역 또는 화면의 제2 영역에 표시된다. 여기서, 일부 영역으로부터 이벤트 검출 영역과의 이격거리 또는 일부 영역에 대한 이벤트 검출 영역의 상대적 방향을 포함하는 관계 정보가 이벤트 검출 영역 데이터와 이벤트에 관한 정보 중 적어도 하나와 함께 표시될 수 있다.
여기서, 전방위 영상 표시 장치가 영상 데이터를 분석하여 소정의 이벤트를 검출하는 시기는 특별히 한정되지 않는다. 예컨대, 단계 S310에서 전방위 영상 데이터를 획득한 후에 전방위 영상 데이터를 대상으로 하여 소정의 이벤트를 검출 할 수 있다. 또는, 단계 S330에서 화면에 표시되는 일부 영상 데이터가 전방위 영상 데이터에서 제외된 나머지 영상 데이터를 대상으로 하여 소정의 이벤트를 검출할 수도 있다.
이하, 도 1 내지 도 6을 참조하여 본 발명의 실시예에 따른 전방위 영상 표시 장치에 의한 영상 표시 방법에 대해 더 자세히 살펴보기로 한다.
먼저, 서버 장치(100)에서 전방위 영상 데이터를 대상으로 하여 소정의 이벤트를 검출하는 실시예에 대해 설명하기로 한다.
서버 장치(100)는 특정 장소의 전방위 영상 데이터를 획득하고(S310), 획득된 전방위 영상 데이터를 사용자의 시점에 대응하는 일부 영역의 일부 영상 데이터와 나머지에 해당하는 잔여 영상 데이터로 분류한다(S320). 그리고, 서버 장치(100)는 분류된 일부 영상 데이터를 통신망(10)을 통해 전방위 영상 표시 장치(200)에게 전송한다. 여기서, 사용자의 시점에 대한 정보는 전방위 영상 표시 장치(200)가 통신망(10)을 통해 사전에 제공할 수 있다. 또, 서버 장치(100)는 특정 장소의 전방위 영상 데이터에서 잔여 영상 데이터를 제외하지 않고 전체 데이터를 전방위 영상 표시 장치(200)에게 전송할 수도 있다.
그러면, 전방위 영상 표시 장치(200)에서는 제어부(220)의 제어에 따라 통신부(230)가 사용자의 시점에 대응하는 일부 영역의 일부 영상 데이터를 수신하며, 이렇게 수신된 일부 영상 데이터는 제어부(220)의 제어에 따라 저장부(240)에 저장될 수 있다.
그리고, 제어부(220)의 제어에 따라 디스플레이부(210)는 도 3에 나타낸 바와 같이 사용자(1)를 중심으로 한 전방위 영상 데이터(300) 중에서 사용자의 시점에 대응하는 일부 영역의 일부 영상 데이터(301)를 화면에 표시한다. 여기서, 사용자의 시점에 대응하는 일부 영상 데이터(301)는 도 5 및 도 6과 같은 화면(400)의 제1 영역(410)에 표시될 수 있다(S330).
아울러, 서버 장치(100)는 통신망(10)을 통해 사용자의 시점에 대응하는 일부 영역의 영상 데이터를 전송하면서 일부 영역을 제외한 나머지에 해당하는 잔여 영상 데이터를 분류하며, 분류된 잔여 영상 데이터를 분석하여 잔여 영상 내에서 소정의 이벤트가 검출된 이벤트 검출 영역을 파악하고, 소정의 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터 및 이벤트에 관한 정보를 획득한다. 그리고, 획득된 이벤트 검출 영상 데이터 및 이벤트에 관한 정보를 통신망(10)을 이용하여 전방위 영상 표시 장치(200)에게 전송한다(S340). 예컨대, 도 3에 나타낸 바와 같이 일부 영상 데이터(301)에 대응하는 일부 영상을 제외한 잔여 영상에 대응하는 잔여 영상 데이터들 중에서 소정의 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터들(302, 303, 304)을 획득한다. 여기서, 획득하고자 하는 이벤트에 대한 설정 정보는 서버 장치(100) 내에 사전에 저장될 수 있으며, 전방위 영상 표시 장치(200)로부터 통신망(10)을 통해 제공될 수도 있다. 예컨대, 서버 장치(100)는 일부 영상 데이터(301)를 제외한 잔여 영상 데이터들을 분석하여 특정 인물이 영상에 등장하는 이벤트 검출 영상 데이터를 획득하거나 얼굴 인식 알고리즘을 통하여 특정 인물이 영상에 등장하는 이벤트 검출 영상 데이터를 획득할 수 있다. 예컨대, 이벤트에 대한 정보는 기 설정된 이벤트 검출 알고리즘에 의해 영상에서 실시간으로 추출될 수도 있고, 사전에 녹화된 영상을 재생하는 경우에는 미리 준비되어 영상에 포함된 메타데이터를 이용하여 획득할 수도 있다.
여기서, 서버 장치(100)가 영상 데이터를 분석하여 소정의 이벤트를 검출하는 시기는 특별히 한정되지 않는다. 예컨대, 단계 S310에서 전방위 영상 데이터를 획득한 후에 전방위 영상 데이터를 대상으로 하여 소정의 이벤트를 검출 할 수 있다. 또는, 단계 S330에서 화면에 표시되는 일부 영상 데이터가 전방위 영상 데이터에서 제외된 나머지 영상 데이터를 대상으로 하여 소정의 이벤트를 검출할 수도 있다.
그리고, 전방위 영상 표시 장치(200)의 제어부(220)는 통신부(230)를 제어하여 서버 장치(100)로부터 이벤트에 대한 정보를 수신하도록 하며, 수신된 이벤트에 대한 정보를 표시하도록 디스플레이부(210)를 제어한다. 예컨대, 디스플레이부(210)는 도 5와 같이 화면(400)의 제1 영역(410)에 출력 중인 영상 데이터에 중첩시켜서 이벤트에 대한 정보를 표시할 수 있다. 이때, 제1 영역(410)에 표시 중이던 일부 영상 데이터에 대응하는 일부 영역으로부터 이벤트 검출 영역과의 이격거리 또는 일부 영역에 대한 이벤트 검출 영역의 상대적 방향을 포함하는 관계 정보를 이벤트 검출 영상 데이터와 이벤트에 관한 정보 중 적어도 하나와 함께 표시할 수 있다(S350).
예컨대, 도 5에 나타낸 바와 같이 화면(400)의 제1 영역(410)에 출력 중인 영상에 중첩시켜 썸네일(421, 431, 441)과 화살표(422, 432, 442)를 표시할 수 있다. 썸네일(421, 431, 441)의 크기는 이격거리의 길이에 반비례하게 표시할 수 있고, 화살표(422, 432, 442)의 크기는 상대적 방향의 각도크기에 반비례하게 표시할 수 있다. 여기서, 상대적 방향의 각도크기는 이벤트 검출 영역을 전방위 영상 표시 장치(200)의 제1 영역에 표시하기 위해 필요한 시점의 이동 거리에 비례한다. 또는, 썸네일(421, 431, 441)을 텍스트로 대체하거나 썸네일(421, 431, 441)과 텍스트를 함께 표시할 수도 있다. 또, 썸네일(421, 431, 441)은 기 설정된 알고리즘에 의해 결정될 수 있는 이벤트의 흥미도 또는 중요도에 따라 그 크기와 선명도가 조절될 수 있다.
또는, 도 6에 나타낸 바와 같이 화면(400)의 제1 영역(410)이 아닌 제2 영역(450)에 썸네일(451, 452, 453)을 리스트 형태로 표시할 수도 있다. 도 5와 마찬가지로 썸네일(451, 452, 453)을 텍스트로 대체하거나 썸네일(451, 452, 453)과 텍스트를 함께 표시할 수도 있으며, 썸네일(421, 431, 441)은 기 설정된 알고리즘에 의해 결정될 수 있는 이벤트의 흥미도 또는 중요도에 따라 그 크기와 선명도가 조절될 수 있다.
여기서, 전방위 영상 표시 장치(200)의 사용자는 VR 장치를 사용하는 경우에 도 5의 실시예와 같은 화면(400)을 보고 있다가 고개를 돌려 다른 방향을 쳐다봐서 썸네일(421, 431, 441) 중에서 어느 하나에 대응하는 영역으로의 이동을 지시할 수 있다. 또는, 도 6의 실시예와 같은 화면(400)을 보고 있다가 마우스 등과 같은 입력장치를 조작하여 썸네일(451, 452, 453) 중에서 어느 하나에 대응하는 영역으로의 이동을 지시할 수 있다.
그러면, 제어부(220)는 디스플레이부(210)를 제어하여 썸네일(421, 431, 441)이나 썸네일(451, 452, 453) 중에서 사용자에 의해 선택된 썸네일에 대응하는 영역이 화면(400)의 제1 영역(410)에 표시되도록 한다. 이때, 제1 영역(410)에 표시될 썸네일에 대응하는 영상 데이터는 서버 장치(100)로부터 전송받거나 미리 전송받은 영상 데이터가 이용될 수 있다.
다음으로, 전방위 영상 표시 장치(200)에서 전방위 영상 데이터를 대상으로 하여 소정의 이벤트를 검출하는 실시예에 대해 설명하기로 한다.
먼저, 서버 장치(100)는 특정 장소의 전방위 영상 데이터를 획득하고(S310), 획득된 전방위 영상 데이터를 통신망(10)을 통해 전방위 영상 표시 장치(200)에게 전송한다.
그러면, 전방위 영상 표시 장치(200)에서는 제어부(220)의 제어에 따라 통신부(230)가 전방위 영상 데이터를 수신하며, 이렇게 수신된 전방위 영상 데이터는 제어부(220)의 제어에 따라 저장부(240)에 저장될 수 있다.
이어서, 제어부(220)는 전방위 영상 데이터를 사용자의 시점에 대응하는 일부 영역의 일부 영상 데이터와 나머지에 해당하는 잔여 영상 데이터로 분류한다. 여기서, 제어부(220)는 도 3에 나타낸 바와 같이 사용자(1)를 중심으로 한 전방위 영상 데이터(300) 중에서 사용자(1)의 시점에 대응하는 일부 영역의 일부 영상 데이터(301)를 다른 영역의 영상 데이터들과 분리하게 된다(S320).
그리고, 제어부(220)의 제어에 따라 디스플레이부(210)는 도 3에 나타낸 바와 같이 사용자(1)를 중심으로 한 전방위 영상 데이터(300) 중에서 사용자(1)의 시점에 대응하는 일부 영역의 일부 영상 데이터(301)를 화면에 표시한다. 여기서, 사용자의 시점에 대응하는 일부 영상 데이터(301)는 도 5 및 도 6과 같은 화면(400)의 제1 영역(410)에 표시될 수 있다(S330).
아울러, 제어부(220)는 전방위 영상 데이터 중에서 사용자의 시점에 대응하는 일부 영상 데이터가 제외된 영상 데이터, 즉 잔여 영상 데이터를 분석하여 잔여 영상 데이터 내에서 소정의 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터 및 이벤트에 대한 정보를 획득한다(S340). 예컨대, 도 3에 나타낸 바와 같이 일부 영상 데이터(301)에 대응하는 일부 영상을 제외한 잔여 영상에 대응하는 잔여 영상 데이터들 중에서 소정의 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터들(302, 303, 304)을 획득한다. 여기서, 획득하고자 하는 이벤트에 대한 설정 정보는 저장부(240)나 제어부(220)의 내부 메모리 등에 사전에 저장될 수 있다. 예컨대, 제어부(220)는 이벤트 검출 영상 데이터들(302, 303, 304)을 포함하는 잔여 영상 데이터를 분석하여 특정 인물이 영상에 등장하는 이벤트를 검출하거나 얼굴 인식 알고리즘을 통하여 특정 인물이 영상에 등장하는 이벤트를 검출할 수 있다. 예컨대, 이벤트 정보는 기 설정된 이벤트 검출 알고리즘에 의해 영상에서 실시간으로 추출될 수도 있고, 사전에 녹화된 영상을 재생하는 경우에는 미리 준비되어 영상에 포함된 메타데이터를 이용하여 획득할 수도 있다.
여기서, 전방위 영상 표시 장치(200)의 제어부(220)가 영상 데이터를 분석하여 소정의 이벤트를 검출하는 시기는 특별히 한정되지 않는다. 예컨대, 단계 S310에서 전방위 영상 데이터를 획득한 후에 전방위 영상 데이터를 대상으로 하여 소정의 이벤트를 검출 할 수 있다. 또는, 단계 S330에서 화면에 표시되는 일부 영상 데이터가 전방위 영상 데이터에서 제외된 나머지 영상 데이터를 대상으로 하여 소정의 이벤트를 검출할 수도 있다.
그리고, 제어부(220)는 앞서 획득된 이벤트 정보를 표시하도록 디스플레이부(210)를 제어하며, 디스플레이부(210)는 단계 S340에서 획득된 이벤트에 관한 정보를 화면에 표시하게 된다.
예컨대, 디스플레이부(210)는 도 5와 같이 화면(400)의 제1 영역(410)에 출력 중인 영상 데이터에 중첩시켜서 이벤트에 관한 정보를 표시할 수 있다. 이때, 제1 영역(410)에 표시 중이던 일부 영상 데이터에 대응하는 일부 영역으로부터 이벤트 검출 영역과의 이격거리 또는 일부 영역에 대한 이벤트 검출 영역의 상대적 방향을 포함하는 관계 정보를 이벤트 검출 영역 데이터와 이벤트에 관한 정보 중 적어도 하나와 함께 표시할 수 있다(S350).
예컨대, 도 5에 나타낸 바와 같이 화면(400)의 제1 영역(410)에 출력 중인 영상에 중첩시켜 썸네일(421, 431, 441)과 화살표(422, 432, 442)를 표시할 수 있다. 썸네일(21, 431, 441)의 크기는 이격거리의 길이에 반비례하게 표시할 수 있고, 화살표(422, 432, 442)의 크기는 상대적 방향의 각도크기에 반비례하게 표시할 수 있다. 또는, 썸네일(421, 431, 441)을 텍스트로 대체하거나 썸네일(421, 431, 441)과 텍스트를 함께 표시할 수도 있다. 또, 썸네일(421, 431, 441)은 기 설정된 알고리즘에 의해 결정될 수 있는 이벤트의 흥미도 또는 중요도에 따라 그 크기와 선명도가 조절될 수 있다.
또는, 도 6에 나타낸 바와 같이 화면(400)의 제1 영역(410)이 아닌 제2 영역(450)에 썸네일(451, 452, 453)을 리스트 형태로 표시할 수도 있다. 도 5와 마찬가지로 썸네일(451, 452, 453)을 텍스트로 대체하거나 썸네일(451, 452, 453)과 텍스트를 함께 표시할 수도 있으며, 썸네일(421, 431, 441)은 기 설정된 알고리즘에 의해 결정될 수 있는 이벤트의 흥미도 또는 중요도에 따라 그 크기와 선명도가 조절될 수 있다.
여기서, 전방위 영상 표시 장치(200)의 사용자는 VR 장치를 사용하는 경우에 도 5의 실시예와 같은 화면(400)을 보고 있다가 고개를 돌려 다른 방향을 쳐다봐서 썸네일(421, 431, 441) 중에서 어느 하나에 대응하는 영역으로의 이동을 지시할 수 있다. 또는, 도 6의 실시예와 같은 화면(400)을 보고 있다가 마우스 등과 같은 입력장치를 조작하여 썸네일(451, 452, 453) 중에서 어느 하나에 대응하는 영역으로의 이동을 지시할 수 있다.
그러면, 제어부(220)는 디스플레이부(210)를 제어하여 썸네일(421, 431, 441)이나 썸네일(451, 452, 453) 중에서 사용자에 의해 선택된 썸네일에 대응하는 영역이 화면(400)의 제1 영역(410)에 표시되도록 한다.
지금까지 살펴본 바와 같이, 본 발명의 실시예에 따르면 전방위 영상 중에서 사용자가 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트를 사용자가 용이하게 인지할 수 있도록 표시하여 준다.
따라서, 사용자가 자신이 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트에 대한 인지성이 향상되며, 이벤트가 발생한 해당 영역의 영상을 그만큼 쉽게 감상할 수 있다.
본 명세서에 첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
본 발명의 실시예에 의하면, 전방위 영상 중에서 사용자가 보고 있는 영역 이외에 다른 부분에서 발생한 이벤트를 사용자가 용이하게 인지할 수 있도록 표시하여 주어서 이벤트가 발생한 해당 영역의 영상을 그만큼 쉽게 감상할 수 있다. 이러한 본 발명은 VR HMD나 스마트폰 등을 활용하는 가상현실 및 증강현실 기술분야에 이용할 수 있다.
100 : 서버 장치 200 : 전방위 영상 표시 장치
210 : 디스플레이부 220 : 제어부
230 : 통신부 240 : 저장부
250 : 인터페이스부

Claims (9)

  1. 전방위 영상 표시 장치에 의한 영상 표시 방법으로서,
    전방위 영상 중에서 일부 영역에 대응하는 일부 영상 데이터를 상기 전방위 영상 표시 장치의 제1 영역에 표시하는 단계와,
    상기 전방위 영상 중 상기 일부 영역을 제외한 잔여 영역 내에서 소정의 이벤트가 검출된 경우에, 상기 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터와 상기 이벤트에 대한 정보 중 적어도 하나를 상기 제1 영역 또는 상기 전방위 영상 표시 장치의 제2 영역에 표시하되, 상기 일부 영역과 상기 이벤트 검출 영역 간의 관계 정보를 상기 이벤트 검출 영상 데이터와 상기 이벤트에 대한 정보 중 적어도 하나와 함께 표시하는 단계를 포함하고,
    상기 관계 정보는, 상기 일부 영역에 대한 상기 이벤트 검출 영역의 상대적 방향의 각도크기에 반비례한 크기의 화살표로 표시하며,
    상기 상대적 방향의 각도크기는, 상기 이벤트 검출 영역을 상기 전방위 영상 표시 장치의 제1 영역에 표시하기 위해 필요한 시점의 이동 거리에 비례하는
    전방위 영상 표시 방법.
  2. 제 1 항에 있어서,
    상기 관계 정보는, 상기 일부 영역으로부터 상기 이벤트 검출 영역과의 이격거리를 포함하는
    전방위 영상 표시 방법.
  3. 제 1 항에 있어서,
    상기 전방위 영상 표시 장치와 통신망으로 연결된 서버 장치로부터 상기 이벤트에 관한 정보를 수신하는 단계를 더 포함하는
    전방위 영상 표시 방법.
  4. 제 1 항에 있어서,
    상기 전방위 영상 표시 장치와 통신망으로 연결된 서버 장치로부터 상기 전방위 영상에 대응하는 전방위 영상 데이터를 수신하는 단계를 더 포함하며,
    상기 이벤트는 상기 전방위 영상 데이터에 대한 분석을 통해 검출되거나 상기 전방위 영상 데이터에 포함된 메타데이터를 이용하여 검출되는
    전방위 영상 표시 방법.
  5. 전방위 영상 표시 장치로서,
    전방위 영상 중에서 일부 영역에 대응하는 일부 영상 데이터를 표시하는 디스플레이부와,
    상기 디스플레이부를 제어하는 제어부를 포함하며,
    상기 제어부는,
    상기 일부 영상 데이터가 상기 전방위 영상 표시 장치의 제1 영역에 표시되도록 상기 디스플레이부를 제어하고, 상기 전방위 영상 중 상기 일부 영역을 제외한 잔여 영역 내에서 소정의 이벤트가 검출된 경우에, 상기 이벤트가 검출된 이벤트 검출 영역에 대응하는 이벤트 검출 영상 데이터와 상기 이벤트에 대한 정보 중 적어도 하나가 상기 제1 영역 또는 상기 전방위 영상 표시 장치의 제2 영역에 표시되되, 상기 일부 영역과 상기 이벤트 검출 영역 간의 관계 정보가 상기 이벤트 검출 영상 데이터와 상기 이벤트에 대한 정보 중 적어도 하나와 함께 표시되도록 상기 디스플레이부를 제어하고,
    상기 관계 정보는, 상기 일부 영역에 대한 상기 이벤트 검출 영역의 상대적 방향의 각도크기에 반비례한 크기의 화살표로 표시하며,
    상기 상대적 방향의 각도크기는, 상기 이벤트 검출 영역을 상기 전방위 영상 표시 장치의 제1 영역에 표시하기 위해 필요한 시점의 이동 거리에 비례하는
    전방위 영상 표시 장치.
  6. ◈청구항 6은(는) 설정등록료 납부시 포기되었습니다.◈
    제 5 항에 있어서,
    상기 관계 정보는, 상기 일부 영역으로부터 상기 이벤트 검출 영역과의 이격거리를 포함하는
    전방위 영상 표시 장치.
  7. ◈청구항 7은(는) 설정등록료 납부시 포기되었습니다.◈
    제 5 항에 있어서,
    서버 장치로부터 통신망을 통해 데이터를 수신하는 통신부를 더 포함하며,
    상기 제어부는,
    상기 서버 장치로부터 상기 이벤트에 대한 정보를 수신하도록 상기 통신부를 제어하는
    전방위 영상 표시 장치.
  8. ◈청구항 8은(는) 설정등록료 납부시 포기되었습니다.◈
    제 5 항에 있어서,
    서버 장치로부터 통신망을 통해 데이터를 수신하는 통신부를 더 포함하며,
    상기 제어부는,
    상기 전방위 영상 데이터를 상기 서버 장치로부터 수신하도록 상기 통신부를 제어하고,
    상기 전방위 영상 데이터에 대한 분석을 통해 또는 상기 전방위 영상 데이터에 포함된 메타데이터를 이용하여 상기 잔여 영역 내에서 상기 이벤트를 검출하는
    전방위 영상 표시 장치.
  9. 삭제
KR1020160140786A 2016-10-27 2016-10-27 전방위 영상 표시 장치 및 그 표시 방법 KR102098225B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160140786A KR102098225B1 (ko) 2016-10-27 2016-10-27 전방위 영상 표시 장치 및 그 표시 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160140786A KR102098225B1 (ko) 2016-10-27 2016-10-27 전방위 영상 표시 장치 및 그 표시 방법

Publications (2)

Publication Number Publication Date
KR20180046044A KR20180046044A (ko) 2018-05-08
KR102098225B1 true KR102098225B1 (ko) 2020-04-07

Family

ID=62187494

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160140786A KR102098225B1 (ko) 2016-10-27 2016-10-27 전방위 영상 표시 장치 및 그 표시 방법

Country Status (1)

Country Link
KR (1) KR102098225B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102214085B1 (ko) * 2018-06-01 2021-02-09 엘지전자 주식회사 복수의 뷰포인트들에 대한 메타데이터를 송수신하는 방법 및 장치

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101212636B1 (ko) * 2010-08-20 2012-12-20 한국과학기술원 증강 현실에서 위치 정보를 표시하는 방법 및 장치
KR101229057B1 (ko) * 2011-04-28 2013-02-04 주식회사 네오콤 멀티비젼 돔카메라
KR20150101612A (ko) * 2014-02-27 2015-09-04 엘지전자 주식회사 폐쇄형 시야(Closed-view)를 제공하는 헤드 마운티드 디스플레이 및 그 제어 방법
KR101665599B1 (ko) * 2014-11-27 2016-10-12 현대오트론 주식회사 경로 안내 서비스를 위한 증강현실 내비게이션 장치 및 그 방법
KR101639275B1 (ko) 2015-02-17 2016-07-14 서울과학기술대학교 산학협력단 다중 실시간 영상 획득 카메라를 활용한 360도 구형 렌더링 영상 표출 장치 및 이를 통한 자동 영상 분석 방법

Also Published As

Publication number Publication date
KR20180046044A (ko) 2018-05-08

Similar Documents

Publication Publication Date Title
RU2689136C2 (ru) Автоматизированное определение поведения системы или опыта пользователя посредством записи, совместного использования и обработки информации, ассоциированной с широкоугольным изображением
US10089794B2 (en) System and method for defining an augmented reality view in a specific location
AU2021203688B2 (en) Volumetric depth video recording and playback
EP3754592B1 (en) Image acquisition device and method of controlling the same
US9978174B2 (en) Remote sensor access and queuing
US10061486B2 (en) Area monitoring system implementing a virtual environment
EP3869469A1 (en) Augmented reality display system, terminal device and augmented reality display method
JP6403687B2 (ja) 監視システム
KR101822471B1 (ko) 혼합현실을 이용한 가상현실 시스템 및 그 구현방법
CN102447886A (zh) 在现有静止图像内可视化视频
WO2017169369A1 (ja) 情報処理装置、情報処理方法、プログラム
US20150256764A1 (en) Active-tracking based systems and methods for generating mirror image
US20150138301A1 (en) Apparatus and method for generating telepresence
JP2015125641A (ja) 情報処理装置、その制御方法、及びプログラム
WO2018087462A1 (fr) Dispositif individuel d'immersion visuelle pour personne en mouvement avec gestion des obstacles
CN107613405B (zh) 一种vr视频字幕显示方法和装置
KR102170749B1 (ko) 투명 디스플레이를 포함하는 전자 장치 및 제어 방법
JP2016092693A (ja) 撮像装置、撮像装置の制御方法およびプログラム
US9906769B1 (en) Methods and apparatus for collaborative multi-view augmented reality video
KR102098225B1 (ko) 전방위 영상 표시 장치 및 그 표시 방법
JP2008066864A (ja) 監視装置及び監視プログラム
WO2017160381A1 (en) System for georeferenced, geo-oriented real time video streams
KR101915578B1 (ko) 시점 기반 오브젝트 피킹 시스템 및 그 방법
KR102285078B1 (ko) 물체의 원격 탐지 및 추적
KR102468685B1 (ko) 가상현실 기반의 작업현장 안전관리장치 및 그 장치의 구동방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant