KR102653243B1 - 메타 라이브 서비스 제공 시스템 및 방법 - Google Patents

메타 라이브 서비스 제공 시스템 및 방법 Download PDF

Info

Publication number
KR102653243B1
KR102653243B1 KR1020230059107A KR20230059107A KR102653243B1 KR 102653243 B1 KR102653243 B1 KR 102653243B1 KR 1020230059107 A KR1020230059107 A KR 1020230059107A KR 20230059107 A KR20230059107 A KR 20230059107A KR 102653243 B1 KR102653243 B1 KR 102653243B1
Authority
KR
South Korea
Prior art keywords
live
meta
video
service
control
Prior art date
Application number
KR1020230059107A
Other languages
English (en)
Inventor
민문호
Original Assignee
주식회사 오썸피아
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 오썸피아 filed Critical 주식회사 오썸피아
Priority to KR1020230059107A priority Critical patent/KR102653243B1/ko
Application granted granted Critical
Publication of KR102653243B1 publication Critical patent/KR102653243B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24—Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2476—Non-optical details, e.g. housings, mountings, supports
    • G02B23/2484—Arrangements in relation to a camera or imaging device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/293—Generating mixed stereoscopic images; Generating mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects

Abstract

본 발명은 메타 라이브 서비스에 관한 것으로서, 이를 위하여 소정의 장소에 설치되어 바라보는 방향에 대한 라이브 영상을 표시해주고 설치된 지점을 기준으로 상하좌우 및 줌 이동이 가능하며, 상기 상하좌우 및 줌 이동에 따라 변경되는 라이브 영상을 변경시켜 디스플레이에 표시해주며, 상기 라이브 영상을 네트워크를 통해 송출하는 영상 제공 장치와, 상기 영상 제공 장치와 네트워크로 연결되어 상기 라이브 영상을 수신하며, 상기 라이브 영상과 가상 현실용 레이어가 병합된 병합 데이터를 이용하여 메타 라이브 서비스를 상기 네트워크를 통해 접속한 사용자측 단말기에 제공하는 서비스 제공 서버를 포함하는 메타 라이브 서비스 제공 시스템을 제공할 수 있다.

Description

메타 라이브 서비스 제공 시스템 및 방법{Method and system for providing service of a metalive}
본 발명은 영상 제공 장치와의 연동을 통한 메타 라이브 서비스 제공 시스템 및 방법에 관한 것이다.
이하에 기술되는 내용은 단순히 본 실시예와 관련되는 배경 정보만을 제공할 뿐 종래기술을 구성하는 것이 아니다.
최근 전 세계로부터 많은 관심을 받고 있는 분야는 바로 가상 현실(virtual reality, 이하 "VR"로 약칭함) 분야이다.
VR은 컴퓨터 등을 사용한 인공적인 기술로 만들어낸 실제와 유사하지만 실제가 아닌 어떤 특정한 환경이나 상황 혹은 그 기술 자체를 의미한다. 이때, 만들어진 가상의 환경이나 상황 등은 사용자의 오감을 자극하며 실제와 유사한 공간적, 시간적 체험을 하게 함으로써 현실과 상상의 경계를 자유롭게 드나들게 한다. 또한, 사용자는 가상 현실에 단순히 몰입할 뿐만 아니라 실재하는 디바이스를 이용해 조작이나 명령을 가하는 등 가상 현실 속에 구현된 것들과 상호작용이 가능하다. VR은 사용자와 상호작용이 가능하고 사용자의 경험을 창출한다는 점에서 일방적으로 구현된 시뮬레이션과는 구분된다.
최근에는 VR 기술의 발전과 더불어 메타버스에 대한 관심이 대두되고 있다. 메타버스(Metaverse)는 가상, 초월(Meta)과 세계, 우주(universe)의 합성어로 우주와 또 다른 차원의 우주인 3차원 가상 세계를 뜻하며, 보다 구체적으로는 정치, 경제, 사회, 문화의 전반적 측면에서 현실과 비현실 모두 공존할 수 있는 생활형, 게임형 가상세계를 말한다.
이는 현실과 유사하거나 혹은 완전히 다른 대안적 세계를 디지털 데이터로 생성한 것으로, 가상 세계에서 사용자들은 아바타를 통해 현실세계의 경제적, 사회적인 활동과 유사한 활동을 한다는 특징이 있다.
가상세계는 우리에게 가장 친숙한 형태의 메타버스로서, 리니지와 같은 온라인 롤플레잉 게임에서 부터 린든 랩에서 개발된 세컨드 라이프와 같은 생활형 가상세계에 이르기 까지 3차원 컴퓨터 그래픽 환경에서 구현되는 커뮤니티를 총칭하는 개념이다.
최근 통신 기술 발달과 더불어 스마트폰과 같은 스마트 기기의 고성능화에 따라 스마트 기기를 통한 다양한 콘텐츠 스트리밍 서비스 시장도 많이 성장하였다. 콘텐츠 스트리밍 서비스는 기본적으로 서비스 가입자의 스마트폰과 같은 단말에 특정 서버에서 디지털 콘텐츠를 전송하는 방식이다. 즉, 사용자는 디지털 콘텐츠를 자신의 스마트폰을 통해 실시간으로 전송받아 사용한다.
또한, 스마트 기기의 고성능화 및 하드웨어의 발전에 따라 현실감이 있는 메타버스 공간을 이용한 서비스에 대한 개발이 진행 중에 있다.
국내등록특허공보 제10-1770648호
본 발명은 영상 제공 장치와 연동되어 수신한 영상을 기반으로 네트워크를 통해 접속한 사용자측 단말기에 메타 라이브 서비스를 제공할 수 있는 메타 라이브 서비스 제공 시스템 및 방법을 제공한다.
또한, 본 발명은 영상 제공 장치에 대한 온라인 제어 또는 오프라인 제어가 가능한 메타 라이브 서비스 제공 시스템 및 방법을 제공한다.
본 발명이 해결하고자 하는 과제는 상기에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 해결하고자 하는 과제는 아래의 기재들로부터 본 발명이 속하는 통상의 지식을 가진 자에 의해 명확하게 이해될 수 있을 것이다.
상기와 같은 목적을 달성하기 위한 본 발명의 실시예에 따른 메타 라이브 서비스 제공 시스템은 소정의 장소에 설치되어 바라보는 방향에 대한 라이브 영상을 표시해주고 설치된 지점을 기준으로 상하좌우 및 줌 이동이 가능하며, 상기 상하좌우 및 줌 이동에 따라 변경되는 라이브 영상을 변경시켜 디스플레이에 표시해주며, 상기 라이브 영상을 네트워크를 통해 송출하는 영상 제공 장치와, 상기 영상 제공 장치와 네트워크로 연결되어 상기 라이브 영상을 수신하며, 상기 라이브 영상과 가상 현실용 레이어가 병합된 병합 데이터를 이용하여 메타 라이브 서비스를 상기 네트워크를 통해 접속한 사용자측 단말기에 제공하는 서비스 제공 서버를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 영상 제공 장치는 PTZ(Pan Tilt Zoom) 제어가 가능하며, 상기 PTZ의 제어를 통해 상기 상하좌우 이동과 줌 이동이 가능한 망원경일 수 있다.
본 발명의 실시예에 따르면, 상기 영상 제공 장치는 상기 라이브 영상에 대한 배경용 레이어, 상기 라이브 영상 내 복수의 콘텐츠를 서비스하기 위한 증강 현실용 레이어 및 상기 라이브 영상 내 가상 현실 서비스를 위한 가상 현실용 레이어를 병합하여 상기 디스플레이 상에 표시할 수 있다.
본 발명의 실시예에 따르면, 상기 영상 제공 장치는 상기 사용자측 단말기의 제어 요청에 의거하여 상기 서비스 제공 서버에 의해 상하좌우 및 줌 제어되는 온라인 제어 상태 또는 설치된 장소에서의 사용자에 의한 제어인 오프라인 제어 상태로 동작할 수 있다.
본 발명의 실시예에 따르면, 상기 서비스 제공 서버는 상기 영상 제공 장치로부터 수신되는 라이브 영상을 이용하여 360도 배경 영상을 생성한 후 이를 데이터베이스에 저장하며, 상기 영상 제공 장치가 오프라인 제어 상태인 상태에서 유무선 네트워크를 통해 사용자측 단말기로부터 접속 요청이 수신됨에 따라 가상 카메라 시점을 설정할 수 있는 인터페이스를 상기 사용자측 단말기에 제공한 후 상기 인터페이스를 통해 설정된 가상 카메라 시점(360도 영상의 일부분을 바라보는 방향)을 갖는 가상 카메라 머신을 생성하며, 상기 생성한 가상 카메라 머신을 이용하여 배경용 레이어가 생성할 수 있다.
본 발명의 실시예에 따르면, 상기 서비스 제공 서버는 상기 생성한 가상 카메라 머신의 가상 카메라 시점에서 상기 가상 카메라 머신에 대한 상하좌우 및 줌 이동의 제어가 가능한 제어용 인터페이스를 상기 사용자측 단말기에 제공하며, 상기 제어용 인터페이스를 통한 제어 요청이 수신됨에 따라 상기 가상 카메라 머신을 제어하여 라이브 영상에 대응되는 배경용 레이어를 생성할 수 있다.
본 발명의 실시예에 따르면, 상기 서비스 제공 서버는 환경을 설정할 수 있는 환경 설정용 인터페이스를 상기 사용자측 단말기에 제공하며, 상기 환경 설정용 인터페이스에 의해 설정된 환경에 따라 환경용 레이어를 생성하며, 상기 환경용 레이어 및 배경용 레이어를 이용하여 상기 병합 데이터를 생성한 후 이를 토대로 메타 라이브 서비스를 제공할 수 있다.
본 발명의 실시예에 따르면, 상기 서버 제공 서버는 사용자가 선택한 아바타 및 지면의 형상을 포함한 가상 현실용 레이어를 생성하며, 상기 라이브 영상에 대응되는 배경용 레이어, 가상 현실용 레이어 및 복수의 콘텐츠의 제공을 위한 증강 현실용 레이어를 병합한 병합 데이터를 이용하여 상기 사용자측 단말기에 메타 라이브 서비스를 제공할 수 있다.
본 발명의 실시예에 따르면, 상기 서비스 제공 서버는 상기 영상 제공 장치로부터 수신되는 라이브 영상의 변화도를 계산하며, 상기 변화도를 기반으로 상기 사용자측 단말기에 스트리밍되는 메타 라이브 서비스에 대응되는 영상에서의 배경용 레이어의 변경 여부를 결정할 수 있다.
상기와 같은 목적을 달성하기 위한 본 발명의 실시예에 따른 메타 라이브 서비스 제공 방법은 소정의 장소에 설치되어 바라보는 방향에 대한 라이브 영상을 표시해주고 설치된 지점을 기준으로 상하좌우 및 줌 이동이 가능하며, 상기 상하좌우 및 줌 이동에 따라 변경되는 라이브 영상을 변경시켜 디스플레이에 표시해주며, 상기 라이브 영상을 네트워크를 통해 송출하는 영상 제공 장치를 이용한 메타 라이브 서비스 제공 방법에 있어서, 상기 영상 제공 장치와 네트워크를 통해 연결된 서비스 제공 서버에서 네트워크를 통해 연결된 사용자측 단말기로부터 메타 라이브 서비스 요청을 수신하는 단계와, 상기 메타 라이브 서비스 요청에 따라 상기 영상 제공 장치로부터 라이브 영상을 수신하는 단계와, 상기 라이브 영상과 가상 현실용 레이어가 병합된 병합 데이터를 이용하여 상기 네트워크를 통해 접속한 사용자측 단말기에 메타 라이브 서비스를 제공하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 메타 라이브 서비스 제공 방법은 상기 메타 라이브 서비스 요청이 수신됨에 따라 환경을 설정할 수 있는 환경 설정용 인터페이스를 상기 사용자측 단말기에 제공하는 단계를 포함하며, 상기 메타 라이브 서비스를 제공하는 단계는 상기 라이브 영상이 수신됨에 따라 상기 환경 설정용 인터페이스에 의해 설정된 환경에 따라 환경용 레이어를 생성하며, 상기 환경용 레이어 및 배경용 레이어를 이용하여 상기 병합 데이터를 생성한 후 이를 토대로 메타 라이브 서비스를 제공할 수 있다.
본 발명의 실시예에 따르면, 상기 메타 라이브 서비스를 제공하는 단계는 사용자가 선택한 아바타 및 지면의 형상을 포함한 가상 현실용 레이어를 생성하는 단계와, 상기 라이브 영상에 대응되는 배경용 레이어 및 상기 라이브 영상을 기반으로 복수의 콘텐츠의 제공을 위한 증강 현실용 레이어를 상기 가상 현실용 레이어에 병합하여 병합 데이터를 생성하는 단계와, 상기 병합 데이터를 이용하여 메타 라이브 서비스를 제공하는 단계를 포함할 수 있다.
본 발명의 실시예에 따르면, 상기 메타 라이브 서비스 제공 방법은 상기 영상 제공 장치로부터 실시간으로 라이브 영상을 수신하는 단계와, 상기 수신한 라이브 영상간의 변화도를 계산하는 단계를 더 포함하며,
상기 메타 라이브 서비스를 제공하는 단계는 상기 변화도를 기반으로 상기 사용자측 단말기에 스트리밍되는 메타 라이브 서비스에 대응되는 영상에서의 배경용 레이어의 변경 여부를 결정할 수 있다.
전술한 본 발명의 실시예들에 따르면, 영상 제공 장치와 연동되어 수신한 영상을 기반으로 네트워크를 통해 접속한 사용자측 단말기에 메타 라이브 서비스를 제공함으로써, 현실감 있는 메타버스 기반의 서비스 구현이 가능하다.
도 1은 본 발명의 실시예에 따른 메타 라이브 서비스 제공 시스템의 전체 구성을 도시한 도면이다.
도 2는 본 발명의 실시예에 따른 메타 라이브 서비스 제공 시스템에서 서비스 제공 서버의 세부 구성을 도시한 블록도이다.
도 3은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치을 전반적인 구조를 도시한 도면이다.
도 4는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치의 위치 변환부 및 촬영부간의 결합 구조를 도시한 사시도이다.
도 5는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치에서 하우징 내부에 실장된 모듈의 측면도이다.
도 6은 본 발명의 실시예에 적용된 받침대의 구조를 도시한 도면이다.
도 7은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치에서 제1지지브라켓의 구조를 도시한 도면이다.
도 8은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치에서 제2지지브라켓의 구조를 설명하기 위한 도면이다.
도 9는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치의 틸팅 모듈의 장착 상태를 설명하기 위한 도면이다.
도 10은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치의 촬영부를 구성 요소를 설명하기 위한 도면이다.
도 11은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치의 하우징의 구조를 설명하기 위한 도면이다.
도 12는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치의 패닝 각도 및 틸팅 각도를 제한하기 위한 구성을 설명하기 위한 도면이다.
도 13은 본 발명의 실시예에 따른 영상 제공 장치가 영상을 전송하는 과정을 도시한 흐름도이다.
도 14는 본 발명의 실시예에 따른 서비스 제공 서버가 메타 라이브 서비스를 제공하는 과정을 도시한 흐름도이다.
도 15는 본 발명의 실시예에 따른 영상 제공 장치가 온라인 제어가 불가능한 경우 메타 라이브 서비스를 제공하는 과정을 도시한 흐름도이다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예를 상세히 설명하기로 한다. 이에 앞서, 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시 예와 도면에 도시된 구성은 본 발명의 가장 바람직한 실시 예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해해여야 한다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예에 따른 메타 라이브 서비스 제공 시스템 및 방법에 대해 설명하기로 한다.
도 1은 본 발명의 실시예에 따른 메타 라이브 서비스 제공 시스템의 전체 구성을 도시한 도면이며, 도 2는 본 발명의 실시예에 따른 메타 라이브 서비스 제공 시스템에서 서비스 제공 서버의 세부 구성을 도시한 블록도이다.
도 1 및 도 2에 도시된 바와 같이, 메타 라이브 서비스 제공 시스템은 소정의 장소에 설치되어 바라보는 방향에 대한 라이브 영상을 표시해주는 영상 제공 장치(510) 및 영상 제공 장치(510)와 네트워크, 예컨대 유무선 통신망을 통해 연결되어 라이브 영상을 수신하며, 네트워크를 통해 접속한 사용자측 단말기(530)에 가상 현실용 레이어와 라이브 영상이 병합된 병합 데이터를 이용하여 스트리밍 영상 서비스를 제공하는 서비스 제공 서버(520) 등을 포함할 수 있다.
특히, 본 발명의 실시예에서 병합 데이터를 이용하여 서비스되는 것은 메타버스 서비스를 의미할 수 있다. 즉, 메타 라이브 서비스는 구조화된 데이터를 기반으로 영상 제공 장치(510)를 통해 획득한 실제 영상을 기반으로 정확한 위치에서 다양한 콘텐츠, 예컨대 가상, 증강, 혼합 현실 등이 융합된 확장 현실 서비스의 제공이 가능한 콘텐츠를 제공하는 것을 의미할 수 있다.
또한, 본 발명의 실시예에서 라이브 영상은 영상 제공 장치(510)가 촬영한 영상으로서, 임의의 지점을 기 설정된 시간 동안 바라본 상태일 경우 영상 제공 장치(510)에 의해 촬영된 영상일 수 있다.
본 발명의 실시예에 따른 서비스 제공 서버(520)에 의해 스트리밍 서비스되는 병합 데이터는 가상 현실, 증강 현실, 혼합 현실을 표현하는 것으로서, 라이브 영상을 이용하여 실제 환경(즉, 배경 영역)을 표현한 배경용 레이어, 아바타 및 지면 형상을 표현한 가상 현실용 레이어 및 다양한 정보 제공과 재미 요소를 부각시키기 위한 증강 배경용 레이어 등을 포함할 수 있다. 즉, 병합 데이터는 배경용 레이어, 가상 현실용 레이어 및 증강 현실용 레이어 등을 병합하여 생성된 후 사용자측 단말기(530)에 스트리밍 서비스될 수 있다.
본 발명의 실시예에서 증강 현실용 레이어는 라이브 영상, 즉 배경 영역에 대응되는 배경용 레이어를 기초하여 생성될 수 있는데, 즉 배경 영역 내 주요 감상 포인트에 대한 가이드 콘텐츠, 재미 요소를 부각시키기 위한 각종 정보를 제공하기 위한 2D 또는 3D 데이터를 기반으로 생성될 수 있다.
또한, 가상 현실용 레이어에는 주변의 환경, 예컨대 날씨, 계절 정보에 의거하여 아바타 및 지면의 상태에 대한 변경 사항이 반영될 수 있다.
이를 위하여, 본 발명의 실시예에 따른 서비스 제공 서버(520)는 라이브 영상을 전송하는 영상 제공 장치(510)가 설치된 장소에 대하 날씨 및 계절 정보를 기초하여 데이터베이스(525)에 저장된 기준 가상 현실용 레이어를 변형시킨 후 수신한 라이브 영상에 대응되는 배경용 레이어와 변형된 기준 가상 현실용 레이어를 이용하여 메타 라이브 서비스를 위한 스트리밍 영상을 생성할 수 있다.
또한, 서비스 제공 서버(520)는 배경 영역 내 주요 감상 포인트에 대한 가이드 콘텐츠, 재미 요소를 부각시키기 위한 각종 정보를 제공하기 위한 2D 또는 3D 데이터를 기반으로 생성된 증강 현실용 레이어를 더 포함시켜 스트리밍 영상을 생성한 후 이를 사용자측 단말기(530)에 서비스할 수 있다.
사용자측 단말기(530)는 메타 라이브 서비스를 제공받을 수 있는 기기로서, 그 예로 유선 또는 무선 통신 기능을 가지며, 메타 라이브 서비스를 제공받을 수 있는 적어도 하나 이상의 프로세스에 의해 실행되어 서비스 제공 서버(520)와 연동하여 메타 라이브 서비스를 제공할 수 있는 프로그램이 저장된 메모리 및 사용자의 다양한 입력이 가능한 입력 인터페이스(미도시됨)를 구비한 컴퓨팅 디바이스일 수 있다.
본 발명의 실시예에서 사용자측 단말기(530)에 해당되는 컴퓨팅 디바이스는 무선 통신 기기인 스마트폰, 테블릿 PC, 개인용 컴퓨터, 노트북 등을 들 수 있으나, 이에 한정하지는 않는다.
본 발명의 실시예에 따른 영상 제공 장치(510)는 설치된 장소를 기준으로 상하좌우 및 줌 이동 제어, 즉 PTZ(Pan Tilt Zoom) 제어가 가능하고, 상하좌우 및 줌 이동에 따라 라이브 영상을 변경시켜 표시해줌과 더불어 라이브 영상을 서비스 제공 서버(520)에 전송할 수 있다.
특히, 영상 제공 장치(510)는 상하좌우 및 줌 이동이 완료됨에 따라 라이브 영상을 촬영하며, 촬영한 라이브 영상을 서비스 제공 서버(520)에 전송할 수 있다.
또한, 영상 제공 장치(510)는 오프라인 상에서의 제어(즉, 설치된 지점에서의 임의의 사용자에 의한 제어) 및 온라인 상에서의 제어(즉, 네트워크를 통해 연결된 서비스 제공 서버(520)에 의한 제어)에 의거하여 상하좌우 및 줌 이동 제어가 가능할뿐만 아니라 영상 제공 장치(510)에서 제공되는 다양한 서비스를 제공할 수 있다. 여기에서, 서비스는 라이브 영상 표시, 다양한 콘텐츠 서비스 등을 포함할 수 있다.
또한, 영상 제공 장치(510)는 사용자측 단말기(530)의 제어 요청에 의거하여 서비스 제공 서버(520)에 의해 상하좌우 및 줌 제어(즉, 온라인 제어)되며, 온라인 제어에 따라 온라인 제어 중이라는 메시지를 디스플레이 상에 표시함과 더불어 온라인 제어에 따라 실시간 라이브 영상을 서비스 제공 서버(520)에 전송할 수 있다. 이에 따라, 서비스 제공 서버(520)는 실시간 라이브 영상을 기반으로 배경 영역과 해당 배경 영역에 필요한 가상 배경용 레이어 및 증강 배경용 레이어가 포함된 메타 라이브 서비스를 사용자측 단말기(530)에 제공할 수 있다.
또한, 영상 제공 장치(510)는 설치된 장소에서 제어(즉, 오프라인 제어)됨에 따라 오프라인 제어에 따라 촬영된 라이브 영상을 서비스 제공 서버(520)에 전송함과 더불어 사용자측 단말기(530)에 의해 제어권을 비활성화시키기 위한 제어권이 오프라인 상태에 있음을 알리기 위한 제어권 관련 메시지를 서비스 제공 서버(520)에 전송하며, 기 설정된 시간 동안 대기 상태로 진입됨에 따라 제어 가능 상태임을 알리기 위한 제어권 관련 메시지를 서비스 제공 서버(520)에 전송할 수 있다. 이 경우 서비스 제공 서버(520)는 제어권 관련 메시지를 기초하여 사용자측 단말기(530)에 제어 가능 여부를 알리기 위한 제어 관련 알림, 예컨대 제어 가능, 제어 불가능 등과 같은 알림을 메타 라이브 서비스되는 영상 내에 포함시킬 수 있다.
본 발명의 실시예에 따른 서비스 제공 서버(520)는 영상 제공 장치(510)로부터 라이브 영상을 수집하여 데이터베이스(525)에 저장 및 관리하며, 온라인 제어가 불가능한 상태에서 사용자측 단말기(530)로부터 메타 라이브 서비스 요청이 수신됨에 따라 데이터베이스(525)에 저장된 라이브 영상을 기반으로 메타 라이브 서비스를 제공할 수 있다. 이때, 서비스 제공 서버(520)는 제어 관련 알림(즉, 온라인 제어 불가 알림)을 포함한 메타 라이브 서비스를 제공할 수 있다.
한편, 본 발명의 실시예에서, 영상 제공 장치(510)가 오프라인 제어 상태에서 메타 라이브 서비스를 제공할 때, 서비스 제공 서버(520)는 영상 제공 장치(510)로부터 수신되는 라이브 영상을 이용하여 배경 영역에 대한 변경 여부를 체크할 수도 있다. 즉, 서비스 제공 서버(520)는 영상 제공 장치(510)로부터 수신되는 이전 라이브 영상과 현재 라이브 영상간의 변화도를 계산하며, 계산한 변화도가 기 설정된 임계값 이상인 경우에만 메타 라이브 서비스되는 영상 내 배경 영역을 변경할 수 있다.
여기에서, 서비스 제공 서버(520)에 의한 배경 영역의 변경은 영상 제공 장치(510)로부터 수신된 라이브 영상을 이용하여 배경용 레이어를 생성한 후 이를 토대로 메타 라이브 서비스되는 스트리밍 영상을 변경시킬 수 있다.
또한, 서비스 제공 서버(520)는 복수의 영상 제공 장치(510) 각각에 대한 제어 가능 여부를 포함한 정보를 사용자측 단말기(530)에 제공하며, 제어 불가능한 영상 제공 장치(510)가 선택됨에 따라 수집 영상 이용 및 라이브 영상 이용 중 어느 하나를 선택할 수 있는 인터페이스를 사용자측 단말기(530)에 제공할 수 있다. 이때, 수집 영상 이용이 선택되는 경우 서비스 제공 서버(520)는 데이터베이스(525)에 저장된 영상을 이용하여 메타 라이브 서비스를 사용자측 단말기(520)에 제공하며, 라이브 영상 이용이 선택되는 경우 오프라인 상에서의 제어되는 영상 제공 장치(510)로부터 수신되는 라이브 영상을 기반으로 메타 라이브 서비스를 제공할 수 있다.
이러한 동작을 위하여 본 발명의 실시예에 따른 서비스 제공 서버(520)는, 도 2에 도시된 바와 같이, 영상 제공 장치(510) 및 사용자측 단말기(530)와의 네트워크를 통한 연동을 위한 연동부(522), 연동부(522)를 통해 수신되는 라이브 영상을 토대로 메타 라이브 서비스를 제공하는 서비스 제공부(524), 영상 제공 장치(510)의 제어 권한 상태를 제어하기 위한 권한 제어부(526) 및 영상 제공 장치(510)로부터 수신되는 라이브 영상간의 변화도를 계산하여 배경 영역의 변경 여부를 결정한 후 이를 토대로 배경을 변경시키는 레이어 변경부(528) 등을 포함할 수 있다.
서비스 제공부(524)는 메타 라이브 서비스를 제공하기 위한 라이브 영상을 이용하여 배경용 레이어를 생성하고, 배경용 레이어, 가상 현실용 레이어 및 증강 현실용 레이어를 병합한 병합 데이터를 이용하여 스트리밍하기 위한 영상을 생성한 후 이를 토대로 메타 라이브 서비스를 제공할 수 있다.
권한 제어부(526)는 영상 제공 장치(510)가 오프라인 제어 상태인 경우 영상 제공 장치(510)에 접속한 사용자측 단말기(520)에 제어 불가능 상태를 알리기 위한 제어 권한 알림을 제공하며, 온라인 제어 상태인 경우 영상 제공 장치(510)의 디스플레이에 온라인 제어 상태임을 알리기 위한 메시지를 표시할 수 있다.
한편, 본 발명의 실시예에서 서비스 제공 서버(520)는 날씨별, 계절별로 영상 제공 장치(510)로부터 수신되는 라이브 영상을 이용하여 360도 배경 영상을 생성한 후 이를 데이터베이스(525)에 저장하여 관리할 수 있다.
이를 통해, 영상 제공 장치(510)가 오프라인 제어 상태에서 유무선 네트워크를 통해 사용자측 단말기(530)로부터 접속 요청이 수신됨에 따라 서비스 제공 서버(520)는 360도 배경 영상에서 일부분을 바라보는 방향인 가상 카메라 시점을 설정할 수 있는 인터페이스를 사용자측 단말기(530)에 제공한 후 인터페이스를 통해 설정된 가상 카메라 시점을 갖는 가상 카메라 머신을 생성하며, 생성한 가상 카메라 머신을 이용하여 배경용 레이어가 생성하며, 생성한 배경용 레이어, 가상 현실용 레이어 및 증강 현실용 레이어가 병합된 병합 데이터를 이용하여 메타 라이브 서비스를 제공할 수 있다. 이때, 서비스 제공 서버(520)는 생성한 가상 카메라 머신의 가상 카메라 시점에서 가상 카메라 머신에 대한 상하좌우 및 줌 이동의 제어가 가능한 제어용 인터페이스를 사용자측 단말기(530)에 제공하며, 제어용 인터페이스를 통한 사용자의 제어 요청이 수신됨에 따라 가상 카메라 머신의 동작을 제어하여 배경용 레이어를 변경시킬 수 있다.
한편, 본 발명의 실시예에 따른 서비스 제공 서버(520)는 환경, 예컨대 날씨, 시간대, 계절 등의 환경을 설정할 수 있는 환경 설정용 인터페이스를 사용자측 단말기(530)에 제공하며, 환경 설정용 인터페이스에 의해 설정된 환경에 따라 환경용 레이어를 생성하며, 환경용 레이어 및 배경용 레이어를 이용하여 병합 데이터를 생성한 후 이를 토대로 메타 라이브 서비스를 제공할 수 있다.
본 발명의 실시예에서, 영상 제공 장치(510)는 PTZ(Pan Tilt Zoom) 제어가 가능하며, PTZ의 제어를 통해 상하좌우 이동과 줌 이동이 가능한 망원경일 수 있는데, 이에 대해 도 3 내지 도 12를 참조하여 설명하기로 한다.
도 3은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)을 전반적인 구조를 도시한 도면이며, 도 4는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)의 위치 변환부 및 촬영부간의 결합 구조를 도시한 사시도이며, 도 5는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)에서 하우징 내부에 실장된 모듈의 측면도이며, 도 6은 본 발명의 실시예에 적용된 받침대의 구조를 도시한 도면이며, 도 7은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)에서 제1지지브라켓의 구조를 도시한 도면이며, 도 8은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)에서 제2지지브라켓의 구조를 설명하기 위한 도면이며, 도 9는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)의 틸팅 모듈의 장착 상태를 설명하기 위한 도면이며, 도 10은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)의 촬영부를 구성 요소를 설명하기 위한 도면이며, 도 11은 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)의 하우징의 구조를 설명하기 위한 도면이며, 도 12는 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)의 패닝 각도 및 틸팅 각도를 제한하기 위한 구성을 설명하기 위한 도면이다.
도 3 내지 도 12에 도시된 바와 같이, 본 발명의 실시예에 따른 PTZ(Pan Tilt Zoom) 기능을 갖는 영상 제공 장치(510)은 하우징(40)에 내장된 촬영부(30), 하우징(40)를 상하로 이동 가능하도록 결합되고 하우징(40)를 지지하기 위한 지주(110) 및 하우징(40) 내부에 형성된 촬영부(30) 및 영상 제공 장치(510)의 전반적으로 제어를 수행하는 제어부(50)로 구성될 수 있다.
구체적으로, 본 발명의 실시예에 따른 PTZ 기능을 갖는 영상 제공 장치(510)은 지주(110)에 의해 지면으로부터 소정 간격만큼 이격된 위치에 지지되는 하우징(40), 하우징(40)의 내부에 형성되고 줌 기능을 갖는 촬영부(30), 촬영부(30)와 연결되어 팬(Pan) 및 틸팅 제어를 위한 위치 변환부(20), 하우징(40)에 형성되되, 상기 촬영부가 촬영하는 방향의 반대면에 형성된 사용자 입력이 가능한 터치형 디스플레이(420), 터치형 디스플레이(420)를 통해 사용자 입력이 입력됨에 따라 촬영부(30) 및 위치 변환부(20) 중 어느 하나를 제어하여 줌 상태의 제어, 팬 제어 또는 틸팅 제어를 수행하는 제어부(50)를 포함할 수 있다.
특히, 제어부(50)는 서비스 제공 서버(520)와 네트워크를 통한 통신을 위해 통신회로(미도시됨)를 더 구비할 수 있으며, 라이브 영상을 서비스 제공 서버(520)에 전송할 수 있다.
또한, 제어부(50)는 팬, 틸트 및 줌 제어 시 제어가 완료되는 시점, 기 설정된 시간 동안 멈춤 상태일 경우 라이브 영상을 서비스 제공 서버(520)에 전송할 수 있다.
또한, 제어부(50)는 사용자측 단말기(530)의 제어 요청에 의거하여 서비스 제공 서버(520)에 의해 상하좌우 및 줌 제어되는 온라인 제어 상태 또는 설치된 장소에서의 사용자에 의한 제어인 오프라인 제어 상태로 동작할 수 있다. 구체적으로, 제어부(50)는 오프라인 제어 상태에서 사용자의 입력에 의거하여 위치 변환부(20) 및 촬영부(30)의 제어를 통해 촬영부(30)의 상하 이동 및 줌 이동을 제어할 수 있으며, 온라인 제어 상태에서 서비스 제공 서버(520)의 제어 요청에 의거하여 위치 변환부(20) 및 촬영부(30)의 제어를 통해 촬영부(30)의 상하 이동 및 줌 이동을 제어할 수 있다.
또한, 제어부(50)는 온라인 제어 상태인 경우 서비스 제공 서버(520)로부터 수신되는 제어 요청에 따라 팬, 틸트 및 줌 제어를 수행하며, 이 경우 온라인 제어 상태임을 알리는 메시지를 터치형 디스플레이(420) 상에 표시할 수 있다.
본 발명의 실시예에 따른 위치 변환부(20)는 사용자 입력에 따라 제어부(50)로부터 인가받은 제어 신호에 의거하여 촬영부(30)를 좌 및 우 방향으로 패닝시키는 제1스텝모터(212)로 구성된 팬 모듈(210) 및 사용자 입력에 따라 제어부(50)로부터 인가받은 제어 신호에 의거하여 촬영부(30)를 상하 방향으로 틸팅시키는 제2스텝모터(242)로 구성된 틸팅 모듈(240)을 포함할 수 있다.
한편, 본 발명의 실시예에 따른 영상 제공 장치(510)은 팬 모듈(210)이 삽입되어 팬 모듈(210)의 회전을 지지하는 안착홈(122), 팬 모듈(210)의 상단에 안착되어 팬 모듈(210)에 의해 회전되되, 제1수평고정대(222)와 제1수평고정대(222)의 양단에 형성된 제1수직고정대(224)를 포함하는 제1지지브라켓(220), 양단이 제1수직고정대(224) 각각에 결합되고 촬영부(30)가 틸팅 가능하도록 안착되며, 틸팅 모듈(240)이 연결된 제2지지브라켓(230) 등을 구비할 수 있다.
상술한 바와 같은 구성을 갖는 PTZ 기능을 갖는 영상 제공 장치(510)의 세부 구성에 대해 설명하면 아래와 같다.
먼저, 영상 제공 장치(510)의 촬영부(30)는 지지대(10)에 의해 지면에서 일정 높이에 위치되도록 지지되며, 지지대(10)는 지면에서 일정 높이에 위치되도록 지지하는 지주(110)에 연결될 수 있다.
지주(110)는 설치 위치가 고정되는 고정식, 또는 제어부(50)의 제어 신호에 따라 높낮이가 변경되는 승강식으로 구성될 수 있다.
지주(110)가 승강식인 경우 지주(110)는 지면에 고정되는 고정대(111), 고정대(111)에 연장되되, 고정대(111)를 기준으로 승강되도록 구성되는 승강대(112) 및 승강대(112)가 승강력을 제공하여 승강 작용이 이루어지도록 하는 승강부(113)로 구성될 수 있다.
이때, 승강부(113)는 랙과 피니언방식, 유,공압 실린더방식 등으로 구성될 수 있는 것으로서, 승강대에 승강력을 제공할 수 있는 방식이면 어느 것이든 채택 가능하다.
또한, 지주(110)의 상단에는 평탄면을 형성하여 위치변환부(20)의 안착이 용이하도록 지지하는 받침대(120)가 구성된다.
또한, 받침대(120)에는 일정 깊이로 형성되어, 위치변환부(20) 하단 일부가 안착됨에 따라 상기 위치변환부(20)의 회전을 지지하도록 하는 안착홈(122)이 형성된다.
또한, 받침대(120)에는 안착홈(122)의 중앙에 일정크기로 관통되게 구성되어, 제어부(50)와의 전기적 연결이 이루어짐과 함께 전원을 공급받을 수 있도록 전선 등이 출입할 수 있는 제1관통공(124)이 형성된다.
또한, 받침대(120)에는 위치변환부(20)의 회전각도를 기구적으로 제한할 수 있도록 지지하는 스톱퍼(126)가 구성된다.
스톱퍼(126)는 받침대(120)에 일정높이 세워지도록 구성되어, 위치변환부(20)의 회전각도 예컨대, 120°~ 180°범위 이상을 넘어갈 수 없도록 한다. 이 경우, 스톱퍼(126)는 안착홈(122)을 중심으로 양쪽 각각에 60°~ 90°범위에 구성된다.
또한, 받침대(120)에는 체결수단 예컨대, 볼트와 너트, 또는 체결볼트가 체결되어, 하우징(40)이 고정되도록 지지하는 적어도 하나 이상의 제1체결공(128)이 형성된다.
또한, 받침대(120)에는 위치변환부(20)에 구성되는 제1스텝모터를 체결수단에 의해 고정될 수 있도록 하는 적어도 하나 이상의 제2체결공(129)이 형성된다.
위치변환부(20)는 지지대(10)의 상단에 구성되어, 촬영부(30)를 팬(Pan) 또는 틸팅시켜 전망효율이 극대화되도록 한다.
위치변환부(20)는 팬 모듈(210)과, 제1지지브라켓(220)과, 제2지지브라켓(230) 및 틸팅 모듈(240)를 포함한다.
팬 모듈(210)은 촬영부(30)를 좌,우 방향으로 일정각도로 회전시키도록 한다.
팬 모듈(210)은 제어부(50)에서 제공되는 제어신호에 따라 정회전력 또는 역회전력을 발생하는 제1스텝모터(212)가 구성된다. 이 경우, 제1스텝모터(212)는 받침대(120)의 일측에 구성되고, 체결수단이 제2체결공(129)에 체결됨에 따라 제1스텝모터(212)가 받침대(120)에 고정된다.
또한, 제1스텝모터(212)에는 연장축에 고정되어, 제1스텝모터(212)에서 발생되는 정회전력 또는 역회전력에 의해 회전하는 제1원동기어(214)가 구성된다.
또한, 팬 모듈(210)에는 받침대의 상단에 구성되어, 제1원동기어(214)에서 제공되는 정회전력 또는 역회전력을 제공받아 일정각도 회전하는 제1종동기어(216)가 구성된다.
이 경우, 제1원동기어(214)와 제1종동기어(216) 사이에는 기어비에 의해 제1종동기어(216)가 저속의 회전이 이루어질 수 있도록 지지함과 함께, 제1스텝모터(212)의 회전력이 제1종동기어(216)로 직접적으로 전달됨을 방지함에 따라 제1종동기어(216)를 보호할 수 있도록 지지하는 아이들기어(215)가 구성된다.
즉, 아이들기어(215)는 제1원동기어(214)와 제1종동기어(216) 사이에 구성되어, 제1원동기어(214)를 통해 제공되는 회전력이 직접적으로 제1종동기어(216)에 전달되지 않도록 완충시킴으로써, 제1종동기어(216)를 보호할 수 있도록 한다. 물론, 이에 한정하는 것은 아니며, 아이들기어(215)를 생략하고, 제1원동기어(214)에 제1종동기어(216)가 직접 치합되도록 구성할 수도 있다.
또한, 제1종동기어(216)에는 받침대(120)의 안착홈(122)에 삽입되어, 제1종동기어(216)의 정회전 또는 역회전을 지지하도록 하는 안착보스(218)가 구성된다. 이 경우, 안착보스(218)는 제1종동기어(216)의 하단에서 일정높이로 돌출되게 형성된다.
또한, 제1종동기어(216)의 중앙에는 일정크기로 관통되게 형성되어, 제어부(50)를 통해 제공되는 전기적 연결선 또는 전원을 공급하는 전선 등이 출입할 수 있도록 제2관통공(219)이 형성된다. 이 경우, 제2관통공(219)은 제1종동기어(216)와 안착보스(218)를 관통하도록 구성된다.
또한, 제1종동기어(216)에는 외주연에서 일정길이 돌출되게 구성되어, 받침대(120)에 구성된 스톱퍼(126)에 의해 회전각도가 단속될 수 있도록 지지하는 적어도 하나 이상의 스톱핀(216a)이 구성된다.
위치변환부(20)에는 팬 모듈(210)의 상단에 안착되어 제1지지브라켓(220)이 구성될 수 있다.
제1지지브라켓(220)은 팬 모듈(210)의 상단에 안착되어, 팬 모듈(210)의 회전에 의해 동반 회전함과 함께, 제2지지브라켓(230)을 지지한다.
제1지지브라켓(220)은 평탄한 모양으로 형성되어, 제1종동기어(216)의 상단에 안착되는 제1수평고정대(222)가 구성될 수 있다.
또한, 제1수평고정대(222)에는 중앙에 관통되게 구성되어, 제어부(50)를 통해 제공되는 전기적 연결선 또는 전원을 공급하는 전선 등이 출입할 수 있도록 제3관통공(2222)이 형성된다.
또한, 제1수평고정대(222)에는 체결수단에 의해 제1종동기어(216)에 확고하게 고정된 상태를 유지함으로써, 제1종동기어(216)와 동반 회전되도록 지지하는 적어도 하나 이상의 제3체결공(2224)이 구성된다.
또한, 제1수평고정대(222)의 양단 각각에는 일정높이 세워지도록 구성되어, 제2지브라켓(230) 및 틸팅 모듈(240)의 안정적으로 장착될 수 있도록 지지하는 제1수직고정대(224)가 구성될 수 있다.
제1수직고정대(224)는 제1수평고정대(222)의 양단 각각에 일정높이로 세워지도록 복수로 구성되어, 제2지지브라켓(230)이 일정높이에 위치되도록 지지함으로써, 제2지지브라켓(230)의 상, 하방향의 일정범위에서 회전 즉, 틸팅이 원활하게 이루어질 수 있도록 한다.
또한, 복수의 제1수직고정대(224)에는 제2지지브라켓(230)의 양단 각각이 삽입됨으로써, 제2지지브라켓(230)의 회전이 원활하게 이루어지도록 지지하는 삽입공(2242)이 형성된다.
삽입공(2242)은 복수의 제1수직고정대(224) 각각에 형성되어, 제2지지브라켓(230)의 양단 각각이 삽입됨으로써, 삽입공(2242)을 중심으로 제2지지브라켓(230)이 상,하방향으로 일정각도 회전할 수 있도록 한다. 이 경우, 삽입공(2242)은 제1수직지지대(224)에 관통되게 형성되거나, 또는 일정깊이로 형성될 수 있는 것으로서, 제2지지브라켓(230)이 상, 하방향으로 원활하게 회전할 수 있는 구조 또는 형상이면 어느 것이든 채용 가능하다.
또한, 복수의 제1수직고정대(224) 중 어느 하나에는 틸팅 모듈(240)의 제2스텝모터가 체결수단에 의해 고정될 수 있도록 하는 적어도 하나 이상의 제4체결공(2244)이 형성된다. 이 경우, 제4체결공(2244)은 삽입공(2242)의 하방에 형성된다.
또한, 복수의 제1수직고정대(224) 사이에는 제1수직고정대(224) 사이의 간격을 유지시키도록 지지하는 간격유지대(226)가 구성된다. 이 경우, 간격유지대(226)는 복수의 제1수직고정대(224)의 상단에 구성된다. 물론, 이에 한정하는 것은 아니며, 간격유지대(226)는 제2지지브라켓(230) 및 틸팅 모듈(240)의 구성상태 등에 따라 다양한 위치에 적어도 하나 이상이 구성될 수 있으며, 경우에 따라 간격유지대(226)를 생략할 수 있다.
한편, 제1지지브라켓(220)은 제1수평고정대(222)와 제1수직고정대(224) 및 간격유지대(226)가 조립식으로 구성됨으로써, 제2지지브라켓(230)와 틸팅 모듈(240)의 원활한 조립이 이루어질 수 있도록 한다.
제2지지브라켓(230)은 제1지지브라켓(220)에 지지되도록 구성되어, 틸팅 모듈(240)에 의해 상, 하방향으로 일정각도 회전되도록 한다.
제2지지브라켓(230)은 평탄하게 형성되어, 상단에 촬영부(30)가 고정되도록 지지하는 제2수평고정대(232)가 구성될 수 있다.
제2수평고정대(232)에는 일정크기로 관통되게 구성되어, 제어부(50)를 통해 제공되는 전기적 연결선 또는 전원을 공급하는 전선 등이 출입할 수 있도록 제4관통공(2322)이 형성된다.
또한, 제2수평고정대(232)에는 양단 각각에 일정높이로 세워지도록 구성되는 복수의 제2수직고정대(234)가 구성될 수 있다.
복수의 제2수직고정대(234)에는 일정길이로 돌출되게 구성되어, 제1수직고정대(224)에 형성된 삽입공(2242)에 삽입됨으로써, 삽입공(2242)을 기준으로 상, 하방향으로 일정각도 회전할 수 있도록 지지하는 삽입축(2342)이 형성된다.
삽입축(2342)은 복수의 제2수직고정대(234) 각각에서 일정길이로 돌출되게 형성되어, 제1수직고정대(224)의 삽입공(2242)에 삽입이 이루어짐으로써, 제1지지브라켓(220)을 기준으로 제2지지브라켓(230)이 상, 하방향으로 일정각도 회전이 원활하게 이루어질 수 있도록 한다. 이 경우, 삽입축(2342)에는 제2지지브라켓(230)의 원활한 회전이 이루어질 수 있도록 지지하는 베어링 또는 부싱 등을 구성할 수 있고, 또는, 삽입공(2242)에 삽입축(2342)의 임의 이탈을 방지하도록 멈춤링 등이 구성될 수도 있다.
또한, 복수의 제2수직고정대(234) 중 어느 하나에는 틸팅 모듈(240)의 제2종동기어가 체결수단에 의해 고정될 수 있도록 지지하는 적어도 하나 이상의 제5체결공(2344)이 형성된다. 이 경우, 제5체결공(2344)은 틸팅 모듈(240)이 구성되는 위치 즉, 복수의 제1수직고정대(224) 중 제4체결공(2244)이 형성된 제1수직고정대(224)와 이웃하는 제2수직고정대(234)에 형성된다.
틸팅 모듈(240)은 제2지지브라켓(230)의 일측에 구성되어, 제어부(50)의 제어신호에 따라 제2지지브라켓(230)을 상방향 또는 하방향으로 일정각도 회전시키도록 한다.
틸팅 모듈(240)은 제어부(50)의 제어신호에 따라 정회젼력 또는 역회전력을 발생시키도록 하는 제2스텝모터(242)를 구성할 수 있다. 이 경우, 제2스텝모터(242)는 체결수단에 의해 복수의 제1수직고정대(224) 중 제4체결공(2244)가 형성된 제1수직고정대(224)에 고정된다.
또한, 제2스텝모터(242)에는 연장축에 고정되어, 제2스텝모터(242)에서 발생된 정회전력 또는 역회전력에 의해 정, 역회전하는 제2원동기어(244)가 구성될 수 있다. 이 경우, 제2원동기어(244)는 제1 및 제2수직고정대(224)(234) 사이에 구성된다.
또한, 틸팅 모듈(240)에는 체결수단에 의해 복수의 제2수직고정대(234) 중 제5체결공(2344)가 형성된 제2수직고정대(234)에 고정되는 제2종동기어(246)가 구성될 수 있다. 이 경우, 제2종동기어(246)는 제1 및 제2수직고정대(224)(234) 사이에 구성되되, 제2원동기어(244)와 치합되도록 구성됨으로써, 제2원동기어(244)의 정회전 또는 역회전을 제공받아 제2지지브라켓(230)이 상,하방향으로 일정각도 회전할 수 있도록 한다.
촬영부(30)는 제2지지브라켓(230)에 장착되도록 구성되어, 위치변환부(20)의 팬 모듈(210) 또는 틸팅 모듈(240)의 작용에 의해 좌, 우방향 또는 상,하방향으로 이동하면서 전망을 촬영한다.
촬영부(30)는 카메라(310), 렌즈(320), 어댑터(330) 및 고정브라켓(340)을 포함한다.
카메라(310)는 제어부(50)의 제어신호에 따라 전망을 촬영하여 영상을 획득할 수 있다. 획득한 영상은 제어부(50)에 입력되어 디스플레이(430)에 표시될 수 있다.
본 발명의 실시예에 따른 카메라(310)는 제어부(50)의 제어가 용이한 디지털 방식의 해상도 및 선명한 영상의 획득이 용이한 산업용 카메라임이 더욱 바람직하다.
렌즈(320)는 카메라(310)의 일단에 구성되어, 줌인(Zoom IN)/아웃(OUT) 기능을 가짐에 따라 원거리의 전망에 대한 영상의 획득이 용이하도록 한다. 이 경우, 렌즈(320)는 제어부(50)의 제어신호에 따라 줌인/아웃의 제어가 가능한 디지털 렌즈임이 바람직하다. 예컨대, 렌즈(320)는 DSLR용 렌즈이다.
어댑터(330)는 카메라(310)와 렌즈(320) 사이에 구성되어, 카메라(310)와 렌즈(320)의 용이한 장착이 이루어질 수 있도록 지지한다.
고정브라켓(340)은 제2지지브라켓(230)에 촬영부(30)가 체결수단에 의해 안정적으로 고정될 수 있도록 지지한다. 예컨대, 고정브라켓(340)은 렌즈(320)의 일측에 구성되어, 체결수단에 의해 제2지지브라켓(230)의 제2수평고정대(232)에 고정되도록 한다.
하우징(40)은 지지대(10)에 구성되어, 위치변환부(20)와 촬영부(30)가 외부로 노출되지 않도록 하여 보호하도록 하는 기능을 수행함과 함께, 외부에서 사용자가 촬영부(30)를 통해 촬영된 스냅사진을 육안으로 용이하게 확인할 수 있음에 따라 전망효율이 극대화되도록 한다.
하우징(40)은 덮개(410), 디스플레이(420) 및 보호창(430) 등을 포함할 수 있다.
덮개(410)는 내측에 위치변환부(20) 및 촬영부(30)가 위치되되, 상, 하, 좌, 우가 막힘되도록 하여, 위치변환부(20)와 촬영부(30)가 외부로 노출됨을 방지하고, 양단 각각이 개구되도록 형성된다. 이 경우, 덮개(410)의 하단은 체결수단에 의해 받침판(120)의 제1체결공(128)에 체결됨에 따라 고정되도록 한다.
디스플레이(420)는 덮개(410)의 일단에 구성되어, 촬영부(30)를 통해 촬영된 영상이 실시간으로 표시되도록 함으로써, 주변경관을 전망하는 효과를 가지도록 한다. 이 경우, 디스플레이(420)는 영상을 표시할 수 있는 LED, OLED, 또는 플라즈마로 이루어진 디스플레이이다. 바람직하게는 사용자가 화면을 보면서 전망 위치 방향조절 또는 줌인/아웃을 병행할 수 있도록 하는 터치스크린이다.
즉, 디스플레이(420)는 촬영부(30)와 연결된 위치 변환부(20)를 통해 촬영부(30)의 팬 및 틸팅 제어를 위한 입력 인터페이스로 이용될 수 있다.
또한, 디스플레이(420)는 촬영부(30)의 렌즈(320)의 줌인/줌아웃 제어를 위한 입력 인터페이스로 이용될 수 있다.
본 발명의 실시예에서 입력 인터페이스는 디스플레이(420) 상에서의 상하좌우의 터치 조작, 특정 두지점의 간격을 줄이거나 늘이는 터치 조작을 의미할 수 있다.
이러한 터치 조작에 따른 사용자 입력은 제어부(50)에 입력되며, 제어부(50)는 사용자 입력에 따라 위치 변환부(20) 또는 렌즈(320)를 제어할 수 있다.
보호창(430)은 덮개(410)의 타단 즉, 디스플레이(420)의 대응되는 방향에 구성되어, 촬영부(30)를 보호함과 함께, 촬영부(30)를 통해 전망의 촬영이 원활하게 수행될 수 있도록 지지한다. 이 경우, 보호창(430)은 투명의 강화유리로 형성된다.
한편, 디스플레이(420)와 보호창(430)은 덮개(410)에 대하여 밀폐되게 구성됨으로써, 하우징(40)의 내측에 구성된 위치변환부(20) 및 촬영부(30)로 이물질의 침투를 방지시켜 위치변환부(20) 및 촬영부(30)의 보호와 함께 이물질에 의한 오작동을 방지하도록 한다.
제어부(50)는 디스플레이(420)을 통해 사용자의 방향조절 또는 줌인/아웃의 조절에 따른 제어신호를 위치변환부(20) 또는 촬영부(30)로 전송하여, 사용자가 원하는 영상을 획득시키고, 획득한 영상이 디스플레이(420)에 표시되도록 제어한다.
또한, 제어부(50)는 지지대(10)의 지주(110)가 승강식으로 구성될 경우, 사용자의 신체조건에 따라 승강될 수 있도록 제어함으로써, 사용의 편의성을 가지도록 한다.
상술한 바와 같은 PTZ 기능을 갖는 전망대 카메라의 경우 스톱퍼(126)를 이용하여 위치변환부(20)의 회전각도를 기구적으로 제한할 수 있도록 지지하는 것으로 예를 들어 설명하였지만, 도 12에 도시된 바와 같이, 제 1 센서(500)를 이용하여 위치 변환부(20)의 회전 각도를 제한할 수 있을 뿐만 아니라 제 2 센서(502)를 이용하여 틸팅 모듈(240)의 틸팅 각도를 제한할 수 있다.
즉, 제 1 센서(500)는 팬 모듈(210)에 연결되어 촬영부(30)가 좌 및 우 방향으로 패닝됨에 따라 패닝 각도(회전 각도)를 센싱하고, 제 2 센서(502)는 틸팅 모듈(240)에 연결되어 촬영부(30)가 상하 방향으로 틸팅됨에 따라 이에 대한 틸팅 각도를 센싱할 수 있다. 이렇게 센싱된 패닝 각도 및 틸팅 각도는 제어부(50)에 제공될 수 있다.
이에 따라, 제어부(50)는 패닝 각도 및 틸팅 각도를 토대로 제1,2스텝모터(212, 242)의 구동을 제어할 수 있다. 즉, 제어부(50)는 일정 각도 이상으로 촬영부(30)가 패닝되거나 틸팅되지 않도록 제1,2스텝모터(212, 242)를 제어할 수 있다.
이하에서는 메타 라이브 서비스를 제공하는 과정에 대해 도 13 내지 도 15를 참조하여 설명하기로 한다.
도 13은 본 발명의 실시예에 따른 영상 제공 장치가 영상을 전송하는 과정을 도시한 흐름도이다.
도 13에 도시된 바와 같이, 영상 제공 장치(510)는 사용자측 단말기(530)의 메타 라이브 서비스 요청을 서비스 제공 서버(520)를 통해 수신함에 따라 영상 제공 장치(510)는 촬영부(30)에 의해 촬영된 라이브 영상을 서비스 제공 서버(520)에 전송한다(S600).
그런 다음, 오프라인 상에서의 사용자 제어가 발생되면(S602), 즉, 상하좌우 및 줌 이동 중 어느 하나의 이동을 위한 사용자 입력이 발생됨에 따라 영상 제공 장치(510)의 제어부(50)는 사용자 입력에 따라 촬영부(30)를 제어한다.
촬영부(30)에 대한 제어가 완료된 후 기 설정된 임계 시간이 경과되면(S604), 영상 제공 장치(510)의 제어부(50)는 촬영부(30)의 동작을 통해 영상을 촬영하여 라이브 영상을 전송한다(S606).
도 14는 본 발명의 실시예에 따른 서비스 제공 서버가 메타 라이브 서비스를 제공하는 과정을 도시한 흐름도이다.
도 14에 도시된 바와 같이, 서비스 제공 서버(520)는 영상 제공 장치(510)로부터 제 1 라이브 영상이 수신됨에 따라 제 1 라이브 영상에 대한 분석을 통해 가이드 포인트를 추출한다(S610, S612).
그런 다음, 서비스 제공 서버(520)는 제 1 라이브 영상을 이용하여 배경용 레이어를 생성함과 더불어 사용자가 선택한 아바타 및 지면을 포함한 가상 현실용 레이어 및 가이드 포인트에서 제공될 콘텐츠가 매칭된 증강 현실용 레이어를 생성(S614)하며, 배경용 레이어, 가상 현실용 레이어 및 증강 현실용 레이어를 병합한 병합 데이터를 생성한 후 이를 통해 메타 라이브 서비스를 사용자측 단말기(520)에 제공한다(S616).
이후, 영상 제공 장치(510)로부터 제 2 라이브 영상이 수신되면(S618), 서비스 제공 서버(520)는 제 1 라이브 영상과 제 2 라이브 영상간의 비교를 통해 배경 영역의 변경이 필요한지를 판단(S620)한다. 구체적으로, 서비스 제공 서버(520)는 제 1 라이브 영상과 제 2 라이브 영상간의 비교를 통해 변화도를 계산하며, 변화도가 기 설정된 임계 범위를 벗어나는지의 여부를 체크하여 배경 영역의 변경이 필요한지를 판단할 수 있다.
S620의 판단 결과, 배경 영역의 변경이 필요한 경우, 서비스 제공 서버(520)는 제 2 라이브 영상을 이용하여 배경용 레이어를 생성하며, 제 2 라이브 영상 내 가이드 포인트를 추출한 후 가이드 포인트를 통해 제공될 콘텐츠가 매칭된 증강 현실용 레이어, 배경용 레이어 및 가상 현실용 레이어를 병합한 병합 데이터를 재생성한 후 이를 토대로 메타 라이브 서비스되는 영상을 변경시킨다(S622).
상술한 바와 같은 본 발명의 실시예에서는 생략되었지만, 가상 현실용 레이어는 경우 라이브 영상을 전송한 영상 제공 장치(510)가 설치된 장소의 날씨와 계절 또는 사용자가 설정한 날씨와 계절에 따라 날씨 및 계절에 맞도록 변경되어 적용될 수도 있다.
또한, 제 2 라이브 영상은 도 13에 도시된 바와 같이 오프라인 제어 상태로 영상 제공 장치(510)가 제어되는 과정에서 수신되거나 사용자측 단말기(530)의 제어 요청에 따라 영상 제공 장치(510)가 제어되는 경우 수신될 수 있다.
도 15는 본 발명의 실시예에 따른 영상 제공 장치가 온라인 제어가 불가능한 경우 메타 라이브 서비스를 제공하는 과정을 도시한 흐름도이다.
도 15에 도시된 바와 같이, 서비스 제공 서버(520)는 메타 라이브 서비스 요청에 따라 가상 카메라 시점을 설정하기 위한 설정용 영상을 사용자측 단말기(530)에 제공한다(S630). 여기에서, 가상 카메라 시점은 서비스 제공 서버(520)에 의해 생성된 가상 카메라 머신이 보는 방향을 의미할 수 있으며, 설정용 영상은 서비스 제공 서버(520)에 의해 생성된 360도 영상 중 특정 부분을 추출한 이미지를 토대로 생성될 수 있다.
이후, 사용자측 단말기(530)에서 가상 카메라 시점이 설정, 예컨대 설정용 영상에서 소정의 이미지를 선택함에 따라 서비스 제공 서버(520)는 선택된 이미지를 바라보는 가상 카메라 시점을 갖는 가상 카메라 머신을 생성한다(S632).
그런 다음, 서비스 제공 서버(520)는 가상 카메라 시점에 대응되는 영상을 이용하여 배경용 레이어를 생성(S634)한 후 배경용 레이어, 가상 현실용 레이어 및 증강 현실용 레이어를 병합한 병합 데이터를 이용하여 메타 라이브 서비스를 사용자측 단말기(530)에 제공한다(S636). 이때, 서비스 제공 서버(520)는 사용자측 단말기(530)에 가상 카메라 머신의 팬, 틸트 및 줌 제어가 가능한 제어용 인터페이스를 제공할 수 있다.
이후, 제어용 인터페이스를 통해 가상 카메라 머신의 팬, 틸트 및 줌 제어 중 어느 하나의 제어 요청이 수신(S638)되면, 서비스 제공 서버(520)는 제어 요청에 따라 가상 카메라 머신을 제어(S640)함으로써, 가상 카메라 머신의 가상 카메라 시점을 변경시킨다.
그리고나서, 서비스 제공 서버(520)는 변경된 가상 카메라 시점에 따른 영상, 즉 상하 또는 줌 이동에 따른 가상 카메라 머신이 보는 영상을 이용하여 배경용 레이어를 생성(S642)한 후 배경용 레이어, 가상 현실용 레이어 및 증강 현실용 레이어를 병합한 병합 데이터를 재생성한 후 이를 토대로 메타 라이브로 사용자측 단말기(530)에 서비스되는 영상을 변경(S644)시킨다.
이상에서 설명한 것은 실시하기 위한 하나의 실시 예에 불과한 것으로서, 본 발명은 상기한 실시 예에 한정되지 아니한다. 본 발명에 속하는 분야에서 통상의 지식을 가진 자라면, 본 발명의 요지를 벗어남이 없이 다양한 변경실시가 가능하다는 것을 이해할 수 있을 것이다.
10 : 지지대
20 : 위치 변환부
30 : 촬영부
40 : 하우징
50 : 제어부
510 : 영상 제공 장치
520 : 서비스 제공 서버
525 : 데이터베이스
530 : 사용자측 단말기

Claims (13)

  1. 소정의 장소에 설치되어 바라보는 방향에 대한 라이브 영상을 표시해주고 설치된 지점을 기준으로 상하좌우 및 줌 이동이 가능하며, 상기 상하좌우 및 줌 이동에 따라 변경되는 라이브 영상을 변경시켜 터치형 디스플레이에 표시해주며, 상기 라이브 영상을 네트워크를 통해 송출하는 영상 제공 장치와,
    상기 영상 제공 장치와 네트워크로 연결되어 상기 라이브 영상을 수신하며, 상기 라이브 영상과 가상 현실용 레이어가 병합된 병합 데이터를 이용하여 메타 라이브 서비스를 상기 네트워크를 통해 접속한 사용자측 단말기에 제공하는 서비스 제공 서버를 포함하며,
    상기 영상 제공 장치는 PTZ(Pan Tilt Zoom) 제어가 가능하며, PTZ의 제어를 통해 상하좌우 이동과 줌 이동이 가능한 망원경이며,
    지주에 의해 지면으로부터 소정 간격만큼 이격된 위치에 지지되는 하우징과,
    상기 하우징의 내부에 형성되고 줌 기능을 갖는 촬영부와,
    상기 촬영부와 연결되어 팬(Pan) 및 틸팅 제어를 위한 위치 변환부와,
    상기 하우징에 형성되되, 상기 촬영부가 촬영하는 방향의 반대면에 형성된 사용자 입력이 가능한 상기 터치형 디스플레이와,
    상기 사용자 입력에 따라 인가되는 제어 신호에 의거하여 상기 촬영부를 좌 및 우 방향으로 패닝시키는 제1스텝 모터로 구성된 팬 모듈과, 상기 사용자 입력에 따라 인가되는 제어 신호에 의거하여 상기 촬영부를 상하 방향으로 틸팅시키는 제2스텝모터로 구성된 틸팅 모듈을 포함하는 위치 변환부와,
    상기 터치형 디스플레이를 통해 상기 사용자 입력이 입력됨에 따라 제어 신호를 상기 촬영부 및 상기 위치 변환부 중 어느 하나에 인가하여 줌 상태의 제어, 팬 제어 또는 틸팅 제어를 수행하는 제어부와,
    상기 팬 모듈이 삽입되어 상기 팬 모듈의 회전을 지지하는 안착홈과,
    상기 팬 모듈의 상단에 안착되어 상기 팬 모듈에 의해 회전되되, 제1수평고정대와 상기 제1수평고정대의 양단에 형성된 제1수직고정대를 포함하는 제1지지브라켓과,
    양단이 상기 제1수직고정대 각각에 결합되고 상기 촬영부가 틸팅 가능하도록 안착되며, 상기 틸팅 모듈이 연결된 제2지지브라켓을 포함하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  2. 제1항에 있어서,
    상기 영상 제공 장치는,
    PTZ(Pan Tilt Zoom) 제어가 가능하며, 상기 PTZ의 제어를 통해 상기 상하좌우 이동과 줌 이동이 가능한 망원경인 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  3. 제1항에 있어서,
    상기 영상 제공 장치는,
    상기 라이브 영상에 대한 배경용 레이어, 상기 라이브 영상 내 복수의 콘텐츠를 서비스하기 위한 증강 현실용 레이어 및 상기 라이브 영상 내 가상 현실 서비스를 위한 가상 현실용 레이어를 병합하여 상기 디스플레이 상에 표시하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  4. 제1항에 있어서,
    상기 영상 제공 장치는,
    상기 사용자측 단말기의 제어 요청에 의거하여 상기 서비스 제공 서버에 의해 상하좌우 및 줌 제어되는 온라인 제어 상태 또는 설치된 장소에서의 사용자에 의한 제어인 오프라인 제어 상태로 동작하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  5. 제4항에 있어서,
    상기 서비스 제공 서버는,
    상기 영상 제공 장치로부터 수신되는 라이브 영상을 이용하여 360도 배경 영상을 생성한 후 이를 데이터베이스에 저장하며,
    상기 영상 제공 장치가 오프라인 제어 상태인 상태에서 유무선 네트워크를 통해 사용자측 단말기로부터 접속 요청이 수신됨에 따라 가상 카메라 시점을 설정할 수 있는 인터페이스를 상기 사용자측 단말기에 제공한 후 상기 인터페이스를 통해 설정된 가상 카메라 시점(360도 영상의 일부분을 바라보는 방향)을 갖는 가상 카메라 머신을 생성하며, 상기 생성한 가상 카메라 머신을 이용하여 배경용 레이어가 생성하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  6. 제5항에 있어서,
    상기 서비스 제공 서버는,
    상기 생성한 가상 카메라 머신의 가상 카메라 시점에서 상기 가상 카메라 머신에 대한 상하좌우 및 줌 이동의 제어가 가능한 제어용 인터페이스를 상기 사용자측 단말기에 제공하며, 상기 제어용 인터페이스를 통한 제어 요청이 수신됨에 따라 상기 가상 카메라 머신을 제어하여 라이브 영상에 대응되는 배경용 레이어를 생성하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  7. 제1항 내지 제6항 중 어느 한항에 있어서,
    상기 서비스 제공 서버는,
    환경을 설정할 수 있는 환경 설정용 인터페이스를 상기 사용자측 단말기에 제공하며, 상기 환경 설정용 인터페이스에 의해 설정된 환경에 따라 환경용 레이어를 생성하며, 상기 환경용 레이어 및 배경용 레이어를 이용하여 상기 병합 데이터를 생성한 후 이를 토대로 메타 라이브 서비스를 제공하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  8. 제1항에 있어서,
    상기 서비스 제공 서버는,
    사용자가 선택한 아바타 및 지면의 형상을 포함한 가상 현실용 레이어를 생성하며, 상기 라이브 영상에 대응되는 배경용 레이어, 가상 현실용 레이어 및 복수의 콘텐츠의 제공을 위한 증강 현실용 레이어를 병합한 병합 데이터를 이용하여 상기 사용자측 단말기에 메타 라이브 서비스를 제공하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  9. 제1항에 있어서,
    상기 서비스 제공 서버는,
    상기 영상 제공 장치로부터 수신되는 라이브 영상의 변화도를 계산하며, 상기 변화도를 기반으로 상기 사용자측 단말기에 스트리밍되는 메타 라이브 서비스에 대응되는 영상에서의 배경용 레이어의 변경 여부를 결정하는 것을 특징으로 하는 메타 라이브 서비스 제공 시스템.
  10. 소정의 장소에 설치되어 바라보는 방향에 대한 라이브 영상을 표시해주고 설치된 지점을 기준으로 상하좌우 및 줌 이동이 가능하며, 상기 상하좌우 및 줌 이동에 따라 변경되는 라이브 영상을 변경시켜 디스플레이에 표시해주며, 상기 라이브 영상을 네트워크를 통해 송출하는 영상 제공 장치를 이용한 메타 라이브 서비스 제공 방법에 있어서,
    상기 영상 제공 장치는 PTZ(Pan Tilt Zoom) 제어가 가능하며, PTZ의 제어를 통해 상하좌우 이동과 줌 이동이 가능한 망원경이며,
    지주에 의해 지면으로부터 소정 간격만큼 이격된 위치에 지지되는 하우징과,
    상기 하우징의 내부에 형성되고 줌 기능을 갖는 촬영부와,
    상기 촬영부와 연결되어 팬(Pan) 및 틸팅 제어를 위한 위치 변환부와,
    상기 하우징에 형성되되, 상기 촬영부가 촬영하는 방향의 반대면에 형성된 사용자 입력이 가능한 터치형 디스플레이와,
    상기 사용자 입력에 따라 인가되는 제어 신호에 의거하여 상기 촬영부를 좌 및 우 방향으로 패닝시키는 제1스텝 모터로 구성된 팬 모듈과, 상기 사용자 입력에 따라 인가되는 제어 신호에 의거하여 상기 촬영부를 상하 방향으로 틸팅시키는 제2스텝모터로 구성된 틸팅 모듈을 포함하는 위치 변환부와,
    상기 터치형 디스플레이를 통해 상기 사용자 입력이 입력됨에 따라 제어 신호를 상기 촬영부 및 상기 위치 변환부 중 어느 하나에 인가하여 줌 상태의 제어, 팬 제어 또는 틸팅 제어를 수행하는 제어부와,
    상기 팬 모듈이 삽입되어 상기 팬 모듈의 회전을 지지하는 안착홈과,
    상기 팬 모듈의 상단에 안착되어 상기 팬 모듈에 의해 회전되되, 제1수평고정대와 상기 제1수평고정대의 양단에 형성된 제1수직고정대를 포함하는 제1지지브라켓과,
    양단이 상기 제1수직고정대 각각에 결합되고 상기 촬영부가 틸팅 가능하도록 안착되며, 상기 틸팅 모듈이 연결된 제2지지브라켓을 포함하며,
    상기 방법은,
    상기 영상 제공 장치와 네트워크를 통해 연결된 서비스 제공 서버에서 네트워크를 통해 연결된 사용자측 단말기로부터 메타 라이브 서비스 요청을 수신하는 단계와,
    상기 메타 라이브 서비스 요청에 따라 상기 영상 제공 장치로부터 라이브 영상을 수신하는 단계와,
    상기 라이브 영상과 가상 현실용 레이어가 병합된 병합 데이터를 이용하여 상기 네트워크를 통해 접속한 사용자측 단말기에 메타 라이브 서비스를 제공하는 단계를 포함하는 것을 특징으로 하는 메타 라이브 서비스 제공 방법.
  11. 제10항에 있어서,
    상기 메타 라이브 서비스 제공 방법은,
    상기 메타 라이브 서비스 요청이 수신됨에 따라 환경을 설정할 수 있는 환경 설정용 인터페이스를 상기 사용자측 단말기에 제공하는 단계를 포함하며,
    상기 메타 라이브 서비스를 제공하는 단계는,
    상기 라이브 영상이 수신됨에 따라 상기 환경 설정용 인터페이스에 의해 설정된 환경에 따라 환경용 레이어를 생성하며, 상기 환경용 레이어 및 배경용 레이어를 이용하여 상기 병합 데이터를 생성한 후 이를 토대로 메타 라이브 서비스를 제공하는 것을 특징으로 하는 메타 라이브 서비스 제공 방법.
  12. 제10항에 있어서,
    상기 메타 라이브 서비스를 제공하는 단계는,
    사용자가 선택한 아바타 및 지면의 형상을 포함한 가상 현실용 레이어를 생성하는 단계와,
    상기 라이브 영상에 대응되는 배경용 레이어 및 상기 라이브 영상을 기반으로 복수의 콘텐츠의 제공을 위한 증강 현실용 레이어를 상기 가상 현실용 레이어에 병합하여 병합 데이터를 생성하는 단계와,
    상기 병합 데이터를 이용하여 메타 라이브 서비스를 제공하는 단계를 포함하는 것을 특징으로 하는 메타 라이브 서비스 제공 방법.
  13. 제10항에 있어서,
    상기 메타 라이브 서비스 제공 방법은,
    상기 영상 제공 장치로부터 실시간으로 라이브 영상을 수신하는 단계와,
    상기 수신한 라이브 영상간의 변화도를 계산하는 단계와,
    상기 메타 라이브 서비스를 제공하는 단계는,
    상기 변화도를 기반으로 상기 사용자측 단말기에 스트리밍되는 메타 라이브 서비스에 대응되는 영상에서의 배경용 레이어의 변경 여부를 결정하는 것을 특징으로 하는 메타 라이브 서비스 제공 방법.
KR1020230059107A 2023-05-08 2023-05-08 메타 라이브 서비스 제공 시스템 및 방법 KR102653243B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020230059107A KR102653243B1 (ko) 2023-05-08 2023-05-08 메타 라이브 서비스 제공 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020230059107A KR102653243B1 (ko) 2023-05-08 2023-05-08 메타 라이브 서비스 제공 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR102653243B1 true KR102653243B1 (ko) 2024-04-02

Family

ID=90714558

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020230059107A KR102653243B1 (ko) 2023-05-08 2023-05-08 메타 라이브 서비스 제공 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102653243B1 (ko)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120076175A (ko) * 2010-12-29 2012-07-09 건아정보기술 주식회사 고유식별 정보를 이용한 3차원 실시간 거리뷰시스템
KR101770648B1 (ko) 2016-05-18 2017-08-23 주식회사 큐픽스 파노라마와 3차원 건물평면도 기반 실내 가상체험 제공 방법, 이를 이용한 휴대용 단말기 및 그 동작 방법
KR20180028796A (ko) * 2016-09-09 2018-03-19 삼성전자주식회사 이미지 표시 방법, 저장 매체 및 전자 장치
KR101922968B1 (ko) * 2017-07-12 2018-11-28 주식회사 볼트홀 Vr 콘텐츠에 대한 라이브 스트리밍 방법 및 시스템
KR102300285B1 (ko) * 2021-03-16 2021-09-10 (주)브이에이커뮤니케이션즈 Ar 기반 컨텐츠 3d 매핑 방법 및 시스템
KR20220125813A (ko) * 2019-12-04 2022-09-14 로브록스 코포레이션 하이브리드 스트리밍

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120076175A (ko) * 2010-12-29 2012-07-09 건아정보기술 주식회사 고유식별 정보를 이용한 3차원 실시간 거리뷰시스템
KR101770648B1 (ko) 2016-05-18 2017-08-23 주식회사 큐픽스 파노라마와 3차원 건물평면도 기반 실내 가상체험 제공 방법, 이를 이용한 휴대용 단말기 및 그 동작 방법
KR20180028796A (ko) * 2016-09-09 2018-03-19 삼성전자주식회사 이미지 표시 방법, 저장 매체 및 전자 장치
KR101922968B1 (ko) * 2017-07-12 2018-11-28 주식회사 볼트홀 Vr 콘텐츠에 대한 라이브 스트리밍 방법 및 시스템
KR20220125813A (ko) * 2019-12-04 2022-09-14 로브록스 코포레이션 하이브리드 스트리밍
KR102300285B1 (ko) * 2021-03-16 2021-09-10 (주)브이에이커뮤니케이션즈 Ar 기반 컨텐츠 3d 매핑 방법 및 시스템

Similar Documents

Publication Publication Date Title
JP7257960B2 (ja) 複合現実ビューアシステムおよび方法
US11265603B2 (en) Information processing apparatus and method, display control apparatus and method, reproducing apparatus and method, and information processing system
US9749526B2 (en) Imaging system for immersive surveillance
AU761950B2 (en) A navigable telepresence method and system utilizing an array of cameras
EP3065049A2 (en) Interactive video display method, device, and system
JP2024050721A (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
US20110254914A1 (en) Immersive viewer, a method of providing scenes on a display and an immersive viewing system
CN105684415A (zh) 球面全景视频拍摄系统
GB2414886A (en) Combining a privacy mask and an informational display of differing resolutions with a captured image
US11146744B2 (en) Automated interactive system and method for dynamically modifying a live image of a subject
CN112435558A (zh) 一种全息3d智能交互数字虚拟沙盘及其交互方法
JP2019139673A (ja) 情報処理装置、情報処理方法およびコンピュータプログラム
WO2020036644A2 (en) Deriving 3d volumetric level of interest data for 3d scenes from viewer consumption data
CN110365896B (zh) 一种控制方法及电子设备
KR102653243B1 (ko) 메타 라이브 서비스 제공 시스템 및 방법
KR100585822B1 (ko) 실시간 파노라마 비디오 영상을 이용한 감시 시스템 및 그시스템의 제어방법
US11425308B2 (en) Robotically movable display synchronously movable with robotically movable camera for displaying captured images in identical orientation
KR20150010070A (ko) 휴대단말기에서 이미지를 표시하는 방법 및 장치
JPWO2019155934A1 (ja) 画像処理装置、画像処理方法および画像処理プログラム
CN114390245A (zh) 用于视频监控系统的显示设备、视频监控系统以及方法
US10931889B1 (en) System and method for providing landscape and portrait oriented images of a common scene on separate feeds with independent image controls
CN114463520A (zh) 一种实现虚拟现实vr漫游的方法及装置
KR102588258B1 (ko) 망원경을 이용한 스트리밍 서비스 제공 시스템 및 방법
CN103458230A (zh) 一种基于状态地图的ptz控制系统及方法
KR102635711B1 (ko) 가상 관광 서비스 제공 방법 및 장치