KR20190089681A - Method and system for generating three-dimensional model for panoramic view - Google Patents

Method and system for generating three-dimensional model for panoramic view Download PDF

Info

Publication number
KR20190089681A
KR20190089681A KR1020180026701A KR20180026701A KR20190089681A KR 20190089681 A KR20190089681 A KR 20190089681A KR 1020180026701 A KR1020180026701 A KR 1020180026701A KR 20180026701 A KR20180026701 A KR 20180026701A KR 20190089681 A KR20190089681 A KR 20190089681A
Authority
KR
South Korea
Prior art keywords
dimensional model
panorama
map
generating
rti
Prior art date
Application number
KR1020180026701A
Other languages
Korean (ko)
Other versions
KR102147969B1 (en
Inventor
채명석
황호철
나종채
한인규
박은영
유찬미
Original Assignee
네이버 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 네이버 주식회사 filed Critical 네이버 주식회사
Publication of KR20190089681A publication Critical patent/KR20190089681A/en
Application granted granted Critical
Publication of KR102147969B1 publication Critical patent/KR102147969B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00—Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/003—Maps
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05—Geographic models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10032—Satellite or aerial image; Remote sensing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Computer Graphics (AREA)
  • Remote Sensing (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Processing Or Creating Images (AREA)
  • Navigation (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Instructional Devices (AREA)

Abstract

The present invention relates to a method for generating a three-dimensional model for a panoramic view which can solve a coverage problem and shorten the generation time of a three-dimensional model, and to a system thereof. The method for generating a three-dimensional model for a panoramic view comprises the steps of: generating the three-dimensional model of the panoramic view using map data of a pre-built electronic map for a map service; and providing the three-dimensional model of the panoramic view corresponding to a request of an electronic device.

Description

파노라마 뷰에 대한 ３차원 모델을 생성하는 방법 및 시스템{METHOD AND SYSTEM FOR GENERATING THREE-DIMENSIONAL MODEL FOR PANORAMIC VIEW}METHOD AND SYSTEM FOR GENERATING THREE-DIMENSIONAL MODEL FOR PANORAMIC VIEW < RTI ID = 0.0 >

아래의 설명은 파노라마 3차원 모델을 생성하는 기술에 관한 것이다.The following description relates to a technique for creating a panoramic three-dimensional model.

최근 지도 서비스에서는 실내뷰(indoor view), 거리뷰(street view), 항공뷰(aerial view) 등과 같이 전자 지도 상에 파노라마 사진을 제공함으로써 사용자가 도로, 지형, 지물 등을 시각적으로 인식할 수 있고, 더욱이 실제 공간이나 지역을 걷거나 또는 자동차나 비행기를 타고 가는 듯한 느낌의 가상 탐사 환경을 제공할 수 있다.Recently, the map service provides panoramic photographs on an electronic map such as an indoor view, a street view, an aerial view, etc., so that a user can visually recognize roads, terrain, , And can also provide a virtual exploration environment that feels like walking in a real space or area, or going on a car or airplane.

예컨대, 한국등록특허 제10-1173618호(등록일 2012년 08월 07일)에는 전자지도용 파노라마 사진 촬영 기구에 관한 기술이 개시되어 있다.For example, Korean Patent No. 10-1173618 (filed on August 07, 2012) discloses a technique relating to a panoramic photographing mechanism for electronic maps.

파노라마 뷰에 대한 3차원 모델을 재구성할 수 있는 방법 및 시스템을 제공한다.A method and system for reconfiguring a three-dimensional model for a panoramic view is provided.

지도 데이터를 이용하여 전국 단위의 파노라마 3차원 모델을 생성할 수 있는 방법 및 시스템을 제공한다.A method and system for generating a panoramic three-dimensional model on a nationwide basis using map data are provided.

3차원 지도를 생성하기 위한 뎁스맵(depthmap)을 각 파노라마 별로 운영할 수 있는 방법 및 시스템을 제공한다.There is provided a method and system for operating a depth map for each panorama to generate a three-dimensional map.

컴퓨터 시스템에서 수행되는 3차원 모델 생성 방법에 있어서, 상기 컴퓨터 시스템은 메모리에 포함된 컴퓨터 판독 가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서를 포함하고, 상기 3차원 모델 생성 방법은, 상기 적어도 하나의 프로세서에 의해, 지도 서비스를 위해 사전에 구축된 전자 지도의 지도 데이터를 이용하여 파노라마 뷰에 대한 3차원 모델을 생성하는 단계; 및 상기 적어도 하나의 프로세서에 의해, 전자 기기의 요청에 대응되는 파노라마 뷰의 3차원 모델을 제공하는 단계를 포함하는 3차원 모델 생성 방법을 제공한다.9. A method for generating a three-dimensional model in a computer system, the computer system comprising at least one processor configured to execute computer-readable instructions contained in a memory, the method comprising: Generating a three-dimensional model of the panoramic view using the map data of the electronic map constructed in advance for the map service; And providing a three-dimensional model of the panoramic view corresponding to the request of the electronic device by the at least one processor.

일 측면에 따르면, 상기 생성하는 단계는, 전자 지도 데이터베이스를 통해 이미 보유하고 있는 지도 데이터를 이용하여 상기 3차원 모델을 생성하는 단계를 포함할 수 있다.According to an aspect of the present invention, the generating may include generating the 3D model using map data already stored in the electronic map database.

다른 측면에 따르면, 상기 생성하는 단계는, 거리뷰의 파노라마에 대하여 이미 보유하고 있는 구조물의 형상과 높이 정보를 포함하는 구조물 외형 정보를 이용하여 거리뷰 3차원 모델을 생성하는 단계를 포함할 수 있다.According to another aspect, the generating step may include generating a rough-view three-dimensional model using structure contour information including the shape and height information of the structure already held for the panorama of the rough review .

또 다른 측면에 따르면, 상기 생성하는 단계는, 항공뷰의 파노라마에 대하여 이미 보유하고 있는 지형 정보인 수치 표고 모델(DEM, digital elevation model)을 이용하여 항공뷰 3차원 모델을 생성하는 단계를 포함할 수 있다.According to another aspect, the generating step includes generating an aerial view three-dimensional model using a digital elevation model (DEM), which is terrain information already possessed with respect to a panorama of the aerial view .

또 다른 측면에 따르면, 상기 생성하는 단계는, 실내뷰의 파노라마에 대하여 이미 보유하고 있는 실내의 구조와 벽 정보를 포함하는 실내 지도 정보를 이용하여 실내뷰 3차원 모델을 생성하는 단계를 포함할 수 있다.According to another aspect, the generating step may include generating an indoor view three-dimensional model using indoor map information including wall structure and indoor structure already held for the panorama of the indoor view have.

또 다른 측면에 따르면, 상기 3차원 모델 생성 방법은, 상기 적어도 하나의 프로세서에 의해, 각 파노라마에 대하여 파노라마의 위치를 기반으로 해당 위치에 대응되는 3차원 모델의 뎁스맵(depthmap)을 생성하여 해당 파노라마와 매칭시켜 관리하는 단계를 더 포함할 수 있다.According to another aspect of the present invention, there is provided a method for generating a three-dimensional model, the method comprising: generating, by the at least one processor, a depth map of a three-dimensional model corresponding to a corresponding position on the basis of a position of a panorama with respect to each panorama, And a step of matching and managing with the panorama.

또 다른 측면에 따르면, 상기 관리하는 단계는, 상기 생성된 3차원 모델에서 특정 파노라마의 위치를 기준으로 상기 특정 파노라마와 대향하고 있는 모델을 분류하는 단계; 및 상기 분류된 모델의 각 면(face)과 상기 특정 파노라마의 위치를 거리로 환산하여 뎁스맵을 만들어 상기 특정 파노라마의 식별자와 매칭시켜 저장하는 단계를 포함할 수 있다.According to another aspect of the present invention, the managing step comprises the steps of: classifying a model that is opposed to the specific panorama based on a position of a specific panorama in the generated three-dimensional model; And generating a depth map by converting the face of each of the classified models and the position of the specific panorama into a distance to match with the identifier of the specific panorama and storing the depth map.

또 다른 측면에 따르면, 상기 제공하는 단계는, 상기 전자 기기의 요청에 대응되는 파노라마와 매칭된 뎁스맵을 상기 전자 기기로 전송하는 단계를 포함하고, 상기 전자 기기의 뷰어에서 상기 전송된 뎁스맵을 이용하여 해당 파노라마에 대한 3차원 모델을 복원할 수 있다.According to another aspect of the present invention, the providing step may include transmitting a depth map matched with a panorama corresponding to a request of the electronic device to the electronic device, wherein the viewer of the electronic device transmits the transmitted depth map The 3D model of the panorama can be restored.

또 다른 측면에 따르면, 상기 관리하는 단계는, 파노라마의 좌표맵(coordmap)과 해당 파노라마의 시점과 각 오브젝트까지의 거리를 깊이 정보로 표현한 뎁스맵을 매칭시켜 관리하는 단계를 포함할 수 있다.According to another aspect of the present invention, the managing step may include a step of matching and coordinating a coordinate map of the panorama with a depth map representing the viewpoint of the panorama and the distance to each object as depth information.

또 다른 측면에 따르면, 상기 관리하는 단계는, 상기 오브젝트와 관련된 정보를 포함하는 태그맵(tagmap)을 상기 좌표맵과 매칭시켜 관리하는 단계를 더 포함할 수 있다.According to another aspect, the managing step may further include managing a tag map including information related to the object by matching with the coordinate map.

컴퓨터와 결합되어 상기 3차원 모델 생성 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램을 제공한다.There is provided a computer program stored in a computer-readable recording medium for causing a computer to execute the three-dimensional model generation method in combination with a computer.

상기 3차원 모델 생성 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록매체를 제공한다.There is provided a computer-readable recording medium having recorded thereon a program for causing a computer to execute the three-dimensional model generation method.

컴퓨터 시스템에 있어서, 메모리에 포함된 컴퓨터 판독 가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 지도 서비스를 위해 사전에 구축된 전자 지도의 지도 데이터를 이용하여 파노라마 뷰에 대한 3차원 모델을 생성하는 3차원 모델 생성부; 각 파노라마에 대하여 파노라마의 위치를 기반으로 해당 위치에 대응되는 3차원 모델의 뎁스맵을 생성하여 해당 파노라마와 매칭시켜 관리하는 3차원 모델 관리부; 및 전자 기기의 요청에 따라 상기 요청에 대응되는 파노라마와 매칭된 뎁스맵을 제공하는 3차원 모델 제공부를 포함하고, 상기 전자 기기의 뷰어에서 상기 제공된 뎁스맵을 이용하여 해당 파노라마에 대한 3차원 모델을 복원하는 것을 특징으로 하는 컴퓨터 시스템을 제공한다.What is claimed is: 1. A computer system comprising: at least one processor configured to execute computer-readable instructions contained in a memory, the at least one processor being operable to generate a panoramic view A three-dimensional model generation unit for generating a three-dimensional model for the object; A three-dimensional model management unit for generating a depth map of the three-dimensional model corresponding to the corresponding position on the basis of the position of the panorama with respect to each panorama and matching and managing the depth map with the corresponding panorama; And a 3D model providing unit for providing a depth map matched with the panorama corresponding to the request in response to the request of the electronic device, wherein the viewer of the electronic device displays a three-dimensional model of the corresponding panorama using the provided depth map The computer system comprising:

본 발명의 실시예들에 따르면, 지도의 원천 데이터를 이용하여 전국 단위의 파노라마 3차원 모델을 자동 생성함으로써 커버리지 문제를 해결하고 3차원 모델의 생성 시간을 단축시킬 수 있다.According to the embodiments of the present invention, the panorama three-dimensional model is automatically generated on a nationwide basis using the original data of the map, thereby solving the coverage problem and shortening the generation time of the three-dimensional model.

본 발명의 실시예들에 따르면, 지도의 원천 데이터를 이용하여 뎁스맵을 만들어 이를 이용함으로써 기존 파노라마 데이터로 3차원 모델을 한번에 구축할 수 있어 고가의 장비가 필요 없고 시간과 제약사항을 줄일 수 있다.According to the embodiments of the present invention, the depth map is created using the original data of the map and the 3D map is constructed using the existing panorama data at once, so that expensive equipment is not needed and time and constraints can be reduced .

본 발명의 실시예들에 따르면, 데이터 경량화를 위해 각 파노라마 별로 뎁스맵을 운영하여 3차원 지도를 생성 및 제공함으로써 네트워크 효율을 높이고 서비스 운영 비용을 절감할 수 있다.According to the embodiments of the present invention, a depth map is operated for each panorama in order to reduce the data weight, thereby generating and providing a three-dimensional map, thereby improving network efficiency and reducing service operation cost.

도 1은 본 발명의 일실시예에 따른 네트워크 환경의 예를 도시한 도면이다.
도 2는 본 발명의 일실시예에 있어서 전자 기기 및 서버의 내부 구성을 설명하기 위한 블록도이다.
도 3은 본 발명의 일실시예에 따른 서버의 프로세서가 포함할 수 있는 구성요소의 예를 도시한 블록도이다.
도 4는 본 발명의 일실시예에 따른 서버가 수행할 수 있는 방법의 예를 도시한 흐름도이다.
도 5 내지 도 7은 본 발명의 일실시예에 있어서 3차원 모델을 구축하는 과정을 설명하기 위한 예시 도면이다.
도 8은 본 발명의 일실시예에 있어서 뎁스맵 데이터의 예시를 도시한 것이다.
도 9 내지 도 11은 본 발명의 일실시예에 있어서 복원된 3차원 모델의 예시를 도시한 것이다.1 is a diagram illustrating an example of a network environment according to an embodiment of the present invention.
2 is a block diagram for explaining an internal configuration of an electronic device and a server in an embodiment of the present invention.
FIG. 3 is a block diagram illustrating an example of components that a processor of a server according to an embodiment of the present invention may include.
4 is a flowchart illustrating an example of a method that a server according to an embodiment of the present invention can perform.
FIGS. 5 to 7 are exemplary diagrams illustrating a process of constructing a three-dimensional model in an embodiment of the present invention.
FIG. 8 shows an example of depth map data in an embodiment of the present invention.
9 to 11 illustrate examples of a restored three-dimensional model in an embodiment of the present invention.

이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 발명의 실시예들은 파노라마 뷰에 대한 3차원 모델을 생성하는 방법 및 시스템 에 관한 것이다.Embodiments of the invention relate to a method and system for generating a three-dimensional model for a panoramic view.

본 명세서에서 구체적으로 개시되는 것들을 포함하는 실시예들은 지도 데이터를 이용하여 파노라마 뷰에 대한 3차원 모델을 재구성할 수 있고, 이를 통해 데이터 경량화, 네트워크 효율성, 비용 절감 등의 측면에 있어서 상당한 장점들을 달성할 수 있다.Embodiments, including those specifically disclosed herein, can reconstruct a three-dimensional model of a panoramic view using map data, thereby achieving significant advantages in terms of data weight, network efficiency, cost savings, etc. can do.

도 1은 본 발명의 일실시예에 따른 네트워크 환경의 예를 도시한 도면이다. 도 1의 네트워크 환경은 복수의 전자 기기들(110, 120, 130, 140), 복수의 서버들(150, 160) 및 네트워크(170)를 포함하는 예를 나타내고 있다. 이러한 도 1은 발명의 설명을 위한 일례로 전자 기기의 수나 서버의 수가 도 1과 같이 한정되는 것은 아니다.1 is a diagram illustrating an example of a network environment according to an embodiment of the present invention. 1 shows an example in which a plurality of electronic devices 110, 120, 130, 140, a plurality of servers 150, 160, and a network 170 are included. 1, the number of electronic devices and the number of servers are not limited to those shown in FIG.

복수의 전자 기기들(110, 120, 130, 140)은 컴퓨터 시스템으로 구현되는 고정형 단말이거나 이동형 단말일 수 있다. 복수의 전자 기기들(110, 120, 130, 140)의 예를 들면, 스마트폰(smart phone), 휴대폰, 내비게이션, 컴퓨터, 노트북, 디지털방송용 단말, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 태블릿 PC, 게임 콘솔(game console), 웨어러블 디바이스(wearable device), IoT(internet of things) 디바이스, VR(virtual reality) 디바이스, AR(augmented reality) 디바이스 등이 있다. 일례로 도 1에서는 전자 기기(110)의 예로 스마트폰의 형상을 나타내고 있으나, 본 발명의 실시예들에서 전자 기기(110)는 실질적으로 무선 또는 유선 통신 방식을 이용하여 네트워크(170)를 통해 다른 전자 기기들(120, 130, 140) 및/또는 서버(150, 160)와 통신할 수 있는 다양한 물리적인 컴퓨터 시스템들 중 하나를 의미할 수 있다.The plurality of electronic devices 110, 120, 130, 140 may be a fixed terminal implemented in a computer system or a mobile terminal. Examples of the plurality of electronic devices 110, 120, 130 and 140 include a smart phone, a mobile phone, a navigation device, a computer, a notebook, a digital broadcast terminal, a PDA (Personal Digital Assistants) ), A tablet PC, a game console, a wearable device, an Internet of things (IoT) device, a virtual reality (VR) device, and an augmented reality (AR) device. For example, FIG. 1 illustrates the shape of a smartphone as an example of the electronic device 110, but in embodiments of the present invention, the electronic device 110 may be connected to the network 170 via a network 170 using a substantially wireless or wired communication scheme. May refer to any of a variety of physical computer systems capable of communicating with electronic devices 120, 130, 140 and / or servers 150, 160.

통신 방식은 제한되지 않으며, 네트워크(170)가 포함할 수 있는 통신망(일례로, 이동통신망, 유선 인터넷, 무선 인터넷, 방송망, 위성망 등)을 활용하는 통신 방식뿐만 아니라 기기들간의 근거리 무선 통신 역시 포함될 수 있다. 예를 들어, 네트워크(170)는, PAN(personal area network), LAN(local area network), CAN(campus area network), MAN(metropolitan area network), WAN(wide area network), BBN(broadband network), 인터넷 등의 네트워크 중 하나 이상의 임의의 네트워크를 포함할 수 있다. 또한, 네트워크(170)는 버스 네트워크, 스타 네트워크, 링 네트워크, 메쉬 네트워크, 스타-버스 네트워크, 트리 또는 계층적(hierarchical) 네트워크 등을 포함하는 네트워크 토폴로지 중 임의의 하나 이상을 포함할 수 있으나, 이에 제한되지 않는다.The communication method is not limited and includes a communication method using a communication network (for example, a mobile communication network, a wired Internet, a wireless Internet, a broadcasting network, a satellite network, etc.) . For example, the network 170 may be a personal area network (LAN), a local area network (LAN), a campus area network (CAN), a metropolitan area network (MAN), a wide area network (WAN) , A network such as the Internet, and the like. The network 170 may also include any one or more of a network topology including a bus network, a star network, a ring network, a mesh network, a star-bus network, a tree or a hierarchical network, It is not limited.

서버(150, 160) 각각은 복수의 전자 기기들(110, 120, 130, 140)과 네트워크(170)를 통해 통신하여 명령, 코드, 파일, 컨텐츠, 서비스 등을 제공하는 컴퓨터 장치 또는 복수의 컴퓨터 장치들로 구현될 수 있다. 예를 들어, 서버(150)는 네트워크(170)를 통해 접속한 복수의 전자 기기들(110, 120, 130, 140)로 제1 서비스를 제공하는 시스템일 수 있으며, 서버(160) 역시 네트워크(170)를 통해 접속한 복수의 전자 기기들(110, 120, 130, 140)로 제2 서비스를 제공하는 시스템일 수 있다. 보다 구체적인 예로, 서버(150)는 복수의 전자 기기들(110, 120, 130, 140)에 설치되어 구동되는 컴퓨터 프로그램으로서의 어플리케이션을 통해, 해당 어플리케이션이 목적하는 서비스(일례로, 지도 서비스 등)를 제1 서비스로서 복수의 전자 기기들(110, 120, 130, 140)로 제공할 수 있다. 다른 예로, 서버(160)는 상술한 어플리케이션의 설치 및 구동을 위한 파일을 복수의 전자 기기들(110, 120, 130, 140)로 배포하는 서비스를 제2 서비스로서 제공할 수 있다.Each of the servers 150 and 160 is a computer device or a plurality of computers that communicate with a plurality of electronic devices 110, 120, 130 and 140 through a network 170 to provide commands, codes, files, Lt; / RTI > devices. For example, the server 150 may be a system that provides a first service to a plurality of electronic devices 110, 120, 130, 140 connected through a network 170, 170, and 140 to the first and second electronic devices 110, 120, 130, and 140, respectively. As a more specific example, the server 150 may provide a service (for example, a map service or the like) for a corresponding application through an application as a computer program installed in and driven by the plurality of electronic devices 110, 120, As a first service, to a plurality of electronic devices 110, 120, 130, and 140. [ As another example, the server 160 may provide a service for distributing a file for installing and running the application to the plurality of electronic devices 110, 120, 130, and 140 as a second service.

도 2는 본 발명의 일실시예에 있어서 전자 기기 및 서버의 내부 구성을 설명하기 위한 블록도이다. 도 2에서는 전자 기기에 대한 예로서 전자 기기(110), 그리고 서버(150)의 내부 구성을 설명한다. 또한, 다른 전자 기기들(120, 130, 140)이나 서버(160) 역시 상술한 전자 기기(110) 또는 서버(150)와 동일한 또는 유사한 내부 구성을 가질 수 있다.2 is a block diagram for explaining an internal configuration of an electronic device and a server in an embodiment of the present invention. 2 illustrates an internal configuration of the electronic device 110 and the server 150 as an example of the electronic device. The other electronic devices 120, 130, 140 and the server 160 may also have the same or similar internal configuration as the electronic device 110 or the server 150 described above.

전자 기기(110)와 서버(150)는 메모리(211, 221), 프로세서(212, 222), 통신 모듈(213, 223) 그리고 입출력 인터페이스(214, 224)를 포함할 수 있다. 메모리(211, 221)는 비-일시적인 컴퓨터 판독 가능한 기록매체로서, RAM(random access memory), ROM(read only memory), 디스크 드라이브, SSD(solid state drive), 플래시 메모리(flash memory) 등과 같은 비소멸성 대용량 저장 장치(permanent mass storage device)를 포함할 수 있다. 여기서 ROM, SSD, 플래시 메모리, 디스크 드라이브 등과 같은 비소멸성 대용량 저장 장치는 메모리(211, 221)와는 구분되는 별도의 영구 저장 장치로서 전자 기기(110)나 서버(150)에 포함될 수도 있다. 또한, 메모리(211, 221)에는 운영체제와 적어도 하나의 프로그램 코드(일례로 전자 기기(110)에 설치되어 구동되는 브라우저나 특정 서비스의 제공을 위해 전자 기기(110)에 설치된 어플리케이션 등을 위한 코드)가 저장될 수 있다. 이러한 소프트웨어 구성요소들은 메모리(211, 221)와는 별도의 컴퓨터에서 판독 가능한 기록매체로부터 로딩될 수 있다. 이러한 별도의 컴퓨터에서 판독 가능한 기록매체는 플로피 드라이브, 디스크, 테이프, DVD/CD-ROM 드라이브, 메모리 카드 등의 컴퓨터에서 판독 가능한 기록매체를 포함할 수 있다. 다른 실시예에서 소프트웨어 구성요소들은 컴퓨터에서 판독 가능한 기록매체가 아닌 통신 모듈(213, 223)을 통해 메모리(211, 221)에 로딩될 수도 있다. 예를 들어, 적어도 하나의 프로그램은 개발자들 또는 어플리케이션의 설치 파일을 배포하는 파일 배포 시스템(일례로, 상술한 서버(160))이 네트워크(170)를 통해 제공하는 파일들에 의해 설치되는 컴퓨터 프로그램(일례로 상술한 어플리케이션)에 기반하여 메모리(211, 221)에 로딩될 수 있다.The electronic device 110 and the server 150 may include memories 211 and 221, processors 212 and 222, communication modules 213 and 223, and input / output interfaces 214 and 224. The memories 211 and 221 are non-transitory computer readable recording media and can be used to store non-transient computer readable media such as random access memory (RAM), read only memory (ROM), disk drive, solid state drive (SSD), flash memory And may include a permanent mass storage device. The non-decaying mass storage device such as a ROM, an SSD, a flash memory, a disk drive, or the like may be included in the electronic device 110 or the server 150 as a separate persistent storage device different from the memory 211 or 221. The memories 211 and 221 are provided with an operating system and at least one program code (for example, a code for an application installed in the electronic device 110 for providing a browser or a specific service installed in the electronic device 110) Can be stored. These software components may be loaded from a computer readable recording medium separate from the memories 211 and 221. [ Such a computer-readable recording medium may include a computer-readable recording medium such as a floppy drive, a disk, a tape, a DVD / CD-ROM drive, and a memory card. In other embodiments, the software components may be loaded into memory 211, 221 via communication modules 213, 223 rather than a computer readable recording medium. For example, at least one program may be a computer program installed by files provided by a file distribution system (e.g., the server 160 described above) that distributes installation files of developers or applications, May be loaded into the memory 211, 221 based on the application (e.g., the application described above).

프로세서(212, 222)는 기본적인 산술, 로직 및 입출력 연산을 수행함으로써, 컴퓨터 프로그램의 명령을 처리하도록 구성될 수 있다. 명령은 메모리(211, 221) 또는 통신 모듈(213, 223)에 의해 프로세서(212, 222)로 제공될 수 있다. 예를 들어 프로세서(212, 222)는 메모리(211, 221)와 같은 기록 장치에 저장된 프로그램 코드에 따라 수신되는 명령을 실행하도록 구성될 수 있다.Processors 212 and 222 may be configured to process instructions of a computer program by performing basic arithmetic, logic, and input / output operations. The instructions may be provided to the processors 212 and 222 by the memories 211 and 221 or the communication modules 213 and 223. For example, the processor 212, 222 may be configured to execute a command received in accordance with a program code stored in a recording device, such as the memory 211, 221.

통신 모듈(213, 223)은 네트워크(170)를 통해 전자 기기(110)와 서버(150)가 서로 통신하기 위한 기능을 제공할 수 있으며, 전자 기기(110) 및/또는 서버(150)가 다른 전자 기기(일례로 전자 기기(120)) 또는 다른 서버(일례로 서버(160))와 통신하기 위한 기능을 제공할 수 있다. 일례로, 전자 기기(110)의 프로세서(212)가 메모리(211)와 같은 기록 장치에 저장된 프로그램 코드에 따라 생성한 요청이 통신 모듈(213)의 제어에 따라 네트워크(170)를 통해 서버(150)로 전달될 수 있다. 역으로, 서버(150)의 프로세서(222)의 제어에 따라 제공되는 제어 신호나 명령, 컨텐츠, 파일 등이 통신 모듈(223)과 네트워크(170)를 거쳐 전자 기기(110)의 통신 모듈(213)을 통해 전자 기기(110)로 수신될 수 있다. 예를 들어 통신 모듈(213)을 통해 수신된 서버(150)의 제어 신호나 명령, 컨텐츠, 파일 등은 프로세서(212)나 메모리(211)로 전달될 수 있고, 컨텐츠나 파일 등은 전자 기기(110)가 더 포함할 수 있는 저장 매체(상술한 영구 저장 장치)로 저장될 수 있다.The communication modules 213 and 223 may provide functions for the electronic device 110 and the server 150 to communicate with each other through the network 170 and may be provided to the electronic device 110 and / May provide functionality for communicating with an electronic device (e.g., electronic device 120) or with another server (e.g., server 160). A request generated by the processor 212 of the electronic device 110 in accordance with the program code stored in the recording device such as the memory 211 is transmitted to the server 150 via the network 170 under the control of the communication module 213 ). ≪ / RTI > Contents or files provided under the control of the processor 222 of the server 150 are transmitted to the communication module 213 of the electronic device 110 via the communication module 223 and the network 170, ) To the electronic device 110 via the network. For example, control signals, commands, contents, files and the like of the server 150 received through the communication module 213 can be transmitted to the processor 212 or the memory 211, 110) may be further included in the storage medium (the above-described persistent storage device).

입출력 인터페이스(214)는 입출력 장치(215)와의 인터페이스를 위한 수단일 수 있다. 예를 들어, 입력 장치는 키보드, 마우스, 마이크로폰, 카메라 등의 장치를, 그리고 출력 장치는 디스플레이, 스피커, 햅틱 피드백 디바이스(haptic feedback device) 등과 같은 장치를 포함할 수 있다. 다른 예로 입출력 인터페이스(214)는 터치스크린과 같이 입력과 출력을 위한 기능이 하나로 통합된 장치와의 인터페이스를 위한 수단일 수도 있다. 입출력 장치(215)는 전자 기기(110)와 하나의 장치로 구성될 수도 있다. 또한, 서버(150)의 입출력 인터페이스(224)는 서버(150)와 연결되거나 서버(150)가 포함할 수 있는 입력 또는 출력을 위한 장치(미도시)와의 인터페이스를 위한 수단일 수 있다. 보다 구체적인 예로, 전자 기기(110)의 프로세서(212)가 메모리(211)에 로딩된 컴퓨터 프로그램의 명령을 처리함에 있어서 서버(150)나 전자 기기(120)가 제공하는 데이터를 이용하여 구성되는 서비스 화면이나 컨텐츠가 입출력 인터페이스(214)를 통해 디스플레이에 표시될 수 있다.The input / output interface 214 may be a means for interfacing with the input / output device 215. For example, the input device may include a device such as a keyboard, a mouse, a microphone, a camera, and the like, and the output device may include a device such as a display, a speaker, a haptic feedback device, As another example, the input / output interface 214 may be a means for interfacing with a device having integrated functions for input and output, such as a touch screen. The input / output device 215 may be composed of the electronic device 110 and one device. The input / output interface 224 of the server 150 may be a means for interfacing with the server 150 or an interface with a device (not shown) for input or output that the server 150 may include. More specifically, when the processor 212 of the electronic device 110 processes a command of a computer program loaded in the memory 211, the service configured by using the data provided by the server 150 or the electronic device 120 A screen or contents can be displayed on the display through the input / output interface 214. [

또한, 다른 실시예들에서 전자 기기(110) 및 서버(150)는 도 2의 구성요소들보다 더 많은 구성요소들을 포함할 수도 있다. 그러나, 대부분의 종래기술적 구성요소들을 명확하게 도시할 필요성은 없다. 예를 들어, 전자 기기(110)는 상술한 입출력 장치(215) 중 적어도 일부를 포함하도록 구현되거나 또는 트랜시버(transceiver), GPS(Global Positioning System) 모듈, 카메라, 각종 센서, 데이터베이스 등과 같은 다른 구성요소들을 더 포함할 수도 있다. 보다 구체적인 예로, 전자 기기(110)가 스마트폰인 경우, 일반적으로 스마트폰이 포함하고 있는 가속도 센서나 자이로 센서, 카메라 모듈, 각종 물리적인 버튼, 터치패널을 이용한 버튼, 입출력 포트, 진동을 위한 진동기 등의 다양한 구성요소들이 전자 기기(110)에 더 포함되도록 구현될 수 있다.Also, in other embodiments, the electronic device 110 and the server 150 may include more components than the components of FIG. However, there is no need to clearly illustrate most prior art components. For example, the electronic device 110 may be implemented to include at least some of the input / output devices 215 described above, or may include other components such as a transceiver, a Global Positioning System (GPS) module, a camera, various sensors, As shown in FIG. More specifically, when the electronic device 110 is a smart phone, the acceleration sensor, the gyro sensor, the camera module, various physical buttons, the buttons using the touch panel, the input / output port, And the like may be further included in the electronic device 110. [0050]

이하에서는 파노라마 뷰에 대한 3차원 모델을 생성하는 방법 및 시스템의 구체적인 실시예를 설명하기로 한다.Hereinafter, a method and system for generating a three-dimensional model for a panoramic view will be described.

지도 서비스의 파노라마 뷰에서 이동할 때 사용자의 위치를 쉽게 파악하기 위해서는 파노라마 이미지 상에 표시되는 3차원 이동 트랜지션과 3차원 피킹 인디케이터(표시기)가 도움을 줄 수 있으며, 이를 위해 파노라마의 주변 환경에 대한 3차원 모델이 필요하다.In order to easily grasp the user's position when moving in the panoramic view of the map service, a three-dimensional moving transition and a three-dimensional peaking indicator (indicator) displayed on the panoramic image can be helpful. Dimensional model is needed.

일반적으로 고가의 라이다(LiDAR) 센서 등에 의존하여 정밀한 파노라마 3차원 모델을 생성하게 되는데, 이러한 경우 지도 전역에 대한 커버리지 문제를 해결하기 어렵고 3차원 모델을 생성하는 시간 또한 오래 걸린다.Generally, a precise panoramic three-dimensional model is created by relying on an expensive LiDAR sensor. In such a case, it is difficult to solve the coverage problem for the entire map and it takes a long time to generate a three-dimensional model.

본 발명에서는 고가의 장비를 이용하지 않고 지도의 원천 데이터를 이용하여 전국 단위의 파노라마 3차원 모델을 생성함으로써 커버리지 문제를 해결할 수 있고 3차원 모델의 생성 시간을 단축할 수 있다.The present invention can solve the coverage problem and shorten the generation time of the three-dimensional model by generating a panoramic three-dimensional model on a nation-wide basis using the original data of the map without using expensive equipment.

도 3은 본 발명의 일실시예에 따른 서버의 프로세서가 포함할 수 있는 구성요소의 예를 도시한 블록도이고, 도 4는 본 발명의 일실시예에 따른 서버가 수행할 수 있는 방법의 예를 도시한 흐름도이다.FIG. 3 is a block diagram illustrating an example of components that a server of a server according to an exemplary embodiment of the present invention may include; FIG. 4 is a diagram illustrating an example of a method that a server can perform according to an exemplary embodiment of the present invention; Fig.

본 실시예에 따른 서버(150)는 클라이언트(client)인 복수의 전자 기기들(110, 120, 130, 140)을 대상으로 지도 서비스를 제공하는 플랫폼 역할을 한다. 서버(150)는 전자 기기들(110, 120, 130, 140) 상에 설치되어 구동되는 브라우저나 전자 기기(110)에 설치된 전용 어플리케이션과 연동하여 지도 서비스를 제공할 수 있다.The server 150 according to the present embodiment serves as a platform for providing a map service to a plurality of electronic devices 110, 120, 130, and 140 which are clients. The server 150 may provide a map service in cooperation with a browser installed on the electronic devices 110, 120, 130, and 140 and a dedicated application installed in the electronic device 110.

서버(150)의 프로세서(222)는 도 4에 따른 3차원 모델 생성 방법을 수행하기 위한 구성요소로서 도 3에 도시된 바와 같이, 3차원 모델 생성부(310), 3차원 모델 관리부(320), 및 3차원 모델 제공부(330)를 포함할 수 있다. 실시예에 따라 프로세서(222)의 구성요소들은 선택적으로 프로세서(222)에 포함되거나 제외될 수도 있다. 또한, 실시예에 따라 프로세서(222)의 구성요소들은 프로세서(222)의 기능의 표현을 위해 분리 또는 병합될 수도 있다.3, the processor 222 of the server 150 includes a three-dimensional model generation unit 310, a three-dimensional model management unit 320, and a three- , And a three-dimensional model providing unit 330. The components of processor 222 may optionally be included or excluded from processor 222 in accordance with an embodiment. In addition, in accordance with an embodiment, the components of the processor 222 may be separate or merged for the representation of the functionality of the processor 222.

이러한 프로세서(222) 및 프로세서(222)의 구성요소들은 도 4의 3차원 모델 생성 방법이 포함하는 단계들(S410 내지 S440)을 수행하도록 서버(150)를 제어할 수 있다. 예를 들어, 프로세서(222) 및 프로세서(222)의 구성요소들은 메모리(221)가 포함하는 운영체제의 코드와 적어도 하나의 프로그램의 코드에 따른 명령(instruction)을 실행하도록 구현될 수 있다.The components of the processor 222 and the processor 222 may control the server 150 to perform the steps S410 to S440 included in the three-dimensional model generation method of FIG. For example, the components of processor 222 and processor 222 may be implemented to execute instructions in accordance with the code of the operating system and the code of at least one program that memory 221 contains.

여기서, 프로세서(222)의 구성요소들은 서버(150)에 저장된 프로그램 코드가 제공하는 명령에 따라 프로세서(222)에 의해 수행되는 프로세서(222)의 서로 다른 기능들(different functions)의 표현들일 수 있다. 예를 들어, 서버(150)가 파노라마 3차원 모델을 생성하도록 상술한 명령에 따라 서버(150)를 제어하는 프로세서(222)의 기능적 표현으로서 3차원 모델 생성부(310)가 이용될 수 있다.Herein, the components of processor 222 may be representations of different functions of processor 222 performed by processor 222 in accordance with instructions provided by the program code stored in server 150 . For example, the three-dimensional model generation unit 310 may be used as a functional representation of the processor 222 that controls the server 150 according to the above-described command so that the server 150 generates a panoramic three-dimensional model.

단계(S410)에서 프로세서(222)는 서버(150)의 제어와 관련된 명령이 로딩된 메모리(221)로부터 필요한 명령을 읽어들일 수 있다. 이 경우, 상기 읽어들인 명령은 프로세서(222)가 이후 설명될 단계들(S420 내지 S440)을 실행하도록 제어하기 위한 명령을 포함할 수 있다.In step S410, the processor 222 may read the necessary commands from the loaded memory 221 with instructions related to control of the server 150. [ In this case, the read command may include instructions for controlling the processor 222 to execute the steps (S420 to S440) to be described later.

단계(S420)에서 3차원 모델 생성부(310)는 지도 서비스를 위해 사전에 구축된 전자 지도의 지도 데이터를 이용하여 파노라마 뷰에 대한 3차원 모델을 생성할 수 있다. 이때, 3차원 모델 생성부(310)는 파노라마 뷰의 주변 환경에 대한 3차원 모델을 별도의 장비를 통해 얻는 것이 아니라 전자 지도 데이터베이스(미도시)를 통해 이미 보유하고 있는 지도 데이터를 이용하여 3차원 모델을 구축할 수 있다. 전자 지도 데이터베이스는 지도 서비스를 위해 필요한 모든 데이터를 포함하는 데이터베이스 시스템으로, 서버(150)에 포함된 구성 요소로 구현되거나, 혹은 서버(150)와 연동 가능한 별개의 시스템 상에 구축된 외부 데이터베이스 시스템으로서 존재하는 것 또한 가능하다. 일례로, 3차원 모델 생성부(310)는 파노라마 뷰 중 하나인 거리뷰에 대하여 이미 보유하고 있는 건물과 같은 구조물의 형상과 높이 정보 등을 포함하는 구조물 외형 정보를 이용하여 3차원 구조물 모델을 구축할 수 있다. 그리고, 3차원 모델 생성부(310)는 파노라마 뷰 중 다른 하나인 항공뷰에 대하여 이미 보유하고 있는 지형 정보, 예를 들어 수치 표고 모델(DEM, digital elevation model)을 이용하여 항공 레벨의 3차원 모델을 구축할 수 있다. 또한, 3차원 모델 생성부(310)는 파노라마 뷰 중 또 다른 하나인 실내뷰에 대하여 이미 보유하고 있는 실내의 구조나 벽 정보 등을 포함하는 실내 지도 정보를 이용하여 3차원 실내 모델을 구축할 수 있다.In step S420, the three-dimensional model generation unit 310 may generate a three-dimensional model for the panoramic view using the map data of the electronic map constructed in advance for the map service. At this time, the three-dimensional model generation unit 310 does not obtain the three-dimensional model of the surrounding environment of the panoramic view through a separate device, but uses the map data already stored in the electronic map database (not shown) You can build a model. The electronic map database is a database system that includes all the data necessary for the map service, and is implemented as an element included in the server 150 or an external database system constructed on a separate system capable of interfacing with the server 150 It is also possible to exist. For example, the three-dimensional model generation unit 310 constructs a three-dimensional structure model using structure external information including shape and height information of a building, can do. The three-dimensional model generation unit 310 generates the three-dimensional model of the air-level using the terrain information already held for the air view, which is another one of the panoramic views, for example, a digital elevation model (DEM) Can be constructed. In addition, the three-dimensional model generation unit 310 can construct a three-dimensional indoor model by using the indoor map information including the indoor structure and the wall information already held for the indoor view, which is another one of the panoramic views have.

단계(S430)에서 3차원 모델 관리부(320)는 각 파노라마에 대하여 파노라마의 위치를 기반으로 해당 위치에 대응되는 3차원 모델의 뎁스맵을 생성하여 해당 파노라마와 매칭시켜 관리할 수 있다. 3차원 모델 관리부(320)는 파노라마 별로 뎁스맵 형성 모델을 운영하는 것으로, 이는 데이터를 경량화하고 특정 지점에서 보이는 부분들을 위주로, 즉 특정 파노라마의 위치에 해당되는 3차원 모델을 최소한으로 가져오기 위함이다. 단계(S420)에서 생성된 3차원 모델은 네트워크의 효율을 높이고 지도 서비스의 운영 비용을 줄이기 위해 다음의 과정으로 데이터 경량화가 이루어진다. 먼저, 3차원 모델 관리부(320)는 각 파노라마 별로 단계(S420)에서 생성된 3차원 모델 중에서 파노라마에 특정된 위치를 기준으로 파노라마와 대향하고 있는 모델을 분류할 수 있다. 파노라마의 위치는 파노라마 이미지를 획득하는 과정에서 GPS 등을 활용하여 측정된 카메라의 위치, 혹은 파노라마 이미지에 태깅된 위치 등을 포괄하여 의미할 수 있다. 다음으로, 3차원 모델 관리부(320)는 분류된 모델의 각 면(face)과 해당 파노라마의 위치를 거리로 환산하여 뎁스맵을 만들고 이를 해당 파노라마의 식별자(예컨대, 이미지 아이디 등)와 매칭시켜 저장할 수 있다. 다시 말해, 3차원 모델 관리부(320)는 각 파노라마에 대하여 해당 파노라마의 위치에서 보이는 부분만 깊이 정보를 기록하는 것으로, 즉 파노라마 시점에서 각 오브젝트까지의 거리들을 저장한다.In step S430, the three-dimensional model management unit 320 may generate a depth map of the three-dimensional model corresponding to the corresponding position on the basis of the position of the panorama with respect to each panorama, and manage the depth map by matching with the corresponding panorama. The three-dimensional model management unit 320 operates a depth map formation model for each panorama, which is to lighten the data and to bring the three-dimensional model corresponding to the position of the specific panorama to a minimum, . The 3D model generated in step S420 is data-weighted in order to increase the efficiency of the network and reduce the operation cost of the map service in the following process. First, the three-dimensional model management unit 320 can classify the models that are opposed to the panorama on the basis of the position specified in the panorama among the three-dimensional models generated in step S420 for each panorama. The position of the panorama may include a position of the camera measured using a GPS or the like, or a position tagged in the panoramic image in the course of acquiring the panoramic image. Next, the three-dimensional model management unit 320 creates a depth map by converting the faces of the classified model and the positions of the corresponding panoramas into distances, and stores the depth maps by matching them with identifiers (e.g., image IDs) of the corresponding panoramas . In other words, the three-dimensional model management unit 320 records depth information only for the portion of the panorama that is visible at the position of the corresponding panorama, that is, the distances from the panorama to each object.

단계(S440)에서 3차원 모델 제공부(330)는 전자 기기(110)의 요청에 대하여 요청에 대응되는 파노라마와 매칭된 뎁스맵을 전자 기기(110)로 제공할 수 있다. 다시 말해, 3차원 모델 제공부(330)는 파노라마 뷰에 대한 3차원 모델에 대하여 단계(S430)를 통해 경량화된 데이터로서 뎁스맵을 전자 기기(110)로 전송한다. 최종 단계인 전자 기기(110)의 뷰어에서 3차원 모델 제공부(330)로부터 제공 받은 뎁스맵을 이용하여 각각의 파노라마 위치에 대한 3차원 모델을 복원할 수 있다.In step S440, the 3D modeling unit 330 may provide the electronic device 110 with a depth map matched with the panorama corresponding to the request for the request of the electronic device 110. [ In other words, the 3D model providing unit 330 transmits the depth map as the lightened data through the step S430 to the electronic device 110 for the 3D model of the panoramic view. Dimensional model for each panorama position can be restored by using the depth map provided from the 3D model providing unit 330 in the viewer of the electronic device 110 as the final stage.

도 5 내지 도 7은 본 발명의 일실시예에 있어서 3차원 모델을 구축하는 과정을 설명하기 위한 예시 도면이다.FIGS. 5 to 7 are exemplary diagrams illustrating a process of constructing a three-dimensional model in an embodiment of the present invention.

도 5를 참조하면, 3차원 모델 생성부(310)는 거리뷰의 파노라마(501)에 대하여 해당 파노라마(501)의 카메라 위치를 기준으로 주변에 위치한 각 건물의 형상과 높이 정보를 포함한 건물 외형 정보를 이용하여 거리뷰 3차원 모델(503)을 생성할 수 있다. 예를 들어, 3차원 모델 생성부(310)는 실세계의 건물, 수목, 각종 구조물 등을 표현한 수치 모델인 수치 표면 모델(DSM, digital surfacemodel)을 이용하여 거리뷰 3차원 모델(503)을 구현할 수 있다. 따라서, 거리뷰 3차원 모델(503)은 지도의 원천 데이터 중 건물의 형상과 높이 정보를 포함하는 건물 외형 정보를 소스로 활용하여 생성될 수 있다.5, the three-dimensional model generation unit 310 generates three-dimensional model information about the panorama 501 of the rough review based on the camera position of the corresponding panorama 501, Dimensional model 503 can be generated using the three-dimensional model 503 shown in FIG. For example, the three-dimensional model generation unit 310 can implement a three-dimensional model 503 using a digital surface model (DSM), which is a numerical model expressing real-world buildings, trees, have. Accordingly, the three-dimensional review model 503 can be generated by using the building exterior information including the shape and height information of the building among the source data of the map as a source.

도 6을 참조하면, 3차원 모델 생성부(310)는 항공뷰의 파노라마(601)에 대하여 해당 파노라마(601)의 카메라 위치에 대응되는 지형 정보를 이용하여 항공뷰 3차원 모델(603)을 생성할 수 있다. 예를 들어, 3차원 모델 생성부(310)는 실세계의 모든 정보 중 건물, 수목, 각종 구조물 등을 제외하고 지형(bare earth) 부분만을 표현한 수치 모델인 수치 표고 모델(DEM)을 이용하여 항공뷰 3차원 모델(603)을 구현할 수 있다. 따라서, 항공뷰 3차원 모델(603)은 지도의 원천 데이터 중 지형 정보를 소스로 활용하여 생성될 수 있다.6, the three-dimensional model generation unit 310 generates an aerial view three-dimensional model 603 using the terrain information corresponding to the camera position of the corresponding panorama 601 with respect to the panorama 601 of the aerial view can do. For example, the three-dimensional model generation unit 310 may use a digital elevation model (DEM), which is a numerical model expressing only a bare earth portion, of buildings, trees, various structures, A three-dimensional model 603 can be implemented. Therefore, the aerial view three-dimensional model 603 can be generated by using the terrain information as a source among the source data of the map.

도 7을 참조하면, 3차원 모델 생성부(310)는 실내뷰의 파노라마(701)에 대하여 해당 파노라마(701)의 카메라 위치에 대응되는 실내 지도 정보를 이용하여 실내뷰 3차원 모델(703)을 생성할 수 있다. 예를 들어, 3차원 모델 생성부(310)는 대형 매장, 전시나 문화 시설, 주차장, 공항 등의 건물 내 지도 정보로서 건물 내부의 구조나 벽 정보 등을 포함하는 평면도를 이용하여 실내뷰 3차원 모델(703)을 구현할 수 있다. 따라서, 실내뷰 3차원 모델(703)은 지도의 원천 데이터 중 건물 도면 등을 포함하는 실내 지도 정보를 소스로 활용하여 생성될 수 있다.7, the three-dimensional model generation unit 310 generates an indoor view three-dimensional model 703 using the indoor map information corresponding to the camera position of the corresponding panorama 701 with respect to the panorama 701 of the indoor view Can be generated. For example, the three-dimensional model generating unit 310 may generate a three-dimensional model image using three-dimensional (3D) model information, such as a building, a cultural facility, a parking lot, A model 703 can be implemented. Accordingly, the indoor view three-dimensional model 703 can be generated by using the indoor map information including the building drawing and the like among the source data of the map as a source.

지도의 원천 데이터(건물 외형 정보, 지형 정보, 실내 지도 정보)에 기초하여 거리뷰, 항공뷰, 실내뷰 등의 파노라마 이미지(501, 601, 701)에 텍스처 등의 3차원 오브젝트를 입힘으로써 3차원 모델(503, 603, 703)을 구축할 수 있다.By applying 3D objects such as textures to the panoramic images 501, 601, and 701 of the map review, aerial view, and indoor view based on the source data of the map (building exterior information, terrain information, indoor map information) The models 503, 603, and 703 can be constructed.

각종 파노라마 뷰에 대하여 3차원 모델을 구축함으로써 파노라마에서의 3차원 이동 트랜지션과 3차원 피킹 인디케이터를 포함한 지도 서비스를 지원할 수 있다.By constructing a three-dimensional model for various panoramic views, it is possible to support a map service including a three-dimensional moving transition in the panorama and a three-dimensional peaking indicator.

본 발명에 따르면, 지도 서비스를 위해 이미 보유하고 있는 지도 데이터를 이용하여 전국 단위의 3차원 모델을 한번에 구축할 수 있고 이를 통해 파노라마에 대한 3차원 모델을 생성하기 위한 별도의 고가 장비를 필요로 하지 않으며 3차원 모델을 생성하는데 필요한 시간과 제약 사항을 줄일 수 있다.According to the present invention, it is possible to build a three-dimensional model at a time on a nation-wide basis by using map data already possessed for a map service, thereby requiring a separate expensive equipment for generating a three-dimensional model of the panorama And can reduce the time and constraints required to create a three-dimensional model.

상기한 3차원 모델의 경우 데이터 관리의 어려움이 있어 데이터 경량화가 필요하다. 본 발명에서는 데이터 경량화를 위해 각 파노라마 별로 뎁스맵 형성 모델을 운영한다. 3차원 모델 관리부(320)는 각 파노라마에 대하여 파노라마의 위치를 기반으로 해당 위치에 대응되는 3차원 모델의 뎁스맵을 생성하여 해당 파노라마와 매칭시켜 관리할 수 있으며, 이는 특정 파노라마의 위치에 대응되는 3차원 모델을 최소한으로 가져오기 위함이다.In the case of the above-described three-dimensional model, data management is difficult and data weight is required. In the present invention, a depth map formation model is operated for each panorama in order to reduce data weight. The three-dimensional model management unit 320 may generate a depth map of the three-dimensional model corresponding to the corresponding position on the basis of the position of the panorama with respect to each panorama, and may manage the depth map by matching with the corresponding panorama, This is to bring the 3D model to a minimum.

도 8은 본 발명의 일실시예에 있어서 뎁스맵 데이터의 예시를 도시한 것이다.FIG. 8 shows an example of depth map data in an embodiment of the present invention.

도 8을 참조하면, 3차원 모델 관리부(320)는 각 파노라마에 대하여 파노라마의 좌표맵(coordmap)(810)과, 파노라마 시점에서 각 오브젝트까지의 거리를 깊이 정보로 표현한 뎁스맵(820)을 매칭시켜 관리할 수 있다. 파노라마의 위치에서 보이는 부분만 깊이 정보를 기록함으로써 경량화된 데이터로 서비스 가능하다.8, the three-dimensional model management unit 320 matches a coordinate map (coordinate map) 810 of a panorama with a depth map 820 representing a distance from the panorama view to each object as depth information for each panorama, . Only the part visible from the position of the panorama can be recorded with the depth information, so that it can be served with lightened data.

이와 같이 경량화된 상태의 뎁스맵(820)을 이용하면 파노라마 지점에서 보이는, 즉 파노라마 지점과 같은 해상도에 해당하는 깊이 정보만 가져와서 3차원 모델을 복원할 수 있다. 도 9는 뎁스맵으로 복원된 거리뷰 3차원 모델(900)의 적용 예시를 도시한 것이고, 도 10은 뎁스맵으로 복원된 항공뷰 3차원 모델(1000)의 적용 예시를 도시한 것이다.By using the depth map 820 in such a lightened state, the 3D model can be restored by taking only the depth information corresponding to the resolution as seen at the panorama point, that is, the same resolution as the panorama point. FIG. 9 shows an application example of the restored three-dimensional model 900, which is restored to the depth map, and FIG. 10 shows an application example of the restored three-dimensional model 1000 of the air view.

이와 같이 각 파노라마 별로 3차원 모델을 재구성하게 되는데, 파노라마 뷰에서의 이동 시 현재 보이는 지점에서의 3차원 모델을 구축하고 이동하고자 하는 지점의 3차원 모델을 독립적으로 구축하여 두 지점 간의 3차원 모델을 이동하면 3차원 공간을 이동하는 것과 같은 사용자 경험을 제공할 수 있다. 이러한 3차원 이동 트랜지션은 물론이고, 3차원 피킹 인디케이션 또한 동일한 방법으로 지원할 수 있다.In this way, the 3D model is reconstructed for each panorama. When the panorama view is moved, a 3D model is constructed at the currently visible point, and a 3D model of the point to be moved is independently constructed, Moving can provide a user experience such as moving in three-dimensional space. In addition to the three-dimensional moving transition, the three-dimensional peaking indication can be supported in the same manner.

다시 도 8을 참조하면, 3차원 모델 관리부(320)는 파노라마에 대한 3차원 모델을 뎁스맵(820)으로 기록함과 아울러, 파노라마의 위치에서 보이는 오브젝트(예를 들어, 건물)와 관련된 정보를 포함하는 태그맵(tagmap)(830)을 파노라마의 좌표맵(810)과 매칭시켜 함께 기록하는 것 또한 가능하다. 태그맵(830)을 이용함으로써 특정 오브젝트가 선택됐을 때 태깅된 정보로 해당 오브젝트를 식별할 수 있고, 또한 특정 오브젝트에 태깅된 정보를 표시하거나 하이라이트나 조명, 인디케이터 등을 적용하는 것 또한 가능하다. 예를 들어, 도 11에 도시한 바와 같이 뎁스맵(820)과 태그맵(830)을 이용하여 거리뷰 3차원 모델(1100)을 복원하는 경우 해당 거리뷰 이미지에서 뷰 시점의 오브젝트를 가리키는 인디케이터(1101)를 적용할 수 있다.8, the three-dimensional model management unit 320 records the three-dimensional model of the panorama as a depth map 820, and also includes information related to an object (for example, a building) visible at the position of the panorama It is also possible to match the tag map 830 with the coordinate map 810 of the panorama and record them together. By using the tag map 830, it is possible to identify the object by the information tagged when the specific object is selected, and also to display the tagged information on the specific object, or to apply the highlight, the illumination, and the indicator. For example, as shown in FIG. 11, when restoration three-dimensional model 1100 is restored by using the depth map 820 and the tag map 830, an indicator (for example, 1101) can be applied.

따라서, 본 발명에 따르면 데이터 경량화를 위해 각 파노라마 별로 뎁스맵을 만들어 운영하고 뎁스맵을 파노라마와 매칭시켜 특정 지점에서 보이는 부분들 위주로 3차원 지도를 생성 및 제공함으로써 네트워크 효율을 높일 수 있고 지도 서비스의 운영 비용을 줄일 수 있다.Therefore, according to the present invention, it is possible to increase the network efficiency by creating and operating a depth map for each panorama in order to reduce the data weight, and by generating and providing a three-dimensional map focusing on parts visible at specific points by matching a depth map with a panorama, Operational costs can be reduced.

이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 어플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The apparatus described above may be implemented as a hardware component, a software component, and / or a combination of hardware components and software components. For example, the apparatus and components described in the embodiments may be implemented as a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate array (FPGA), a programmable logic unit, a microprocessor, or any other device capable of executing and responding to instructions. The processing device may execute an operating system (OS) and one or more software applications running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For ease of understanding, the processing apparatus may be described as being used singly, but those skilled in the art will recognize that the processing apparatus may have a plurality of processing elements and / As shown in FIG. For example, the processing unit may comprise a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as a parallel processor.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 컴퓨터 저장 매체 또는 장치에 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may include a computer program, code, instructions, or a combination of one or more of the foregoing, and may be configured to configure the processing device to operate as desired or to process it collectively or collectively Device can be commanded. The software and / or data may be embodied in any type of machine, component, physical device, computer storage media, or device for interpretation by a processing device or to provide instructions or data to the processing device have. The software may be distributed over a networked computer system and stored or executed in a distributed manner. The software and data may be stored on one or more computer readable recording media.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 이때, 매체는 컴퓨터로 실행 가능한 프로그램을 계속 저장하거나, 실행 또는 다운로드를 위해 임시 저장하는 것일 수도 있다. 또한, 매체는 단일 또는 수 개의 하드웨어가 결합된 형태의 다양한 기록수단 또는 저장수단일 수 있는데, 어떤 컴퓨터 시스템에 직접 접속되는 매체에 한정되지 않고, 네트워크 상에 분산 존재하는 것일 수도 있다. 매체의 예시로는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등을 포함하여 프로그램 명령어가 저장되도록 구성된 것이 있을 수 있다. 또한, 다른 매체의 예시로, 어플리케이션을 유통하는 앱 스토어나 기타 다양한 소프트웨어를 공급 내지 유통하는 사이트, 서버 등에서 관리하는 기록매체 내지 저장매체도 들 수 있다.The method according to an embodiment may be implemented in the form of a program command that can be executed through various computer means and recorded in a computer-readable medium. At this time, the medium may be a program that continuously stores a computer executable program, or temporarily stores the program for execution or downloading. Further, the medium may be a variety of recording means or storage means in the form of a combination of a single hardware or a plurality of hardware, but is not limited to a medium directly connected to any computer system, but may be dispersed on a network. Examples of the medium include a magnetic medium such as a hard disk, a floppy disk and a magnetic tape, an optical recording medium such as CD-ROM and DVD, a magneto-optical medium such as a floptical disk, And program instructions including ROM, RAM, flash memory, and the like. As another example of the medium, a recording medium or a storage medium that is managed by a site or a server that supplies or distributes an application store or various other software is also enumerated.

이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. For example, it is to be understood that the techniques described may be performed in a different order than the described methods, and / or that components of the described systems, structures, devices, circuits, Lt; / RTI > or equivalents, even if it is replaced or replaced.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (20)

컴퓨터 시스템에서 수행되는 3차원 모델 생성 방법에 있어서,
상기 컴퓨터 시스템은 메모리에 포함된 컴퓨터 판독 가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서를 포함하고,
상기 3차원 모델 생성 방법은,
상기 적어도 하나의 프로세서에 의해, 지도 서비스를 위해 사전에 구축된 전자 지도의 지도 데이터를 이용하여 파노라마 뷰에 대한 3차원 모델을 생성하는 단계; 및
상기 적어도 하나의 프로세서에 의해, 전자 기기의 요청에 대응되는 파노라마 뷰의 3차원 모델을 제공하는 단계
를 포함하는 3차원 모델 생성 방법.A method for generating a three-dimensional model in a computer system,
The computer system comprising at least one processor configured to execute computer-readable instructions contained in a memory,
The three-dimensional model generation method includes:
Generating a three-dimensional model of the panoramic view using the map data of the electronic map constructed in advance for the map service by the at least one processor; And
Providing, by the at least one processor, a three-dimensional model of the panoramic view corresponding to the request of the electronic device
Dimensional model. 제1항에 있어서,
상기 생성하는 단계는,
전자 지도 데이터베이스를 통해 이미 보유하고 있는 지도 데이터를 이용하여 상기 3차원 모델을 생성하는 단계
를 포함하는 3차원 모델 생성 방법.The method according to claim 1,
Wherein the generating comprises:
Generating the three-dimensional model using the map data already held through the electronic map database
Dimensional model. 제1항에 있어서,
상기 생성하는 단계는,
거리뷰의 파노라마에 대하여 이미 보유하고 있는 구조물의 형상과 높이 정보를 포함하는 구조물 외형 정보를 이용하여 거리뷰 3차원 모델을 생성하는 단계
를 포함하는 3차원 모델 생성 방법.The method according to claim 1,
Wherein the generating comprises:
A step of generating a rough-view three-dimensional model using the structure appearance information including the shape and height information of the structure already possessed with respect to the panorama of the rough review
Dimensional model. 제1항에 있어서,
상기 생성하는 단계는,
항공뷰의 파노라마에 대하여 이미 보유하고 있는 지형 정보인 수치 표고 모델(DEM, digital elevation model)을 이용하여 항공뷰 3차원 모델을 생성하는 단계
를 포함하는 3차원 모델 생성 방법.The method according to claim 1,
Wherein the generating comprises:
A step of generating an aerial view three-dimensional model by using a digital elevation model (DEM) which is the terrain information already possessed with respect to the panorama of the aerial view
Dimensional model. 제1항에 있어서,
상기 생성하는 단계는,
실내뷰의 파노라마에 대하여 이미 보유하고 있는 실내의 구조와 벽 정보를 포함하는 실내 지도 정보를 이용하여 실내뷰 3차원 모델을 생성하는 단계
를 포함하는 3차원 모델 생성 방법.The method according to claim 1,
Wherein the generating comprises:
A step of generating an indoor view three-dimensional model using the indoor map information including the indoor structure and the wall information already possessed with respect to the panorama of the indoor view
Dimensional model. 제1항에 있어서,
상기 3차원 모델 생성 방법은,
상기 적어도 하나의 프로세서에 의해, 각 파노라마에 대하여 파노라마의 위치를 기반으로 해당 위치에 대응되는 3차원 모델의 뎁스맵(depthmap)을 생성하여 해당 파노라마와 매칭시켜 관리하는 단계
를 더 포함하는 3차원 모델 생성 방법.The method according to claim 1,
The three-dimensional model generation method includes:
Generating a depth map of the three-dimensional model corresponding to the corresponding position on the basis of the position of the panorama with respect to each panorama by the at least one processor, and managing the depth map by matching with the corresponding panorama
Dimensional model. 제6항에 있어서,
상기 관리하는 단계는,
상기 생성된 3차원 모델에서 특정 파노라마의 위치를 기준으로 상기 특정 파노라마와 대향하고 있는 모델을 분류하는 단계; 및
상기 분류된 모델의 각 면(face)과 상기 특정 파노라마의 위치를 거리로 환산하여 뎁스맵을 만들어 상기 특정 파노라마의 식별자와 매칭시켜 저장하는 단계
를 포함하는 3차원 모델 생성 방법.The method according to claim 6,
Wherein the managing comprises:
Classifying a model that is opposed to the specific panorama based on a position of a specific panorama in the generated three-dimensional model; And
Creating a depth map by converting the face of each of the classified models and the position of the specific panorama into distances to match with the identifiers of the specific panoramas and storing
Dimensional model. 제6항에 있어서,
상기 제공하는 단계는,
상기 전자 기기의 요청에 대응되는 파노라마와 매칭된 뎁스맵을 상기 전자 기기로 전송하는 단계
를 포함하고,
상기 전자 기기의 뷰어에서 상기 전송된 뎁스맵을 이용하여 해당 파노라마에 대한 3차원 모델을 복원하는 것
을 특징으로 하는 3차원 모델 생성 방법.The method according to claim 6,
Wherein the providing step comprises:
Transmitting a depth map matched with a panorama corresponding to a request of the electronic device to the electronic device
Lt; / RTI >
And restoring a three-dimensional model of the corresponding panorama by using the transmitted depth map in the viewer of the electronic device
Dimensional model. 제6항에 있어서,
상기 관리하는 단계는,
파노라마의 좌표맵(coordmap)과 해당 파노라마의 시점과 각 오브젝트까지의 거리를 깊이 정보로 표현한 뎁스맵을 매칭시켜 관리하는 단계
를 포함하는 3차원 모델 생성 방법.The method according to claim 6,
Wherein the managing comprises:
A coordination map of the panorama and a depth map representing the viewpoint of the panorama and the distance to each object as depth information are managed and managed
Dimensional model. 제9항에 있어서,
상기 관리하는 단계는,
상기 오브젝트와 관련된 정보를 포함하는 태그맵(tagmap)을 상기 좌표맵과 매칭시켜 관리하는 단계
를 더 포함하는 3차원 모델 생성 방법.10. The method of claim 9,
Wherein the managing comprises:
A step of matching and managing a tag map including information related to the object with the coordinate map
Dimensional model. 컴퓨터와 결합되어 제1항 내지 제10항 중 어느 한 항의 3차원 모델 생성 방법을 컴퓨터에 실행시키기 위해 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램.10. A computer program stored in a computer-readable medium for causing a computer to execute the three-dimensional model generation method of any one of claims 1 to 10 in combination with a computer. 제1항 내지 제10항 중 어느 한 항의 3차원 모델 생성 방법을 컴퓨터에 실행시키기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록매체.A computer-readable recording medium having recorded thereon a program for causing a computer to execute the three-dimensional model generation method according to any one of claims 1 to 10. 컴퓨터 시스템에 있어서,
메모리에 포함된 컴퓨터 판독 가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서
를 포함하고,
상기 적어도 하나의 프로세서는,
지도 서비스를 위해 사전에 구축된 전자 지도의 지도 데이터를 이용하여 파노라마 뷰에 대한 3차원 모델을 생성하는 3차원 모델 생성부;
각 파노라마에 대하여 파노라마의 위치를 기반으로 해당 위치에 대응되는 3차원 모델의 뎁스맵을 생성하여 해당 파노라마와 매칭시켜 관리하는 3차원 모델 관리부; 및
전자 기기의 요청에 따라 상기 요청에 대응되는 파노라마와 매칭된 뎁스맵을 제공하는 3차원 모델 제공부
를 포함하고,
상기 전자 기기의 뷰어에서 상기 제공된 뎁스맵을 이용하여 해당 파노라마에 대한 3차원 모델을 복원하는 것
을 특징으로 하는 컴퓨터 시스템.In a computer system,
At least one processor configured to execute computer readable instructions contained in memory,
Lt; / RTI >
Wherein the at least one processor comprises:
A three-dimensional model generation unit for generating a three-dimensional model of a panoramic view by using map data of an electronic map constructed in advance for a map service;
A three-dimensional model management unit for generating a depth map of the three-dimensional model corresponding to the corresponding position on the basis of the position of the panorama with respect to each panorama and matching and managing the depth map with the corresponding panorama; And
A 3D model providing unit for providing a depth map matched with a panorama corresponding to the request,
Lt; / RTI >
And restoring the three-dimensional model of the corresponding panorama using the provided depth map in the viewer of the electronic device
Lt; / RTI > 제13항에 있어서,
상기 3차원 모델 생성부는,
전자 지도 데이터베이스를 통해 이미 보유하고 있는 지도 데이터를 이용하여 상기 3차원 모델을 생성하는 것
을 특징으로 하는 컴퓨터 시스템.14. The method of claim 13,
Wherein the three-dimensional model generation unit comprises:
Generating the three-dimensional model using the map data already possessed through the electronic map database
Lt; / RTI > 제13항에 있어서,
상기 3차원 모델 생성부는,
거리뷰의 파노라마에 대하여 이미 보유하고 있는 구조물의 형상과 높이 정보를 포함하는 구조물 외형 정보를 이용하여 거리뷰 3차원 모델을 생성하는 것
을 특징으로 하는 컴퓨터 시스템.14. The method of claim 13,
Wherein the three-dimensional model generation unit comprises:
Generating a three-dimensional model of a rough-view panorama by using the structure external information including the shape and height information of the existing structure
Lt; / RTI > 제13항에 있어서,
상기 3차원 모델 생성부는,
항공뷰의 파노라마에 대하여 이미 보유하고 있는 지형 정보인 수치 표고 모델(DEM, digital elevation model)을 이용하여 항공뷰 3차원 모델을 생성하는 것
을 특징으로 하는 컴퓨터 시스템.14. The method of claim 13,
Wherein the three-dimensional model generation unit comprises:
To create an aerial view three-dimensional model using the digital elevation model (DEM), which is the terrain information already possessed for the panorama of the aerial view
Lt; / RTI > 제13항에 있어서,
상기 3차원 모델 생성부는,
실내뷰의 파노라마에 대하여 이미 보유하고 있는 실내의 구조와 벽 정보를 포함하는 실내 지도 정보를 이용하여 실내뷰 3차원 모델을 생성하는 것
을 특징으로 하는 컴퓨터 시스템.14. The method of claim 13,
Wherein the three-dimensional model generation unit comprises:
The indoor view three-dimensional model is generated by using the indoor map information including the indoor structure and the wall information already possessed with respect to the panorama of the indoor view
Lt; / RTI > 제13항에 있어서,
상기 3차원 모델 관리부는,
상기 생성된 3차원 모델에서 특정 파노라마의 위치를 기준으로 상기 특정 파노라마와 대향하고 있는 모델을 분류하고,
상기 분류된 모델의 각 면(face)과 상기 특정 파노라마의 위치를 거리로 환산하여 뎁스맵을 만들어 상기 특정 파노라마의 식별자와 매칭시켜 저장하는 것
을 특징으로 하는 컴퓨터 시스템.14. The method of claim 13,
The three-dimensional model management unit,
Classifying the model that is opposed to the specific panorama based on the position of the specific panorama in the generated three-dimensional model,
A depth map is created by converting the face of each of the classified models and the position of the specific panorama into a distance to match with the identifier of the specific panorama and stored
Lt; / RTI > 제13항에 있어서,
상기 3차원 모델 관리부는,
파노라마의 좌표맵과 해당 파노라마의 시점과 각 오브젝트까지의 거리를 깊이 정보로 표현한 뎁스맵을 매칭시켜 관리하는 것
을 특징으로 하는 컴퓨터 시스템.14. The method of claim 13,
The three-dimensional model management unit,
A coordinate map of the panorama and a depth map representing the viewpoint of the panorama and the distance to each object as depth information are managed and managed
Lt; / RTI > 제19항에 있어서,
상기 3차원 모델 관리부는,
상기 오브젝트와 관련된 정보를 포함하는 태그맵을 상기 좌표맵과 매칭시켜 관리하는 것
을 특징으로 하는 컴퓨터 시스템.20. The method of claim 19,
The three-dimensional model management unit,
And managing a tag map including information related to the object by matching with the coordinate map
Lt; / RTI >
KR1020180026701A 2018-01-22 2018-03-07 Method and system for generating three-dimensional model for panoramic view KR102147969B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020180007882 2018-01-22
KR20180007882 2018-01-22

Publications (2)

Publication Number Publication Date
KR20190089681A true KR20190089681A (en) 2019-07-31
KR102147969B1 KR102147969B1 (en) 2020-08-25

Family

ID=67473720

Family Applications (4)

Application Number Title Priority Date Filing Date
KR1020180026699A KR102132671B1 (en) 2018-01-22 2018-03-07 Method and system for providing navigation function from aerial view to street view
KR1020180026701A KR102147969B1 (en) 2018-01-22 2018-03-07 Method and system for generating three-dimensional model for panoramic view
KR1020180028886A KR102136210B1 (en) 2018-01-22 2018-03-12 Method and system for revising correcting panoramic image
KR1020180034078A KR102132675B1 (en) 2018-01-22 2018-03-23 Method and system for providing navigation function through aerial view

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020180026699A KR102132671B1 (en) 2018-01-22 2018-03-07 Method and system for providing navigation function from aerial view to street view

Family Applications After (2)

Application Number Title Priority Date Filing Date
KR1020180028886A KR102136210B1 (en) 2018-01-22 2018-03-12 Method and system for revising correcting panoramic image
KR1020180034078A KR102132675B1 (en) 2018-01-22 2018-03-23 Method and system for providing navigation function through aerial view

Country Status (1)

Country Link
KR (4) KR102132671B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210019221A (en) * 2019-08-12 2021-02-22 네이버랩스 주식회사 Method and system for generating depth information of street view image using 2d map
KR20210099298A (en) * 2020-02-04 2021-08-12 네이버 주식회사 Electronic device for providing visual localization based on outdoor three-dimension map information and operating method thereof
JP2023045672A (en) * 2021-09-22 2023-04-03 シンメトリー・ディメンションズ・インク Three-dimensional model generation system, three-dimensional model generation server, position information game server, and three-dimensional model generation method
KR20230138105A (en) 2022-03-23 2023-10-05 주식회사 코매퍼 Method of converting drone photographic image units using LiDAR data
WO2024101776A1 (en) * 2022-11-09 2024-05-16 네이버랩스 주식회사 Three-dimensional street view model generation method and system using three-dimensional building model and road model

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210022958A1 (en) 2019-07-24 2021-01-28 Lg Electronics Inc. Leg care apparatus
CN113411488A (en) * 2020-03-17 2021-09-17 长沙智能驾驶研究院有限公司 Panoramic image generation method and device, storage medium and computer equipment
CN112002002A (en) * 2020-08-18 2020-11-27 广州海事科技有限公司 Channel modeling method, channel modeling system, computer device, and storage medium
KR20240053391A (en) * 2022-10-17 2024-04-24 네이버랩스 주식회사 Method and system for matching street view data with 3d model
KR20240066616A (en) * 2022-11-08 2024-05-16 네이버랩스 주식회사 Method and system for generating visual feature map using 3d models and street view images
KR102587233B1 (en) * 2022-11-24 2023-10-10 인하대학교 산학협력단 360 rgbd image synthesis from a sparse set of images with narrow field-of-view

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101131093B1 (en) * 2011-10-14 2012-04-03 주식회사 미래엔에스 Four-dimension based interactive airship simulation system using geographic information and method for the same
KR101370718B1 (en) * 2012-10-26 2014-03-06 한국과학기술원 Method and apparatus for 2d to 3d conversion using panorama image
US20160133044A1 (en) * 2012-06-28 2016-05-12 Here Global B.V. Alternate Viewpoint Image Enhancement
KR20170103763A (en) * 2015-08-03 2017-09-13 바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드 Modelling method and device for three-dimensional road model, and storage medium
WO2017203710A1 (en) * 2016-05-27 2017-11-30 楽天株式会社 Three-dimensional model generation system, three-dimensional model generation method, and program

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090080169A (en) * 2008-01-21 2009-07-24 주식회사 엘비에스플러스 Method for Generating 3-D Map and Method for Correcting Indentifying Information on 3-D Map Which Is Generated by the Same Method
KR20110008676A (en) * 2009-07-21 2011-01-27 대우조선해양 주식회사 Barge mounted fuel cell generating plant and method for placing the same
KR101096170B1 (en) * 2009-10-15 2011-12-22 (주)대우건설 Method for constructing continuous filled steel tube girder bridge
KR101510655B1 (en) * 2010-01-26 2015-04-10 주식회사 이미지넥스트 Around image generating method and apparatus
KR101756946B1 (en) * 2017-01-20 2017-07-11 장수진 Method and apparatus for performing map search and constructing a traffic route based longitude line and latitude line

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101131093B1 (en) * 2011-10-14 2012-04-03 주식회사 미래엔에스 Four-dimension based interactive airship simulation system using geographic information and method for the same
US20160133044A1 (en) * 2012-06-28 2016-05-12 Here Global B.V. Alternate Viewpoint Image Enhancement
KR101370718B1 (en) * 2012-10-26 2014-03-06 한국과학기술원 Method and apparatus for 2d to 3d conversion using panorama image
KR20170103763A (en) * 2015-08-03 2017-09-13 바이두 온라인 네트웍 테크놀러지 (베이징) 캄파니 리미티드 Modelling method and device for three-dimensional road model, and storage medium
WO2017203710A1 (en) * 2016-05-27 2017-11-30 楽天株式会社 Three-dimensional model generation system, three-dimensional model generation method, and program

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210019221A (en) * 2019-08-12 2021-02-22 네이버랩스 주식회사 Method and system for generating depth information of street view image using 2d map
US11482009B2 (en) 2019-08-12 2022-10-25 Naver Labs Corporation Method and system for generating depth information of street view image using 2D map
KR20210099298A (en) * 2020-02-04 2021-08-12 네이버 주식회사 Electronic device for providing visual localization based on outdoor three-dimension map information and operating method thereof
JP2023045672A (en) * 2021-09-22 2023-04-03 シンメトリー・ディメンションズ・インク Three-dimensional model generation system, three-dimensional model generation server, position information game server, and three-dimensional model generation method
KR20230138105A (en) 2022-03-23 2023-10-05 주식회사 코매퍼 Method of converting drone photographic image units using LiDAR data
WO2024101776A1 (en) * 2022-11-09 2024-05-16 네이버랩스 주식회사 Three-dimensional street view model generation method and system using three-dimensional building model and road model

Also Published As

Publication number Publication date
KR102132671B1 (en) 2020-07-13
KR20190089684A (en) 2019-07-31
KR102136210B1 (en) 2020-07-21
KR102147969B1 (en) 2020-08-25
KR102132675B1 (en) 2020-07-13
KR20190089680A (en) 2019-07-31
KR20190089683A (en) 2019-07-31

Similar Documents

Publication Publication Date Title
KR102147969B1 (en) Method and system for generating three-dimensional model for panoramic view
US11729245B2 (en) Platform for constructing and consuming realm and object feature clouds
KR102212825B1 (en) Method and system for updating map for pose estimation based on images
US9092899B1 (en) Automatic method for photo texturing geolocated 3D models from geolocated imagery
US20200314046A1 (en) Spatial messaging and content sharing method, and system therefor
EP3467790B1 (en) Information processing device, information processing method, and storage medium
KR101989089B1 (en) Method and system for authoring ar content by collecting ar content templates based on crowdsourcing
US11403822B2 (en) System and methods for data transmission and rendering of virtual objects for display
KR20150089806A (en) A Visual Reality system for city space management, inquiry, estimation and permission to be applied a City Information Model streaming technology, and a method of using a City Information Model
CN112104691A (en) Software engine virtualization across edges and clouds and dynamic resource and task distribution
CN117280374A (en) 3D object management data, computer, and distributed management method for 3D object
CN113379748A (en) Point cloud panorama segmentation method and device
KR102189924B1 (en) Method and system for remote location-based ar authoring using 3d map
KR20210057586A (en) Method and system for camera-based visual localization using blind watermarking
KR102368953B1 (en) Method and system for providing virtual reality space
KR102407522B1 (en) Real-time three dimension model construction method and system
JP2022539352A (en) world coordinate frame defined by dataset correspondence
KR102343182B1 (en) Method and apparatus for determining entrance of poi by using entrance mapped to building
KR102243138B1 (en) Mixed reality device support apparatus using environment information capture and method thereof
KR102520189B1 (en) Method and system for generating high-definition map based on aerial images captured from unmanned air vehicle or aircraft
US20240233266A9 (en) Method And System For Generating Virtual Environment To Verify Autonomous Driving Service
US20240135646A1 (en) Method And System For Generating Virtual Environment To Verify Autonomous Driving Service
KR102683777B1 (en) Electronic device and method for creating 3-dimensional space data
KR102023180B1 (en) Method and system for occupying space based on geofencing
WO2019117655A1 (en) Remote location-based ar authoring method and system using 3d map

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant