KR100932634B1 - 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템 - Google Patents

증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템 Download PDF

Info

Publication number
KR100932634B1
KR100932634B1 KR1020070139061A KR20070139061A KR100932634B1 KR 100932634 B1 KR100932634 B1 KR 100932634B1 KR 1020070139061 A KR1020070139061 A KR 1020070139061A KR 20070139061 A KR20070139061 A KR 20070139061A KR 100932634 B1 KR100932634 B1 KR 100932634B1
Authority
KR
South Korea
Prior art keywords
data
modeling data
dimensional
map
marker information
Prior art date
Application number
KR1020070139061A
Other languages
English (en)
Other versions
KR20090070900A (ko
Inventor
송주영
Original Assignee
팅크웨어(주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 팅크웨어(주) filed Critical 팅크웨어(주)
Priority to KR1020070139061A priority Critical patent/KR100932634B1/ko
Priority to EP08778451A priority patent/EP2235687A1/en
Priority to US12/810,701 priority patent/US20100277504A1/en
Priority to AU2008344241A priority patent/AU2008344241A1/en
Priority to PCT/KR2008/003781 priority patent/WO2009084782A1/en
Priority to CN2008801232507A priority patent/CN101911128B/zh
Publication of KR20090070900A publication Critical patent/KR20090070900A/ko
Application granted granted Critical
Publication of KR100932634B1 publication Critical patent/KR100932634B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05—Geographic models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/08—Bandwidth reduction

Abstract

본 발명은 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받는 단계와, 지도 데이터 제공 서버로부터 2차원 마커 정보가 포함된 지도 데이터를 수신하는 단계와, 수신된 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하는 단계와, 상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하는 단계와, 상기 3차원 모델링 데이터의 아이디로 3차원 모델링 데이터베이스로부터 상기 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출하는 단계와, 상기 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하는 단계 및 상기 랜더링 결과를 화면에 랜더링하는 단계를 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법을 제공한다.
증강 현실, 마커, 3차원, 웹, 지도

Description

증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그 시스템{METHOD AND SYSTEM FOR SERVING THREE DIMENSION WEB MAP SERVICE USING AUGMENTED REALITY}
본 발명은 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그 시스템에 관한 것으로, 더욱 상세하게는 아주 적은 양의 데이터만으로도 표현할 수 있는 2차원 마커 정보를 특정 3차원 객체와 미리 매핑시킨 후 실제로 지도 데이터를 수신할 때 3차원 객체를 모두 수신하는 것이 아니라 3차원 객체가 그려질 위치에 대응하는 2차원 마커 정보만을 수신하여 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 렌더링하여 3차원 지도 서비스를 제공하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그 시스템에 관한 것이다.
일반적으로 증강 현실(augmented reality) 시스템은 사용자가 눈으로 보는 현실 세계와 부가 정보를 갖는 가상 세계를 하나의 형상으로 보여주는 가상 현실 기술로서 현실 환경과 가상 환경을 융합하는 복합형 가상 현실 시스템(Hybrid Virtual Reality System)이다. 이러한 증강 현실은 현실 세계를 가상 세계로 보완해주는 개념으로서 컴퓨터 그래픽으로 만들어진 가상 환경을 사용하지만 주역은 현실 환경이다. 컴퓨터 그래픽은 현실 환경에 필요한 정보를 추가 제공하는 역할을 하고, 사용자가 보고 있는 실사 영상에 3차원 가상 영상을 겹침(overlap)으로써 현실 환경과 가상 화면과의 구분이 모호해지도록 한다.
즉, 증강 현실 시스템은 실사 영상에 가상 영상을 정합하기 위해서 카메라의 위치와 자세값을 이용하여 미리 3차원으로 모델링된 데이터를 실제 카메라가 실사 영상을 투영하는 것과 같은 3차원 원근 투영법을 이용하여 가상 영상을 렌더링한 다음 실사 영상과 가상의 그래픽을 합성하여 보여준다. 이때 증강 현실 시스템은 실사 영상의 정확한 위치에 가상 그래픽 객체를 합성하기 위해서 2차원 화면에서 가상 객체들의 정확한 위치와 방향을 알아내야 하는 레지스트레이션(registration) 문제가 있다. 이를 해결하기 위해서는 현실 세계의 어떤 지점(예를 들어 가상 객체가 그려 넣어지게 되는 위치)의 3차원 좌표가 필요하며, 이 좌표는 카메라를 기준으로 하는 좌표값이 되어야 한다.
따라서, 증강 현실 시스템은 카메라의 영상에서 현실 세계의 어떤 지점이나 물체에 대한 카메라의 상대 3차원 좌표를 얻어내야 하는데 3차원 좌표를 얻어내기 위해서 인간이 두 눈을 통하여 깊이를 인지하는 원리에 의해 이론적으로 2개의 카메라가 필요하다. 하지만 한 개의 카메라만을 사용하는 경우가 대부분이며, 한 개의 카메라에서 현실 세계의 3차원 위치를 파악하는 것이 어렵기 때문에 이를 해결하기 위한 방안으로 마커를 이용한다.
마커(marker)는 컴퓨터 비전 기술로 인식하기 쉬운 어떤 물체를 의미하는 것이며, 예를 들어 검은 바탕에 똑바로 쓰여진 평면 문양이나 특이한 색상을 갖는 기하학적인 물체라고 할 수 있다. 가상 객체는 카메라의 시점과 주어진 3차원 위치 에서 어떻게 보이고 그려져야 할지를 프로젝션 계산에 의해 결정하게 된다.
이러한 원리를 3차원 웹 지도 서비스에 적용하려고 하면, 보통 3차원 객체를 표현하기 위해서 수백 내지 수천 개의 점 정보와 텍스쳐 정보, 해당 텍스쳐 이미지 등 많은 양의 데이터가 필요한데 웹 지도 서비스에서 사용자에게 3차원 객체를 표현하기 위해서 이 모든 정보를 네트워크로 전송해야 한다. 하지만 이러한 3차원 웹 지도 서비스 방식은 렌더링 시간에 비해 데이터의 네트워크 전송 시 부하가 너무 크기 때문에 실시간으로 서비스하는 것이 거의 불가능한 실정이다.
한편 3차원 객체들을 사용자 컴퓨터에 미리 저장시키거나 캐싱을 이용해서 매번 많은 데이터를 전송하는 문제점을 해결한다고 해도 3차원 웹 지도 서비스에서는 사용자의 입력에 따라 매번 지도의 방향과 기울기가 변해야 하기 때문에 이러한 지도 위의 정확한 위치에 미리 저장된 3차원 객체들을 올리는 것은 매우 힘들다.
따라서, 이러한 3차원 웹 지도 서비스의 문제점을 해결하기 위한 방안이 절실하게 요청되고 있는 실정이다.
본 발명은 아주 적은 양의 데이터만으로도 표현할 수 있는 2차원 마커 정보를 특정 3차원 객체와 미리 매핑시킨 후 실제로 지도 데이터를 수신할 때 3차원 객체를 모두 수신하는 것이 아니라 3차원 객체가 그려질 위치에 대응하는 2차원 마커 정보만을 수신하여 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 렌더링하여 3차원 지도 서비스를 제공하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 시스템을 제공한다.
본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 방법은 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받는 단계와, 지도 데이터 제공 서버로부터 2차원 마커 정보가 포함된 지도 데이터를 수신하는 단계와, 수신된 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하는 단계와, 상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하는 단계와, 상기 3차원 모델링 데이터의 아이디로 3차원 모델링 데이터베이스로부터 상기 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출하는 단계와, 상기 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하는 단계 및 상기 랜더링 결과를 화면에 랜더링하는 단계를 포함한다.
본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 시스 템은 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 저장하는 3차원 모델링 데이터베이스와, 지도 데이터 제공 서버로부터 2차원 마커 정보가 포함된 지도 데이터를 수신하는 수신부와, 상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하고, 상기 3차원 모델링 데이터의 아이디로 3차원 모델링 데이터베이스로부터 상기 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출하는 추출부 및 상기 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하고, 상기 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하는 렌더링부를 포함한다.
본 발명에 따르면, 아주 적은 양의 데이터만으로도 표현할 수 있는 2차원 마커 정보를 특정 3차원 객체와 미리 매핑시킨 후 실제로 지도 데이터를 수신할 때 3차원 객체를 모두 수신하는 것이 아니라 3차원 객체가 그려질 위치에 대응하는 2차원 마커 정보만을 수신하여 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 렌더링하여 3차원 지도 서비스를 제공할 수 있다.
이하 첨부된 도면들을 참조하여 증강 현실을 이용한 3차원 웹 지도 서비스 시스템 및 방법을 상세하게 설명하기로 한다.
도 1은 본 발명에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 시스템 및 지도 데이터 제공 서버의 연동 관계를 나타내는 도면이다.
도 1을 참조하면, 3차원 웹 지도 서비스 시스템(100)은 사전에 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받는다.
또한 3차원 웹 지도 서비스 시스템(100)은 네트워크(110)를 통해 연동된 지도 데이터 제공 서버(120)로부터 2차원 마커 정보가 포함된 지도 데이터를 수신한다.
3차원 웹 지도 서비스 시스템(100)은 상기 수신된 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하고, 상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출한다. 또한 3차원 웹 지도 서비스 시스템(100)은 추출된 3차원 모델링 데이터의 아이도로 3차원 모델링 데이터베이스로부터 검출된 2차원 마커 정보에 대응하는 3차원 모델링 데이터를 추출한다.
3차원 웹 지도 서비스 시스템(100)은 상기 추출된 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하고, 상기 렌더링 결과를 화면에 렌더링한다.
도 2는 본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 시스템의 구성을 나타내는 도면이다.
도 2를 참조하면, 본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 시스템(100)은 수신부(210), 추출부(220), 렌더링부(230) 및 3차원 모델링 데이터베이스(240)를 포함한다.
수신부(210)는 네트워크(110)를 통해 연동된 지도 데이터 제공 서버(120)로부터 2차원 마커 정보가 포함된 지도 데이터를 수신한다.
도 3은 2차원 마커 정보의 일례를 나타내는 도면이다.
도 3을 참조하면, 본 발명에 따른 2차원 마커 정보(310~340)는 방향과 거리를 역산출할 수 있고, 어떤 방향에서 보더라도 유일한 패턴을 가지는 모든 모양이 사용 가능하다. 하지만 마커 정보(350~360)는 방향과 거리를 역산출할 수 없기 때문에 본 발명에 따른 2차원 마커 정보로 사용될 수 없다.
또한 수신부(210)는 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 수신할 수도 있다.
도 4는 3차원 모델링 데이터의 일례를 나타내는 도면이다.
도 4를 참조하면, 3차원 모델링 데이터(410~430)는 게임이나 3차원 렌더링에 쓰이는 모든 데이터를 지칭하며, .ACE 나 .X 파일 또는 3D Max로 제작된 데이터, 퀘이크(quake)에서 쓰이는 MD3 등과 같은 데이터가 포함될 수 있다.
도 5는 2차원 마커 정보와 3차원 모델링 데이터의 매핑 관계의 일례를 나타내는 도면이다.
도 5를 참조하면, 사각형 그림인 1번 마커는 63빌딩 건물의 3차원 모델링 데이터와 매칭되고, 원을 포함하는 사각형 그림인 2번 마커는 여자 캐릭터 객체의 3차원 모델링 데이터와 매칭되고, 삼각형을 포함하는 사각형 그림인 3번 마커는 한국 화장품 건물의 3차원 모델링 데이터와 매칭된다. 이와 같이, 본 발명에 따른 2차원 마커 정보와 3차원 모델링 데이터는 일대일로 매핑된다.
도 6은 2차원 마커 정보의 아이디와 3차원 모델링 데이터의 아이디를 매핑시킨 매핑 정보 파일의 일례를 나타내는 도면이다.
도 6을 참조하면, 상기 매핑 정보 파일은 2차원 마커 정보의 아이디(ID)와 3차원 모델링 데이터의 아이디를 각각 일대일로 매핑시킨다. 사각형 그림인 1번 마커의 아이디는 63빌딩 건물의 아이디와 매핑되고, 원을 포함하는 사각형 그림인 2번 마커의 아이디는 여자 캐릭터 객체의 3차원 모델링 데이터의 아이디와 매핑되고, 삼각형을 포함하는 사각형 그림인 3번 마커의 아이디는 한국 화장품 건물의 아이디를 매핑된다.
추출부(220)는 상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출한다. 또한 추출부(220)는 상기 3차원 모델링 데이터의 아이디로 3차원 모델링 데이터베이스(240)로부터 상기 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출한다. 즉, 추출부(220)는 상기 프레임 버퍼를 분석하여 이미지 프로세싱 과정을 거쳐 상기 프레임 버퍼 내부에 상기 매핑 정보 파일에 포함된 2차원 마커 정보들과 동일한 마커 정보가 존재하는지 검출하고, 상기 매핑 정보 파일을 검색하여 상기 검출된 마커 정보에 대응되는 3차원 모델링 데이터 정보를 추출한다.
렌더링부(230)는 상기 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하고, 상기 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링한다.
3차원 모델링 데이터베이스(240)는 상기 3차원 모델링 데이터를 미리 다운받아 도 6에 도시된 것과 같이 상기 2차원 마커 정보와 상기 3차원 모델링 데이터를 매핑시킨 상기 매핑 파일 정보를 저장한다.
즉, 렌더링부(230)는 상기 추출된 3차원 모델링 데이터를 지도상의 마커 왜곡 정도에 따라 크기와 회전 방향을 조정하여 정해진 위치에 렌더링하고, 상기 랜더링 결과를 화면에 랜더링한다.
도 7은 2차원 마커 정보 및 2차원 마커 정보에 매핑된 3차원 모델링 데이터를 합성한 상태의 일례를 나타내는 도면이다.
도 7을 참조하면, 2차원 지도 데이터(710)는 2차원 마커 정보(711)를 포함하고, 3차원 지도 데이터(720)는 2차원 마커 정보에 매핑된 3차원 모델링 데이터(721)가 합성된 상태이다. 추출부(220)는 상기 프레임 버퍼를 분석하여 이미지 프로세싱 과정을 거쳐 상기 프레임 버퍼 내부에 상기 매핑 정보 파일에 포함된 2차원 마커 정보(711)와 동일한 마커 정보가 존재하는지 검출하고, 3차원 모델링 데이터베이스(240)로부터 상기 매핑 정보 파일을 검색하여 상기 검출된 마커 정보에 대응되는 3차원 모델링 데이터(721)를 추출한다. 그리고, 렌더링부(230)는 상기 추출된 3차원 모델링 데이터(721)를 지도상의 마커 왜곡 정도에 따라 크기와 회전 방향을 조정하여 정해진 위치에 렌더링하고, 상기 랜더링 결과인 3차원 지도 데이터(720)를 화면에 랜더링한다.
이와 같이, 본 발명에 따른 3차원 지도 웹 서비스 시스템(100)은 아주 적은 양의 데이터만으로도 표현할 수 있는 2차원 마커 정보를 특정 3차원 객체와 미리 매핑시킨 후 실제로 지도 데이터를 수신할 때 3차원 객체를 모두 수신하는 것이 아니라 3차원 객체가 그려질 위치에 대응하는 2차원 마커 정보만을 수신하여 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 렌더링하여 3차원 지도 서비스를 제 공할 수 있다.
도 8은 본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 방법의 흐름을 나타내는 도면이다.
도 1 및 도 8을 참조하면, 단계(S810)에서 3차원 웹 지도 서비스 시스템(100)은 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받다. 또한 단계(S810)에서 3차원 웹 지도 서비스 시스템(100)은 상기 3차원 모델링 데이터를 미리 다운받을 수 있다. 또한 단계(S810)에서 3차원 웹 지도 서비스 시스템(100)은 상기 3차원 모델링 데이터베이스에 상기 3차원 모델링 데이터를 기록하고 유지할 수 있다.
단계(S820)에서 3차원 웹 지도 서비스 시스템(100)은 네트워크(110)로 연동된 지도 데이터 제공 서버(120)로부터 2차원 마커 정보가 포함된 지도 데이터를 수신한다.
단계(S830)에서 3차원 웹 지도 서비스 시스템(100)은 상기 수신된 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링한다.
단계(S840)에서 3차원 웹 지도 서비스 시스템(100)은 상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출한다. 이하 도 9를 참조하여 2차원 마커 정보를 검출하고 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하는 단계를 보다 구체적으로 설명하기로 한다.
도 9는 2차원 마커 정보를 검출하고 매핑 정보 파일을 검색하여 3차원 모델 링 데이터의 아이디를 추출하는 단계를 구체화한 일례를 나타내는 도면이다.
도 1 및 도 9를 참조하면, 단계(S910)에서 3차원 웹 지도 서비스 시스템(100)은 상기 프레임 버퍼를 분석하여 이미지 프로세싱 과정을 거쳐 상기 프레임 버퍼 내부에 상기 매핑 정보 파일에 포함된 2차원 마커 정보들과 동일한 마커 정보가 존재하는지 검출한다.
단계(S920)에서 3차원 웹 지도 서비스 시스템(100)은 상기 매핑 정보 파일을 검색하여 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터의 아이디를 추출한다. 즉, 단계(S920)에서 3차원 웹 지도 서비스 시스템(100)은 상기 매핑 정보 파일을 검색하여 도 6에 도시된 것과 같이 상기 검출된 2차원 마커 정보의 아이디에 대응되는 3차원 모델링 데이터의 아이디를 추출한다.
단계(S850)에서 3차원 웹 지도 서비스 시스템(100)은 상기 3차원 모델링 데이터의 아이디로 3차원 모델링 데이터베이스로부터 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출한다.
단계(S860)에서 3차원 웹 지도 서비스 시스템(100)은 상기 3차원 모델링 데이터를 가공하여 프레임 버퍼상에 추가로 렌더링한다. 즉, 단계(S860)에서 3차원 웹 지도 서비스 시스템(100)은 상기 추출된 3차원 모델링 데이터를 지도상의 마커 왜곡 정도에 따라 크기와 회전 방향을 조정하여 정해진 위치에 렌더링한다.
단계(S870)에서 3차원 웹 지도 서비스 시스템(100)은 랜더링 결과를 화면에 랜더링한다. 즉, 단계(S870)에서 3차원 웹 지도 서비스 시스템(100)은 상기 3차원 모델링 데이터를 지도상에 렌더링한 결과로서 도 7에 도시된 것과 같은 3차원 지도 데이터(720)를 화면에 렌더링할 수 있다.
이와 같이, 본 발명에 따른 3차원 지도 웹 서비스 방법은 아주 적은 양의 데이터만으로도 표현할 수 있는 2차원 마커 정보를 특정 3차원 객체와 미리 매핑시킨 후 실제로 지도 데이터를 수신할 때 3차원 객체를 모두 수신하는 것이 아니라 3차원 객체가 그려질 위치에 대응하는 2차원 마커 정보만을 수신하여 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 렌더링하여 3차원 지도 서비스를 제공할 수 있다.
한편 본 발명에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드 웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 시스템 및 지도 데이터 제공 서버의 연동 관계를 나타내는 도면이다.
도 2는 본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 시스템의 구성을 나타내는 도면이다.
도 3은 2차원 마커 정보의 일례를 나타내는 도면이다.
도 4는 3차원 모델링 데이터의 일례를 나타내는 도면이다.
도 5는 2차원 마커 정보와 3차원 모델링 데이터의 매핑 관계의 일례를 나타내는 도면이다.
도 6은 2차원 마커 정보의 아이디와 3차원 모델링 데이터의 아이디를 매핑시킨 매핑 정보 파일의 일례를 나타내는 도면이다.
도 7은 2차원 마커 정보 및 2차원 마커 정보에 매핑된 3차원 모델링 데이터를 합성한 상태의 일례를 나타내는 도면이다.
도 8은 본 발명의 일실시예에 따른 증강 현실을 이용한 3차원 웹 지도 서비스 방법의 흐름을 나타내는 도면이다.
도 9는 2차원 마커 정보를 검출하고 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하는 단계를 구체화한 일례를 나타내는 도면이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 3차원 웹 지도 서비스 시스템
110: 네트워크
120: 지도 데이터 제공 서버
210: 수신부 220: 추출부
230: 렌더링부 240: 3차원 모델링 데이터베이스

Claims (12)

  1. 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받는 단계;
    지도 데이터 제공 서버로부터 2차원 마커 정보가 포함된 지도 데이터를 수신하는 단계;
    수신된 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하는 단계;
    상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하는 단계;
    상기 3차원 모델링 데이터의 아이디로 3차원 모델링 데이터베이스로부터 상기 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출하는 단계;
    상기 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하는 단계; 및
    상기 랜더링 결과를 화면에 랜더링하는 단계
    를 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  2. 제1항에 있어서,
    3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하는 단계는,
    상기 추출된 3차원 모델링 데이터를 지도상의 마커 왜곡 정도에 따라 크기와 회전 방향을 조정하여 정해진 위치에 렌더링하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  3. 제1항에 있어서,
    지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하는 단계는,
    상기 프레임 버퍼를 분석하여 이미지 프로세싱 과정을 거쳐 상기 프레임 버퍼 내부에 상기 매핑 정보 파일에 포함된 2차원 마커 정보들과 동일한 마커 정보가 존재하는지 검출하는 단계; 및
    상기 매핑 정보 파일을 검색하여 상기 검출된 마커 정보에 대응되는 3차원 모델링 데이터의 아이디를 추출하는 단계
    를 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  4. 제1항에 있어서,
    상기 2차원 마커 정보는 방향과 거리를 역산출할 수 있고, 어떤 방향에서 보더라도 유일한 패턴을 가지는 것을 특징으로 하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  5. 제1항에 있어서,
    상기 3차원 모델링 데이터는 게임 또는 3차원 렌더링에 쓰이는 모든 데이터 를 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  6. 제1항에 있어서,
    상기 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받는 단계는,
    상기 3차원 모델링 데이터를 미리 다운받는 단계를 더 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  7. 제1항에 있어서,
    상기 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 다운 받는 단계는,
    상기 3차원 모델링 데이터베이스에 상기 3차원 모델링 데이터 및 상기 매핑 정보 파일을 기록하고 유지하는 단계를 더 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 방법.
  8. 제1항 내지 제7항 중 어느 한 항의 방법을 실행하기 위한 프로그램이 기록되어 있는 것을 특징으로 하는 컴퓨터에서 판독 가능한 기록 매체.
  9. 2차원 마커 정보와 3차원 모델링 데이터를 매핑시킨 매핑 정보 파일을 저장하는 3차원 모델링 데이터베이스;
    지도 데이터 제공 서버로부터 2차원 마커 정보가 포함된 지도 데이터를 수신하는 수신부;
    상기 지도 데이터로부터 2차원 마커 정보를 검출하고, 상기 매핑 정보 파일을 검색하여 3차원 모델링 데이터의 아이디를 추출하고, 상기 3차원 모델링 데이터 의 아이디로 3차원 모델링 데이터베이스로부터 상기 검출된 2차원 마커 정보에 대응되는 3차원 모델링 데이터를 추출하는 추출부; 및
    상기 지도 데이터로 미리 프레임 버퍼에 지도를 렌더링하고, 상기 3차원 모델링 데이터를 가공하여 상기 프레임 버퍼상에 추가로 렌더링하는 렌더링부
    를 포함하는 증강 현실을 이용한 3차원 웹 지도 서비스 시스템.
  10. 제9항에 있어서,
    상기 렌더링부는,
    상기 추출된 3차원 모델링 데이터를 지도상의 마커 왜곡 정도에 따라 크기와 회전 방향을 조정하여 정해진 위치에 렌더링하고, 상기 랜더링 결과를 화면에 랜더링하는 증강 현실을 이용한 3차원 웹 지도 서비스 시스템.
  11. 제9항에 있어서,
    상기 추출부는,
    상기 프레임 버퍼를 분석하여 이미지 프로세싱 과정을 거쳐 상기 프레임 버퍼 내부에 상기 매핑 정보 파일에 포함된 2차원 마커 정보들과 동일한 마커 정보가 존재하는지 검출하고, 상기 매핑 정보 파일을 검색하여 상기 검출된 마커 정보에 대응되는 3차원 모델링 데이터 정보를 추출하는 증강 현실을 이용한 3차원 웹 지도 서비스 시스템.
  12. 제9항에 있어서,
    상기 3차원 모델링 데이터베이스는,
    상기 3차원 모델링 데이터를 미리 다운받아 상기 2차원 마커 정보와 매핑시킨 상기 매핑 파일 정보를 저장하는 증강 현실을 이용한 3차원 웹 지도 서비스 시스템.
KR1020070139061A 2007-12-27 2007-12-27 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템 KR100932634B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020070139061A KR100932634B1 (ko) 2007-12-27 2007-12-27 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템
EP08778451A EP2235687A1 (en) 2007-12-27 2008-06-29 Method and system for serving three dimension web map service using augmented reality
US12/810,701 US20100277504A1 (en) 2007-12-27 2008-06-29 Method and system for serving three dimension web map service using augmented reality
AU2008344241A AU2008344241A1 (en) 2007-12-27 2008-06-29 Method and system for serving three dimension web map service using augmented reality
PCT/KR2008/003781 WO2009084782A1 (en) 2007-12-27 2008-06-29 Method and system for serving three dimension web map service using augmented reality
CN2008801232507A CN101911128B (zh) 2007-12-27 2008-06-29 用于提供使用增强现实的三维网络地图服务的方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070139061A KR100932634B1 (ko) 2007-12-27 2007-12-27 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템

Publications (2)

Publication Number Publication Date
KR20090070900A KR20090070900A (ko) 2009-07-01
KR100932634B1 true KR100932634B1 (ko) 2009-12-21

Family

ID=40824475

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070139061A KR100932634B1 (ko) 2007-12-27 2007-12-27 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템

Country Status (6)

Country Link
US (1) US20100277504A1 (ko)
EP (1) EP2235687A1 (ko)
KR (1) KR100932634B1 (ko)
CN (1) CN101911128B (ko)
AU (1) AU2008344241A1 (ko)
WO (1) WO2009084782A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100997084B1 (ko) 2010-06-22 2010-11-29 (주)올포랜드 지하시설물의 실시간 정보제공 방법 및 시스템, 이를 위한 서버 및 그 정보제공방법, 기록매체
KR101634106B1 (ko) 2015-09-25 2016-06-29 주식회사 지노시스템 위치 매칭 및 공간 검색을 통한 지리 정보 조회 방법

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10936650B2 (en) 2008-03-05 2021-03-02 Ebay Inc. Method and apparatus for image recognition services
US9495386B2 (en) 2008-03-05 2016-11-15 Ebay Inc. Identification of items depicted in images
KR101401321B1 (ko) * 2009-10-20 2014-05-29 에스케이플래닛 주식회사 근거리 무선 네트워크 기반 증강현실 서비스 시스템 및 그 방법
US8670939B2 (en) 2009-12-18 2014-03-11 Electronics And Telecommunications Research Institute Apparatus and method of providing facility information
US9164577B2 (en) 2009-12-22 2015-10-20 Ebay Inc. Augmented reality system, method, and apparatus for displaying an item image in a contextual environment
KR101330811B1 (ko) * 2010-08-25 2013-11-18 주식회사 팬택 인스턴트 마커를 이용한 증강 현실 장치 및 방법
CN102419681A (zh) * 2010-09-28 2012-04-18 联想(北京)有限公司 电子设备及其显示方法
US9507485B2 (en) 2010-09-27 2016-11-29 Beijing Lenovo Software Ltd. Electronic device, displaying method and file saving method
IL208600A (en) * 2010-10-10 2016-07-31 Rafael Advanced Defense Systems Ltd Real-time network-based laminated reality for mobile devices
US10127606B2 (en) 2010-10-13 2018-11-13 Ebay Inc. Augmented reality system and method for visualizing an item
CN102843349B (zh) * 2011-06-24 2018-03-27 中兴通讯股份有限公司 实现移动增强现实业务的方法及系统、终端及服务器
CN102509183A (zh) * 2011-10-19 2012-06-20 武汉元宝创意科技有限公司 一种利用信息技术建立捐助者与被捐助者感情关联的方法
US9449342B2 (en) 2011-10-27 2016-09-20 Ebay Inc. System and method for visualization of items in an environment using augmented reality
KR20130081569A (ko) * 2012-01-09 2013-07-17 삼성전자주식회사 3ｄ 영상을 출력하기 위한 장치 및 방법
US9384711B2 (en) 2012-02-15 2016-07-05 Microsoft Technology Licensing, Llc Speculative render ahead and caching in multiple passes
US20130282715A1 (en) * 2012-04-20 2013-10-24 Samsung Electronics Co., Ltd. Method and apparatus of providing media file for augmented reality service
US9230517B2 (en) 2012-05-31 2016-01-05 Microsoft Technology Licensing, Llc Virtual surface gutters
US9177533B2 (en) 2012-05-31 2015-11-03 Microsoft Technology Licensing, Llc Virtual surface compaction
US9235925B2 (en) * 2012-05-31 2016-01-12 Microsoft Technology Licensing, Llc Virtual surface rendering
US9286122B2 (en) 2012-05-31 2016-03-15 Microsoft Technology Licensing, Llc Display techniques using virtual surface allocation
US10846766B2 (en) 2012-06-29 2020-11-24 Ebay Inc. Contextual menus based on image recognition
US9401121B2 (en) 2012-09-27 2016-07-26 Futurewei Technologies, Inc. Network visualization through augmented reality and modeling
US9589078B2 (en) 2012-09-27 2017-03-07 Futurewei Technologies, Inc. Constructing three dimensional model using user equipment
US9466144B2 (en) 2012-11-02 2016-10-11 Trimble Navigation Limited 3D mapping of a surveyed environment
KR101380854B1 (ko) 2013-03-21 2014-04-04 한국과학기술연구원 웹 정보구조에 기반한 증강현실 콘텐츠 제공장치 및 방법
US9307007B2 (en) 2013-06-14 2016-04-05 Microsoft Technology Licensing, Llc Content pre-render and pre-fetch techniques
KR102106135B1 (ko) * 2013-10-01 2020-05-04 한국전자통신연구원 행동 인식 기반의 응용 서비스 제공 장치 및 그 방법
JP6202981B2 (ja) * 2013-10-18 2017-09-27 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法
CN104735516A (zh) * 2015-02-28 2015-06-24 湖北视纪印象科技股份有限公司 扩充图像服务信息的方法及系统
CN106680849B (zh) * 2016-12-09 2020-05-08 重庆长安汽车股份有限公司 利用车辆信息服务系统的高尔夫信息服务的实现方法
US10592536B2 (en) * 2017-05-30 2020-03-17 Hand Held Products, Inc. Systems and methods for determining a location of a user when using an imaging device in an indoor facility
JP6367450B1 (ja) 2017-10-31 2018-08-01 株式会社テクテック 位置ゲーム用インターフェースシステム、プログラム及び制御方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004341642A (ja) 2003-05-13 2004-12-02 Nippon Telegr & Teleph Corp <Ntt> 画像合成表示方法、画像合成表示プログラム、並びにこの画像合成表示プログラムを記録した記録媒体
KR20060021001A (ko) * 2004-09-02 2006-03-07 (주)제니텀 엔터테인먼트 컴퓨팅 개체인지를 이용한 Marker-less 증강현실과 복합현실 응용시스템 및 그 방법
KR100672288B1 (ko) 2005-11-07 2007-01-24 신믿음 마커간 융합을 이용하여 증강현실을 구현하는 방법 및 그장치

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3338021B2 (ja) * 2000-07-10 2002-10-28 コナミ株式会社 ３次元画像処理装置及び３次元画像処理プログラムを記録した可読記録媒体
KR100613906B1 (ko) * 2004-11-16 2006-08-21 한국전자통신연구원 주행속도 기반 연속적인 공간영역 질의 처리에 의한헤드업 디스플레이 장치를 갖는 차량항법 시스템 및 그의정보 출력 방법
US7920144B2 (en) * 2005-01-18 2011-04-05 Siemens Medical Solutions Usa, Inc. Method and system for visualization of dynamic three-dimensional virtual objects
KR20070019813A (ko) * 2005-08-11 2007-02-15 서강대학교산학협력단 증강현실을 이용한 자동차 항법 시스템
CN101055494B (zh) * 2006-04-13 2011-03-16 上海虚拟谷数码科技有限公司 基于空间索引立方体全景视频的虚拟场景漫游方法及其系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004341642A (ja) 2003-05-13 2004-12-02 Nippon Telegr & Teleph Corp <Ntt> 画像合成表示方法、画像合成表示プログラム、並びにこの画像合成表示プログラムを記録した記録媒体
KR20060021001A (ko) * 2004-09-02 2006-03-07 (주)제니텀 엔터테인먼트 컴퓨팅 개체인지를 이용한 Marker-less 증강현실과 복합현실 응용시스템 및 그 방법
KR100672288B1 (ko) 2005-11-07 2007-01-24 신믿음 마커간 융합을 이용하여 증강현실을 구현하는 방법 및 그장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100997084B1 (ko) 2010-06-22 2010-11-29 (주)올포랜드 지하시설물의 실시간 정보제공 방법 및 시스템, 이를 위한 서버 및 그 정보제공방법, 기록매체
KR101634106B1 (ko) 2015-09-25 2016-06-29 주식회사 지노시스템 위치 매칭 및 공간 검색을 통한 지리 정보 조회 방법

Also Published As

Publication number Publication date
WO2009084782A1 (en) 2009-07-09
AU2008344241A1 (en) 2009-07-09
EP2235687A1 (en) 2010-10-06
US20100277504A1 (en) 2010-11-04
CN101911128B (zh) 2012-09-19
CN101911128A (zh) 2010-12-08
KR20090070900A (ko) 2009-07-01

Similar Documents

Publication Publication Date Title
KR100932634B1 (ko) 증강 현실을 이용한 3차원 웹 지도 서비스 방법 및 그시스템
US11393173B2 (en) Mobile augmented reality system
JP6050518B2 (ja) 実環境に仮想情報を表現する方法
US8243061B2 (en) Image processing apparatus and method of controlling operation of same
WO2017041731A1 (en) Markerless multi-user multi-object augmented reality on mobile devices
CN110738737A (zh) 一种ar场景图像处理方法、装置、电子设备及存储介质
KR20210046592A (ko) 증강 현실 데이터 제시 방법, 장치, 기기 및 저장 매체
Pucihar et al. Exploring the evolution of mobile augmented reality for future entertainment systems
KR20140082610A (ko) 휴대용 단말을 이용한 증강현실 전시 콘텐츠 재생 방법 및 장치
KR101851303B1 (ko) 3차원 공간 재구성 장치 및 방법
CN113359986B (zh) 增强现实数据展示方法、装置、电子设备及存储介质
CN116057577A (zh) 用于增强现实的地图
KR20090087545A (ko) 심플 프레임 마커를 이용하는 증강현실 시스템 및 그 방법,상기 방법을 구현하는 프로그램이 기록된 기록매체
CN111744197A (zh) 一种数据处理方法、装置、设备及可读存储介质
JP6393000B2 (ja) ３ｄマップに関する仮説的ラインマッピングおよび検証
CN114445579A (zh) 物体标注信息呈现方法、装置、电子设备及存储介质
McClean An Augmented Reality System for Urban Environments using a Planar Building Fa cade Model
JP5425045B2 (ja) オブジェクト検出方法、オブジェクト検出装置およびオブジェクト検出プログラム
CN116152450A (zh) 一种增强现实三维网络地图服务的方法和系统
KR20240053224A (ko) 건물 형상 정보를 이용하여 3d 지도를 생성하는 방법, 컴퓨터 장치, 및 컴퓨터 프로그램
KR101779978B1 (ko) Vr을 이용한 변화된 공간에 대한 가상 이미지 정보 제공 방법 및 장치
CN117063206A (zh) 用于在增强现实观看环境中对齐虚拟物体的装置和方法
Reinhardt et al. DETERMINATION OF DEVICE POSE USING TEXT MATCHING FROM CAPTURED IMAGES
CN115797602A (zh) 一种基于物体定位添加ar讲解的方法及设备
KR20200051465A (ko) 투영 이미지 보완 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121105

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20130904

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20141010

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20151120

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20161114

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20171212

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee