KR101092104B1 - 3차원 위치영상 제공 방법 및 시스템 - Google Patents

3차원 위치영상 제공 방법 및 시스템 Download PDF

Info

Publication number
KR101092104B1
KR101092104B1 KR1020090079279A KR20090079279A KR101092104B1 KR 101092104 B1 KR101092104 B1 KR 101092104B1 KR 1020090079279 A KR1020090079279 A KR 1020090079279A KR 20090079279 A KR20090079279 A KR 20090079279A KR 101092104 B1 KR101092104 B1 KR 101092104B1
Authority
KR
South Korea
Prior art keywords
data
image data
location
information server
location information
Prior art date
Application number
KR1020090079279A
Other languages
English (en)
Other versions
KR20110021464A (ko
Inventor
임종우
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020090079279A priority Critical patent/KR101092104B1/ko
Priority to US12/832,681 priority patent/US20110055769A1/en
Publication of KR20110021464A publication Critical patent/KR20110021464A/ko
Application granted granted Critical
Publication of KR101092104B1 publication Critical patent/KR101092104B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/03—Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20—Instruments for performing navigational calculations
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3635—Guidance using 3D or perspective road maps
    • G01C21/3638—Guidance using 3D or perspective road maps including 3D objects and buildings
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13—Receivers
    • G01S19/14—Receivers specially adapted for specific applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Navigation (AREA)
  • Instructional Devices (AREA)

Abstract

카메라를 통해 영상 데이터가 촬영된 경우, 위치 데이터를 식별하는 GPS 장치, 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버로 전송하는 전송부, 상기 3차원 위치정보서버로부터 위치표시 데이터를 수신하는 수신부, 상기 수신된 위치표시 데이터 및 상기 촬영된 영상 데이터를 이용하여 3차원 위치영상 데이터를 생성하는 생성부, 및 상기 생성된 3차원 위치영상 데이터를 사용자에게 제공하는 제공부를 포함하는 3차원 위치영상 제공 시스템을 제공한다.
단말기, 영상, 위치, 3차원 위치영상, 각도, 방향

Description

3차원 위치영상 제공 방법 및 시스템{SYSTEM AND METHOD FOR PROVIDING LOCATION IMAGE OF THREE DIMENSIONAL}
본 발명의 일실시예는 3차원 위치영상 제공 방법 및 시스템에 관한 것이다.
통신기술의 발달 및 다양한 서비스 제공을 위해, 이동통신 서비스의 향상과 함께 단말기의 사양도 점차 높아지고 있다. 예컨대, 종래의 단말기는 단순히 음성통화, 메시지 전송 기능만을 제공하였지만, 최근에는 영상전화를 하거나, 카메라를 조작하여 사진/동영상을 촬영하거나, DMB방송을 시청하는 기능도 제공하고 있다.
또한, 이동통신사에서는 위치 기반 서비스(LBS: Location Based Service)를 통해 단말기로 현재 위치에서부터 목적지까지의 경로를 제공할 수 있다. 즉, 위치 기반 서비스는 이동통신망이나 위성항법장치(GPS) 등을 통해 얻은 위치정보를 기반으로 단말기 사용자에게 여러 가지 서비스를 제공할 수 있다.
도 1은 종래기술에 따른 위치 정보 서버에서 위치 기반 서비스를 제공하는 일례를 도시한 도면이다.
도시한 바와 같이, 위치 정보 서버는 사용자로부터 위치정보가 요청되면, 단말기로부터 GPS 정보를 수신하고, 상기 수신된 GPS 정보에 기초하여 기제작된 2차 원 화면에 위치정보를 추가해서 만들어진 화상정보(도시한 도면)를 단말기로 발송하였다.
즉, 이와 같은 종래기술은 사용자의 시야와 일치하지 않는 화상에 위치정보를 표시함으로써, 직관적이지 못하였으며, 2차원 상에서만 위치를 표시할 수 있다는 단점이 있었다.
따라서, 사용자가 촬영한 영상을 이용하여 직관적으로 위치정보를 표시하는 방안이 필요한 실정이다.
본 발명의 일실시예는 사용자가 직접 촬영한 영상 데이터에 위치표시 데이터를 중첩시켜 생성된 3차원 위치영상 데이터를 제공함으로써, 사용자가 직관적으로 현재 위치 또는 목적지를 파악할 수 있도록 하는 3차원 위치영상 제공 방법 및 시스템을 제공한다.
본 발명의 일실시예는 중력센서를 통해 획득한 각도 데이터 또는 자이로센서를 통해 획득한 방향 데이터를 직접 촬영한 영상 데이터와 함께 3차원 위치정보서버에 전송함으로써, 3차원 위치정보서버에서 더욱 정확한 위치표시 데이터를 검색할 수 있도록 하는 3차원 위치영상 제공 방법 및 시스템을 제공한다.
본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템은 카메라를 통해 영상 데이터가 촬영된 경우, 위치 데이터를 식별하는 GPS 장치, 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버로 전송하는 전송부, 상기 3차원 위치정보서버로부터 위치표시 데이터를 수신하는 수신부, 상기 수신된 위치표시 데이터 및 상기 촬영된 영상 데이터를 이용하여 3차원 위치영상 데이터를 생성하는 생성부, 및 상기 생성된 3차원 위치영상 데이터를 사용자에게 제공하는 제공부를 포함한다.
본 발명의 일실시예에 따른 3차원 위치영상 제공 방법은 카메라를 통해 영상 데이터가 촬영된 경우, GPS 장치를 이용하여 위치 데이터를 식별하는 단계, 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버로 전송하는 단계, 상기 3차원 위치정보서버로부터 위치표시 데이터를 수신하는 단계, 상기 수신된 위치표시 데이터 및 상기 촬영된 영상 데이터를 이용하여 3차원 위치영상 데이터를 생성하는 단계, 및 상기 생성된 3차원 위치영상 데이터를 사용자에게 제공하는 단계를 포함한다.
본 발명의 일실시예에 따른 3차원 위치영상 제공 방법은 단말기에서 촬영된 영상 데이터와 위치 데이터를 수신하는 단계, 데이터베이스로부터 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별하는 단계, 및 상기 식별된 위치표시 데이터를 상기 단말기로 전송하는 단계를 포함한다.
본 발명의 일실시예에 따르면, 사용자가 촬영한 영상 데이터에 목적지에 대한 위치를 표시한 위치표시 데이터를 제공함으로써, 사용자의 시야와 일치하는 목적지에 대한 직관적인 위치를 제공할 수 있다.
본 발명의 일실시예에 따르면, 사용자가 촬영한 영상 데이터와 연관된 설명 데이터를 제공함으로써, 현재 위치한 지역의 유효한 정보를 쉽게 확인할 수 있다.
본 발명의 일실시예에 따르면, 찾기 어려운 길에 대한 정보를 사용자가 직접 촬영한 영상 데이터 위에 표시함으로써, 사용자가 용이하게 길을 찾아갈 수 있도록 도움을 줄 수 있다.
본 발명의 일실시예에 따르면, 사용자가 직접 촬영한 영상 데이터로부터 경계면 데이터를 추출하여, 영상 데이터 대신에 추출한 경계면 데이터와 위치 데이터 를 3차원 위치정보서버에 전송함으로써, 데이터 전송량을 최소화할 수 있다.
이하, 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 다양한 실시예를 상세하게 설명하지만, 본 발명이 실시예에 의해 제한되거나 한정되는 것은 아니다.
도 2는 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템의 네트워크 연결관계를 도시한 도면이다.
도시한 바와 같이, 단말기(200)는 3차원 위치영상 제공 시스템을 내장하여, 3차원 위치영상 시스템의 프로세스를 구현할 수 있다. 단말기(200)는 사용자의 요청에 따라, 카메라를 통해 영상 데이터를 촬영하고, GPS 장치를 통해 위치 데이터를 식별한다. 단말기(200)는 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버(210)로 전송한다. 이때, 단말기(200)는 상기 촬영된 영상 데이터로부터 경계면 데이터를 추출하여, 상기 영상 데이터 대신 상기 추출된 경계면 데이터와 상기 식별된 위치 데이터를 3차원 위치정보서버(210)로 전송할 수 있다.
실시예로, 단말기(200)는 사용자로부터 목적지를 입력받고, 상기 입력된 목적지를 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터와 함께, 3차원 위치정보서버(210)로 전송할 수 있다. 또는, 단말기(200)는 중력센서를 통해 식별된 각도 데이터 및 자이로센서를 통해 식별된 방향 데이터도 3차원 위치정보서버(210)로 전송할 수 있다.
3차원 위치정보서버(210)는 단말기(200)로부터 상기 영상 데이터와 상기 위치 데이터를 수신하고, 데이터베이스로부터 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별한다. 3차원 위치정보서버(210)는 데이터베이스로부터 상기 위치 데이터에 상응하는 위치표시 데이터를 제1 식별하고, 상기 제1 식별된 위치표시 데이터 중, 상기 영상 데이터의 경계면에 일치하는 위치표시 데이터를 제2 식별할 수 있다. 3차원 위치정보서버(210)는 상기 식별된 위치표시 데이터를 단말기(200)로 전송한다.
실시예로, 3차원 위치정보서버(210)는 단말기(200)로부터 수신되는 각도 데이터 또는 방향 데이터를 더 고려하여 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별할 수 있다. 3차원 위치정보서버(210)는 상기 영상 데이터와 매칭되는 경계면을 구별하여 표시하고, 목적지를 포함하는 위치표시 데이터를 생성하고, 상기 생성된 위치표시 데이터를 단말기(200)로 전송할 수 있다.
단말기(200)는 상기 위치표시 데이터를 수신하고, 상기 수신된 위치표시 데이터 및 상기 촬영된 영상 데이터를 이용하여 3차원 위치영상 데이터를 생성한다. 단말기(200)는 상기 수신된 위치표시 데이터로부터 목적지 및 경계면을 추출하고, 상기 추출된 목적지를 상기 경계면과 연관시키고, 상기 추출된 경계면을 상기 촬영된 영상 데이터 위에 구별되게 중첩시켜 3차원 위치영상 데이터를 생성할 수 있다. 단말기(200)는 상기 생성된 3차원 위치영상 데이터를 사용자에게 제공한다.
실시예로, 단말기(200)는 상기 식별된 위치 데이터와 상기 입력된 목적지를 이용하여 현재 위치로부터 상기 목적지까지의 거리 데이터를 연산하고, 상기 연산된 거리 데이터를 상기 3차원 위치영상 데이터와 함께 상기 사용자에게 제공할 수 있다.
다른 실시예로, 단말기(200)는 3차원 위치정보서버(210)로부터 상기 전송된 영상 데이터와 연관된 설명 데이터를 수신하고, 상기 수신된 설명 데이터를 상기 3차원 위치영상 데이터와 함께 상기 사용자에게 제공할 수도 있다.
도 3은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템의 구성을 도시한 블록도이다.
도시한 바와 같이, 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템(300)은 카메라(301), GPS 장치(302), 중력 센서(303), 자이로 센서(304), 입력부(305), 전송부(306), 수신부(307), 생성부(308), 제공부(309), 연산부(310) 및 추출부(311)를 포함할 수 있다. 본 발명의 3차원 위치영상 제공 시스템(300)은 단말기(200)에 내장되어 실행될 수 있다.
카메라(301)는 사용자의 요청에 따라 영상 데이터를 촬영한다.
도 4는 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 촬영한 영상 데이터의 일례를 도시한 도면이다.
도시한 바와 같이, 영상 데이터는 사용자의 요청에 따라 미리 구비된 카메라(301)를 통해 촬영한 것이다. 즉, 영상 데이터는 사용자가 현재 위치한 지점에서 목적지를 파악할 수 있는 위치를 촬영한 데이터이다.
상기 영상 데이터가 촬영된 경우, GPS 장치(302)는 위치 데이터를 식별한다. GPS 장치(302)는 GPS 위성을 통해 위치 데이터를 수신할 수 있다.
전송부(306)는 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버(210)로 전송한다.
실시예로, 입력부(305)는 상기 사용자로부터 목적지를 입력받는다. 목적지는 상기 사용자가 가고자하는 목적지의 도, 시, 군, 동을 포함하는 주소이거나, 몇호, 몇번지 등 더욱 구체적인 주소일 수 있다. 전송부(306)는 상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터와 함께, 상기 입력된 목적지를 3차원 위치정보서버(210)로 전송할 수 있다. 이 경우, 3차원 위치정보서버(210)는 상기 목적지를 이용하여 상기 영상 데이터와 위치 데이터에 상응하는 위치표시 데이터를 더 쉽게 식별할 수 있다.
다른 실시예로, 중력센서(303)는 상기 촬영된 영상 데이터와 연관된 각도 데이터를 식별한다. 중력센서(303, Gravity Sensor)는 상기 영상 데이터를 촬영할 때의 상, 하, 좌, 우, 회전 등의 입력을 고려하여 각도 데이터를 식별할 수 있다. 자이로센서(304)는 상기 촬영된 영상 데이터와 연관된 방향 데이터를 식별한다. 자이로센서(304, Gyro Sensor)는 상기 영상 데이터를 촬영할 때 속도를 고려하여 방향 데이터를 식별할 수 있다. 이 경우, 전송부(306)는 상기 식별된 각도 데이터 또는 방향 데이터를 3차원 위치정보서버(210)로 전송할 수 있다.
또 다른 실시예로, 추출부(311)는 상기 촬영된 영상 데이터로부터 경계면 데이터를 추출한다. 상기 경계면 데이터는 상기 영상 데이터 중에서, 목적지에 해당하는 빌딩의 경계면에 대한 데이터일 수 있다. 예컨대, 상기 경계면 데이터는 3 차원 위치정보서버(210)에서 위치표시 데이터를 추출할 때 용이하게 이용할 수 있다. 이에 따라, 전송부(306)는 상기 영상 데이터 대신에 상기 추출된 경계면 데이터를 상기 식별된 위치 데이터와 함께 3차원 위치정보서버(210)로 전송할 수 있다. 즉, 전송부(306)는 상기 영상 데이터 대신에 상기 추출된 경계면 데이터를 전송함으로써, 데이터 전송량을 최소화할 수 있다.
수신부(307)는 3차원 위치정보서버(210)로부터 위치표시 데이터를 수신한다. 위치표시 데이터는 상기 영상 데이터와 상기 위치 데이터에 상응하는 것으로, 상기 영상 데이터의 목적지에 대한 경계면과 목적지를 포함하여 구성될 수 있다.
도 5는 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 수신한 위치표시 데이터의 일례를 도시한 도면이다.
도시한 바와 같이, 위치표시 데이터는 영상 데이터 중에서, 목적지에 해당하는 빌딩의 경계면(경계면 데이터)을 구별하여 표시하고, 목적지(P&C 사무소 8F 805호)를 포함할 수 있다.
생성부(308)는 상기 수신된 위치표시 데이터 및 상기 촬영된 영상 데이터를 이용하여 3차원 위치영상 데이터를 생성한다. 실시예로, 생성부(308)는 상기 수신된 위치표시 데이터로부터 목적지 및 경계면을 추출하고, 상기 추출된 목적지를 상기 경계면과 연관시키고, 상기 추출된 경계면을 상기 촬영된 영상 데이터 위에 구별되게 중첩시켜 3차원 위치영상 데이터를 생성할 수 있다.
도 6은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 생성한 3차원 위치영상 데이터의 일례를 도시한 도면이다.
도시한 바와 같이, 3차원 위치영상 데이터는 촬영된 영상 데이터(바탕화면) 위에 위치표시 데이터(경계면과 목적지)를 중첩시켜 생성될 수 있다. 상기 위치표시 데이터는 상기 영상 데이터에 상응하여 생성된 것으로, 생성부(308)는 단순히 상기 수신된 위치표시 데이터를 상기 촬영된 영상 데이터 위에 중첩시킴으로써, 3차원 위치영상 데이터를 생성할 수 있다. 또는, 생성부(308)는 상기 위치표시 데이터에 포함된 경계면과 목적지를 상기 영상 데이터 위에 구별되게 중첩시켜 3차원 위치영상 데이터를 생성할 수 있다.
제공부(309)는 상기 생성된 3차원 위치영상 데이터(도 6)를 사용자에게 제공한다. 이로써, 제공부(309)는 사용자가 파악하기 쉬운 직관적이고 입체적인 위치정보를 제공할 수 있다.
실시예로, 수신부(307)는 3차원 위치정보서버(210)로부터 상기 전송된 영상 데이터와 연관된 설명 데이터를 수신하고, 제공부(309)는 상기 수신된 설명 데이터를 상기 3차원 위치영상 데이터와 함께 상기 사용자에게 제공한다. 상기 설명 데이터는 상기 영상 데이터에 대해서 설명하는 데이터로서, 예컨대, 상기 영상 데이터가 다보탑인 경우, 다보탑에 대한 정보가 설명 데이터일 수 있다.
도 7은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 제공하는 영상 데이터와 설명 데이터의 일례를 도시한 도면이다.
도시한 바와 같이, 사용자가 경주 불국사에서 영상 데이터(710)로서, '다보탑'을 촬영하여 3차원 위치정보제공서버(210)로 전송한 경우, 3차원 위치정보제공서버(210)는 다보탑에 대한 정보를 설명 데이터(720)로서, 3차원 위치영상 제공 시 스템(300)으로 전송할 수 있다. 예컨대, 설명 데이터(720)는 다보탑에 대한 설명으로, 국보 20호, 소개(불국사 경내에 있는 ..., 시대구분(통일신라시대), 상세한 설명(불국사는 통일신라 경덕왕 ...)을 포함할 수 있다.
만약, 상기 영상 데이터가 '남대문'인 경우, 상기 설명 데이터는 남대문에 대한 설명이 포함될 수 있다. 즉, 상기 설명 데이터는 영상 데이터와 위치 데이터에 상응하여, 영상 데이터를 설명하는 정보이다.
다른 실시예로, 연산부(310)는 상기 식별된 위치 데이터와 상기 입력된 목적지를 이용하여 현재 위치로부터 상기 목적지까지의 거리 데이터를 연산한다. 이후, 제공부(309)는 상기 연산된 거리 데이터를 상기 사용자에게 제공할 수 있다.
도 8은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 제공하는 영상 데이터와 거리 데이터의 일례를 도시한 도면이다.
도시한 바와 같이, 사용자가 길찾기 어려운 지역의 등산로를 영상 데이터(810)로서 촬영한 후, 위치 데이터와 함께 3차원 위치정보제공서버(210)로 전송한 경우, 3차원 위치정보제공서버(210)는 영상 데이터에 상응하는 위치표시 데이터(깃발표시)를 전송할 수 있다. 이때, 연산부(310)는 입력부(305)를 통해 목적지를 입력받은 경우, 상기 위치 데이터를 현재위치로 하여, 상기 현재위치에서 상기 목적지까지의 거리 데이터를 연산할 수 있다. 이 경우, 제공부(309)는 상기 영상 데이터 위에 위피표시 데이터를 중첩시켜 생성한 3차원 위치영상 데이터(920)에 거리 데이터(현재위치 해발 120M, 목적지까지 530M)를 포함시켜 제공할 수 있다.
도 9는 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템의 구성을 도시한 블록도이다.
도시한 바와 같이, 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템(900)은 단말 수신부(910), 데이터베이스(920), 위치표시 식별부(930), 위치표시 생성부(940) 및 단말 전송부(950)를 포함할 수 있다. 본 발명의 3차원 위치영상 제공 시스템(900)은 3차원 위치정보서버(210)에 내장되어 실행될 수 있다.
단말 수신부(910)는 단말기(200)에서 촬영된 영상 데이터와 위치 데이터를 수신한다. 실시예로, 단말 수신부(910)는 단말기(200)에서 식별된 각도 데이터, 방향 데이터 또는 사용자로부터 입력된 목적지를 더 수신할 수도 있다. 또는, 단말 수신부(910)는 상기 영상 데이터 대신에 경계면 데이터를 수신할 수도 있다.
위치표시 식별부(930)는 데이터베이스(920)로부터 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별한다. 예컨대, 위치표시 식별부(930)는 상기 영상 데이터의 경계면을 추출하여, 추출된 경계면과 위치 데이터를 이용하여 위치표시 데이터를 식별할 수 있다. 만약, 단말 수신부(910)에서 영상 데이터 대신 경계면 데이터를 수신한 경우, 위치표시 식별부(930)는 상기 영상 데이터로부터 경계면을 추출하는 과정을 생략하고, 상기 경계면 데이터와 위치 데이터를 이용하여 위치표시 데이터를 식별할 수 있다.
도 10은 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템에서 영상 데이터의 경계면을 추출하는 일례를 도시한 도면이다.
도시한 바와 같이, 위치표시 식별부(930)는 상기 영상 데이터의 빌딩 경계면(굵게 표시된)을 추출하고, 추출된 경계면과 일치하는 위치표시 데이터를 식별할 수 있다. 이때, 위치표시 식별부(930)는 데이터베이스(920)로부터 상기 위치 데이터에 상응하는 위치표시 데이터를 제1 식별하고, 상기 제1 식별된 위치표시 데이터 중, 상기 영상 데이터의 경계면에 일치하는 위치표시 데이터를 제2 식별할 수 있다.
데이터베이스(920)는 위치 데이터에 대응하는 위치표시 데이터, 영상 데이터에 대응하는 설명 데이터 등을 포함할 수 있다. 상기 위치표시 데이터는 목적지의 경계면과 목적지 등을 포함할 수 있다. 상기 설명 데이터는 영상 데이터를 설명하는 정보를 포함할 수 있다.
실시예로, 위치표시 식별부(930)는 상기 수신된 각도 데이터 또는 방향 데이터를 더 고려하여 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별할 수 있다. 즉, 상기 각도 데이터 또는 상기 방향 데이터가 더 수신된 경우, 위치표시 식별부(930)는 상기 각도 데이터 또는 상기 방향 데이터를, 상기 영상 데이터와 상기 위치 데이터와 함께 더 고려하여 위치표시 데이터를 더 쉽게 식별할 수 있다.
도 11은 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템에서 위치표시 데이터를 식별하는 일례를 도시한 도면이다.
도시한 바와 같이, 위치표시 식별부(930)는 데이터베이스(920)로부터 영상 데이터 및 위치 데이터에 상응하는 위치표시 데이터(1110, 1120, 130)를 식별할 수 있다. 즉, 위치표시 식별부(930)는 3차원 영상을 제공하기 위하여, 상, 좌, 우에 해당하는 각 위치표시 데이터(1110, 1120, 130)를 데이터베이스(920)로부터 식별할 수 있다.
전송부(950)는 상기 식별된 위치표시 데이터를 단말기(200)로 전송한다.
실시예로, 위치표시 생성부(940)는 상기 영상 데이터와 매칭되는 경계면을 구별하여 표시하고, 목적지를 포함하는 위치표시 데이터를 생성한다. 상기 경계면은 영상 데이터에 포함된 경계면과 매칭되는 것으로, 위치표시 생성부(940)는 목적지에 대한 빌딩 경계면을 영상 데이터에 포함된 다른 경계면과 구별하여 표시할 수 있다. 상기 목적지는 도 6에서 도시한 P&C 사무소 8F 805호이다. 전송부(950)는 상기 생성된 위치표시 데이터를 단말기(200)로 전송할 수 있다.
도 12는 본 발명의 일실시예에 따른 3차원 위치영상 제공 방법의 순서를 도시한 흐름도이다.
단계 1210에서, 단말기(200)는 카메라를 통해 영상 데이터가 촬영된 경우, 위치 데이터를 식별한다. 단말기(200)는 사용자의 요청에 따라, 미리 구비된 카메라를 통해 영상 데이터를 촬영하고, GPS 장치를 통해 위치 데이터를 식별한다. 실시예로, 단말기(200)는 상기 사용자로부터 목적지를 입력받거나, 중력센서를 통해 각도 데이터를 식별하거나, 자이로센서를 통해 방향 데이터를 식별할 수도 있다.
단계 1220에서, 단말기(200)는 촬영된 영상 데이터 및 식별된 위치 데이터를 3차원 위치정보서버(210)로 전송한다. 이때, 단말기(200)는 상기 입력된 목적지, 상기 식별된 각도 데이터, 상기 식별된 방향 데이터를 영상 데이터와 위치 데이터와 함께 3차원 위치정보서버(210)로 전송할 수 있다. 또는, 단말기(200)는 상기 영상 데이터로부터 경계면 데이터를 추출하고, 상기 추출된 경계면 데이터를 상기 영상 데이터 대신에 3차원 위치정보서버(210)로 전송할 수 있다.
단계 1230에서, 3차원 위치정보서버(210)는 단말기(200)로부터 상기 영상 데이터와 상기 위치 데이터를 수신하고, 데이터베이스로부터 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별한다. 3차원 위치정보서버(210)는 데이터베이스로부터 상기 위치 데이터에 상응하는 위치표시 데이터를 제1 식별하고, 상기 제1 식별된 위치표시 데이터 중, 상기 영상 데이터의 경계면에 일치하는 위치표시 데이터를 제2 식별할 수 있다. 3차원 위치정보서버(210)는 상기 식별된 위치표시 데이터를 단말기(200)로 전송한다.
실시예로, 3차원 위치정보서버(210)는 상기 각도 데이터 또는 상기 방향 데이터를 더 고려하여 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별할 수 있다. 3차원 위치정보서버(210)는 상기 영상 데이터와 매칭되는 경계면을 구별하여 표시하고, 목적지를 포함하는 위치표시 데이터를 생성하고, 상기 생성된 위치표시 데이터를 단말기(200)로 전송할 수 있다.
다른 실시예로, 3차원 위치정보서버(210)는 영상 데이터 대신 경계면 데이터를 수신한 경우, 상기 경계면 데이터와 위치 데이터를 이용하여 데이터베이스로부터 위치표시 데이터를 식별할 수도 있다.
단계 1240에서, 단말기(200)는 상기 위치표시 데이터를 수신하고, 상기 수신된 위치표시 데이터 및 상기 촬영된 영상 데이터를 이용하여 3차원 위치영상 데이터를 생성한다. 단말기(200)는 상기 수신된 위치표시 데이터로부터 목적지 및 경 계면을 추출하고, 상기 추출된 목적지를 상기 경계면과 연관시키고, 상기 추출된 경계면을 상기 촬영된 영상 데이터 위에 구별되게 중첩시켜 3차원 위치영상 데이터를 생성할 수 있다.
단계 1250에서, 단말기(200)는 상기 생성된 3차원 위치영상 데이터를 사용자에게 제공한다. 실시예로, 단말기(200)는 상기 식별된 위치 데이터와 상기 입력된 목적지를 이용하여 현재 위치로부터 상기 목적지까지의 거리 데이터를 연산하고, 상기 연산된 거리 데이터를 상기 3차원 위치영상 데이터와 함께 상기 사용자에게 제공할 수 있다. 다른 실시예로, 단말기(200)는 3차원 위치정보서버(210)로부터 상기 전송된 영상 데이터와 연관된 설명 데이터를 수신하고, 상기 수신된 설명 데이터를 상기 3차원 위치영상 데이터와 함께 상기 사용자에게 제공할 수도 있다.
또한, 본 발명의 실시예들은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독 가능 매체를 포함한다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로 그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
지금까지 본 발명에 따른 구체적인 실시예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능함은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 종래기술에 따른 위치 정보 서버에서 위치 기반 서비스를 제공하는 일례를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템의 네트워크 연결관계를 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템의 구성을 도시한 블록도이다.
도 4는 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 촬영한 영상 데이터의 일례를 도시한 도면이다.
도 5는 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 수신한 위치표시 데이터의 일례를 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 생성한 3차원 위치영상 데이터의 일례를 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 제공하는 영상 데이터와 설명 데이터의 일례를 도시한 도면이다.
도 8은 본 발명의 일실시예에 따른 3차원 위치영상 제공 시스템에서 제공하는 영상 데이터와 거리 데이터의 일례를 도시한 도면이다.
도 9는 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템의 구성을 도시한 블록도이다.
도 10은 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템에서 영 상 데이터의 경계면을 추출하는 일례를 도시한 도면이다.
도 11은 본 발명의 다른 실시예에 따른 3차원 위치영상 제공 시스템에서 위치표시 데이터를 식별하는 일례를 도시한 도면이다.
도 12는 본 발명의 일실시예에 따른 3차원 위치영상 제공 방법의 순서를 도시한 흐름도이다.
<도면의 주요 부분에 대한 부호의 설명>
300: 3차원 위치영상 제공 시스템
301: 카메라
302: GPS 장치
303: 중력 센서
304: 자이로 센서
305: 입력부
306: 전송부
307: 수신부
308: 생성부
309: 제공부
310: 연산부
311: 추출부

Claims (15)

  1. 카메라를 통해 영상 데이터가 촬영된 경우, 위치 데이터를 식별하는 GPS 장치;
    상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버로 전송하는 전송부;
    상기 3차원 위치정보서버로부터 위치표시 데이터를 수신하는 수신부;
    상기 수신된 위치표시 데이터로부터 목적지 및 경계면을 추출하고, 상기 추출된 목적지를 상기 경계면과 연관시켜, 상기 촬영된 영상 데이터 위에 상기 경계면을 구별되게 중첩시켜 3차원 위치영상 데이터를 생성하는 생성부; 및
    상기 생성된 3차원 위치영상 데이터를 사용자에게 제공하는 제공부
    를 포함하는 3차원 위치영상 제공 시스템.
  2. 제1항에 있어서,
    사용자로부터 목적지를 입력받는 입력부
    를 더 포함하고,
    상기 전송부는,
    상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터와 함께, 상기 입력된 목적지를 상기 3차원 위치정보서버로 전송하는, 3차원 위치영상 제공 시스템.
  3. 제1항에 있어서,
    상기 촬영된 영상 데이터와 연관된 각도 데이터를 식별하는 중력센서; 또는
    상기 촬영된 영상 데이터와 연관된 방향 데이터를 식별하는 자이로센서
    를 더 포함하고,
    상기 전송부는,
    상기 식별된 각도 데이터 또는 방향 데이터를 상기 3차원 위치정보서버로 전송하는, 3차원 위치영상 제공 시스템.
  4. 삭제
  5. 제1항에 있어서,
    상기 수신부는,
    상기 3차원 위치정보서버로부터 상기 전송된 영상 데이터와 연관된 설명 데이터를 수신하고,
    상기 제공부는,
    상기 수신된 설명 데이터를 상기 3차원 위치영상 데이터와 함께 상기 사용 자에게 제공하는, 3차원 위치영상 제공 시스템.
  6. 카메라를 통해 영상 데이터가 촬영된 경우, GPS 장치를 이용하여 위치 데이터를 식별하는 단계;
    상기 촬영된 영상 데이터 및 상기 식별된 위치 데이터를 3차원 위치정보서버로 전송하는 단계;
    상기 3차원 위치정보서버로부터 위치표시 데이터를 수신하는 단계;
    상기 수신된 위치표시 데이터로부터 목적지 및 경계면을 추출하는 단계;
    상기 추출된 목적지를 상기 경계면과 연관시켜, 상기 촬영된 영상 데이터 위에 상기 경계면을 구별되게 중첩시켜 3차원 위치영상 데이터를 생성하는 단계; 및
    상기 생성된 3차원 위치영상 데이터를 사용자에게 제공하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  7. 제6항에 있어서,
    영상 데이터를 3차원 위치정보서버로 전송하는 단계는,
    사용자로부터 목적지를 입력받는 단계; 및
    상기 입력된 목적지를 상기 3차원 위치정보서버로 전송하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  8. 제6항에 있어서,
    영상 데이터를 3차원 위치정보서버로 전송하는 단계는,
    중력센서를 통해 식별된 상기 영상 데이터에 대한 각도 데이터를 3차원 위치정보서버로 전송하는 단계; 또는
    자이로센서를 통해 식별된 상기 영상 데이터에 대한 방향 데이터를 3차원 위치정보서버로 전송하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  9. 제6항에 있어서,
    상기 촬영된 영상 데이터로부터 경계면 데이터를 추출하는 단계
    를 더 포함하고,
    영상 데이터를 3차원 위치정보서버로 전송하는 단계는,
    상기 추출된 경계면 데이터 및 상기 식별된 위치 데이터를 상기 3차원 위치정보서버로 전송하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  10. 삭제
  11. 제6항에 있어서,
    상기 3차원 위치정보서버로부터 위치표시 데이터를 수신하는 단계는,
    상기 3차원 위치정보서버로부터 상기 전송된 영상 데이터와 연관된 설명 데이터를 수신하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  12. 단말기에서 촬영된 영상 데이터와 위치 데이터를 수신하는 단계;
    데이터베이스로부터 상기 수신된 영상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별하는 단계;
    상기 영상 데이터와 매칭되는 경계면을 구별하여 표시하고, 목적지를 포함하는 위치표시 데이터를 생성하는 단계; 및
    상기 생성된 위치표시 데이터를 상기 단말기로 전송하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  13. 제12항에 있어서,
    단말기에서 촬영된 영상 데이터와 위치 데이터를 수신하는 단계는,
    상기 단말기에서 식별된 각도 데이터 또는 방향 데이터를 수신하는 단계
    를 포함하고,
    위치표시 데이터를 식별하는 단계는,
    상기 수신된 각도 데이터 또는 방향 데이터를 더 고려하여 상기 수신된 영 상 데이터와 위치 데이터와 일치하는 위치표시 데이터를 식별하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  14. 제12항에 있어서,
    위치표시 데이터를 식별하는 단계는,
    데이터베이스로부터 상기 위치 데이터에 상응하는 위치표시 데이터를 제1 식별하는 단계; 및
    상기 제1 식별된 위치표시 데이터 중, 상기 영상 데이터의 경계면에 일치하는 위치표시 데이터를 제2 식별하는 단계
    를 포함하는 3차원 위치영상 제공 방법.
  15. 삭제
KR1020090079279A 2009-08-26 2009-08-26 3차원 위치영상 제공 방법 및 시스템 KR101092104B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090079279A KR101092104B1 (ko) 2009-08-26 2009-08-26 3차원 위치영상 제공 방법 및 시스템
US12/832,681 US20110055769A1 (en) 2009-08-26 2010-07-08 System and method for providing three-dimensional location image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090079279A KR101092104B1 (ko) 2009-08-26 2009-08-26 3차원 위치영상 제공 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20110021464A KR20110021464A (ko) 2011-03-04
KR101092104B1 true KR101092104B1 (ko) 2011-12-12

Family

ID=43626714

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090079279A KR101092104B1 (ko) 2009-08-26 2009-08-26 3차원 위치영상 제공 방법 및 시스템

Country Status (2)

Country Link
US (1) US20110055769A1 (ko)
KR (1) KR101092104B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101372327B1 (ko) * 2012-09-19 2014-03-12 (주)비트러스트 스쿨존 안전관리 시스템 및 그 제공방법
KR101593516B1 (ko) 2014-05-27 2016-02-15 (주)욱일에스피테크 글라스패널 순환형 타워리프트 장치
KR101922586B1 (ko) 2017-10-25 2018-11-28 한국생산기술연구원 적층형 건조기에 구비되는 상하 이송장치 및 이를 이용한 이송방법

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101356192B1 (ko) * 2012-04-26 2014-01-24 서울시립대학교 산학협력단 영상매칭 기반의 스마트폰의 위치자세 결정 방법 및 시스템
CN105334525B (zh) * 2015-11-26 2018-08-17 武大吉奥信息技术有限公司 一种基于增强现实技术的地理信息显示方法
CN107529145A (zh) * 2017-09-15 2017-12-29 南京轩世琪源软件科技有限公司 一种高精度办公楼内手持终端的定位方法
KR102026376B1 (ko) * 2018-01-11 2019-09-30 서울대학교산학협력단 구조적 환경 특징을 이용한 영상 기반 주행 거리 측정 시스템 및 방법
WO2020251099A1 (ko) * 2019-06-14 2020-12-17 엘지전자 주식회사 사용자의 현재 위치로 차량을 호출하는 방법

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579471A (en) * 1992-11-09 1996-11-26 International Business Machines Corporation Image query system and method
US7872669B2 (en) * 2004-01-22 2011-01-18 Massachusetts Institute Of Technology Photo-based mobile deixis system and related techniques
US8421872B2 (en) * 2004-02-20 2013-04-16 Google Inc. Image base inquiry system for search engines for mobile telephones with integrated camera
US7873911B2 (en) * 2004-08-31 2011-01-18 Gopalakrishnan Kumar C Methods for providing information services related to visual imagery
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US20080147730A1 (en) * 2006-12-18 2008-06-19 Motorola, Inc. Method and system for providing location-specific image information
JP4861952B2 (ja) * 2007-09-28 2012-01-25 富士フイルム株式会社 画像処理装置及び撮像装置
US20090190741A1 (en) * 2008-01-24 2009-07-30 Nortel Netowrks Limited Method of Providing Routing Information to Contact Center
US20100309225A1 (en) * 2009-06-03 2010-12-09 Gray Douglas R Image matching for mobile augmented reality
US9286720B2 (en) * 2009-08-20 2016-03-15 Northrop Grumman Systems Corporation Locative video for situation awareness

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101372327B1 (ko) * 2012-09-19 2014-03-12 (주)비트러스트 스쿨존 안전관리 시스템 및 그 제공방법
KR101593516B1 (ko) 2014-05-27 2016-02-15 (주)욱일에스피테크 글라스패널 순환형 타워리프트 장치
KR101922586B1 (ko) 2017-10-25 2018-11-28 한국생산기술연구원 적층형 건조기에 구비되는 상하 이송장치 및 이를 이용한 이송방법

Also Published As

Publication number Publication date
KR20110021464A (ko) 2011-03-04
US20110055769A1 (en) 2011-03-03

Similar Documents

Publication Publication Date Title
KR101092104B1 (ko) 3차원 위치영상 제공 방법 및 시스템
US10190885B2 (en) Method and apparatus for providing service using a sensor and image recognition in a portable terminal
US11501524B2 (en) Generating augmented reality images for display on a mobile device based on ground truth image rendering
JP4236372B2 (ja) 空間情報利用システムおよびサーバシステム
US9874454B2 (en) Community-based data for mapping systems
KR20100124947A (ko) 증강현실을 이용하여 휴대형 단말기에 실시간 지역정보를 제공하는 ａｒ컨텐츠 제공시스템 및 그 제공방법
KR20060122284A (ko) 지리정보 제공 기능을 갖는 이동통신 단말기 및 이를이용한 지리 정보 제공 방법
WO2011145482A1 (ja) 端末位置特定システム、移動端末及び端末位置特定方法
CN104748738A (zh) 室内定位导航方法和系统
KR100968837B1 (ko) 촬영된 객체에 대한 정보를 제공하는 휴대용 카메라 시스템
JP2003111128A (ja) 現在位置特定方法、現在位置情報提供方法、移動経路案内方法、位置情報管理システム及び情報通信端末
WO2017128895A1 (zh) 一种基于场景共享的导航协助方法及终端
KR20110048753A (ko) 사용자 단말 장치, 경로 안내 시스템 및 그 경로 안내 방법
CN103913174A (zh) 一种导航信息的生成方法和系统及移动客户端和服务器端
KR20120017293A (ko) 증강 현실 제공 장치 및 방법
KR101397873B1 (ko) 증강 현실 표시 장치 및 방법
KR20210086834A (ko) 스마트 글래스를 활용한 증강현실 기반의 관광 정보 제공 시스템 및 그 방법
JP2022008888A (ja) サーバ、端末、配信システム、配信方法、および情報処理方法
JP4004798B2 (ja) 配信装置及び表示装置及び配信方法及び情報配信・表示方式
JP2006285546A (ja) 情報提供システム、データベースサーバー、及び携帯通信端末
TWI400467B (zh) Electronic device with object guidance function and its object guidance method
KR20110094970A (ko) 멀티미디어 컨텐츠의 태그 관리 방법 및 장치
KR20050058810A (ko) 전자지도를 위한 영상 처리 시스템 및 방법
KR101762514B1 (ko) 지도 기반 촬상 위치 정보 제공 방법 및 장치
KR101335729B1 (ko) 위치 정보에 기초하여 컨텐츠의 관련 정보를 제공하는 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20151201

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170529

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180529

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190530

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20191202

Year of fee payment: 9