KR102539766B1 - Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video - Google Patents

Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video Download PDF

Info

Publication number
KR102539766B1
KR102539766B1 KR1020200150407A KR20200150407A KR102539766B1 KR 102539766 B1 KR102539766 B1 KR 102539766B1 KR 1020200150407 A KR1020200150407 A KR 1020200150407A KR 20200150407 A KR20200150407 A KR 20200150407A KR 102539766 B1 KR102539766 B1 KR 102539766B1
Authority
KR
South Korea
Prior art keywords
real
time
image
matching
location
Prior art date
Application number
KR1020200150407A
Other languages
Korean (ko)
Other versions
KR20220064181A (en
Inventor
김만근
Original Assignee
주식회사 비전텍
김만근
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 비전텍, 김만근 filed Critical 주식회사 비전텍
Priority to KR1020200150407A priority Critical patent/KR102539766B1/en
Publication of KR20220064181A publication Critical patent/KR20220064181A/en
Application granted granted Critical
Publication of KR102539766B1 publication Critical patent/KR102539766B1/en

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/10Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
    • G01C21/12Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
    • G01C21/16Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
    • G01C21/165Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments
    • G01C21/1656Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments with passive imaging devices, e.g. cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • G01C21/30Map- or contour-matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13Receivers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • G01S19/48Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system
    • G01S19/485Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system whereby the further system is an optical system or imaging system

Abstract

본 발명은 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법에 관한 것으로, 보다 구체적으로는, 국토지리정보원의 원도와 네비게이션의 작동 원리의 핵심인 '위성위치추적시스템(GPS) 수신기'를 기반으로 하여 2차원 또는 3차원 좌표를 산출, 이를 네비게이션을 통하여 사용자의 실시간 위치정보를 제공하는 서비스를 제공하도록 하기 위한 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법에 관한 것이다.The present invention relates to a navigation terminal for a location-based convergence electronic map service matching real-time images and a location-based convergence electronic map service method matching real-time images, and more specifically, to the original map and navigation of the National Geographic Information Institute. Based on the 'Global Positioning System (GPS) receiver', which is the core of the operating principle, 2D or 3D coordinates are calculated, and real-time image matching is provided to provide a service that provides real-time location information of the user through navigation. It relates to a location-based convergence electronic map service method matching a navigation terminal and real-time images for a location-based convergence electronic map service.

Figure 112020120838109-pat00001
Figure 112020120838109-pat00001

Description

실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법{Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video}Navigation terminal for location-based convergence electronic map service matching real-time video and location-based convergence electronic map service method matching real-time video {Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video}

본 발명은 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법에 관한 것으로, 보다 구체적으로는, 국토지리정보원의 원도와 네비게이션의 작동 원리의 핵심인 '위성위치추적시스템(GPS) 수신기'를 기반으로 하여 2차원 또는 3차원 좌표를 산출, 이를 네비게이션을 통하여 사용자의 실시간 위치정보를 제공하는 서비스를 제공하도록 하기 위한 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법에 관한 것이다.The present invention relates to a navigation terminal for a location-based convergence electronic map service matching real-time images and a location-based convergence electronic map service method matching real-time images, and more specifically, to the original map and navigation of the National Geographic Information Institute. Based on the 'Global Positioning System (GPS) receiver', which is the core of the operating principle, 2D or 3D coordinates are calculated, and real-time image matching is provided to provide a service that provides real-time location information of the user through navigation. It relates to a location-based convergence electronic map service method matching a navigation terminal and real-time images for a location-based convergence electronic map service.

현대사회의 삶은 디지털 기술을 떠나서는 살아 갈 수가 없는 시대로 변모하고 있다.Life in modern society is changing into an era where it is impossible to live without digital technology.

각종 기술이 융·복합된 IT 기기 및 인공지능은 인류를 편리하게도 해주지만 종속되게도 한다.IT devices and artificial intelligence, in which various technologies are converged, make mankind convenient, but also subordinate.

그리고 스마트폰으로 받는 실시간 정보들과 생활에 편리한 각종 앱 역시 사람들에게 다양한 정보를 제공하는 등 정보통신이 현대인들의 삶을 이끌어가고 있다고 해도 과언이 아니다라고 할 것이다. And it would not be an exaggeration to say that information and communication are leading the lives of modern people, such as real-time information received through smartphones and various apps convenient for life, providing various information to people.

특히 여러 정보들 중 전자 지도 서비스는 우리 인류의 생활에 크나큰 도움을 주고 있는 대표적인 서비스로서 국토지리정보원에서 제공하는 원도를 활용한 단순 위치 찾기 전자지도도 있지만 이동 중 사용자의 실시간 위치 및 경로 등의 서비스를 받을 수 있는 GPS를 이용한 실시간 전자지도 서비스, 즉 네비게이션도 있다.In particular, the electronic map service among various types of information is a representative service that is of great help to our lives. There is also a real-time electronic map service using GPS that can receive the service, that is, navigation.

이와 같이 GPS를 이용한 실시간 전자지도 서비스의 경우에는 차량이나 사람들이 이동하는 과정에서 지도상에 현재의 위치 뿐만 아니라 출발지와 종착지를 입력하면 그 경로를 따라 동선이 표시되거나 빠른 길을 찾아주는 등 생활 속에서 없어서는 안될 유용한 서비스로 인정받고 있다.In the case of a real-time electronic map service using GPS, if you enter not only the current location on the map, but also the starting point and destination in the process of moving vehicles or people, the movement line is displayed along the route or a quick route is found. It is recognized as an indispensable and useful service in

이러한 서비스가 가능한 것 역시 첨단 IT의 기술의 산물로서, 3차원 좌표를 산출하는 네비게이션의 작동 원리의 핵심인 '위성위치추적시스템(GPS) 수신기'는 현재 지구 고도 2만200km 상공에는 위치 추적용으로 모두 24개의 인공위성 들이 돌고 있으며, 모두 6개의 궤도에 각각 4개의 GPS용 위성이 12시간을 주기로 지구 주위를 돌고 있다.This service is also a product of advanced IT technology, and the 'Global Positioning System (GPS) receiver', which is the core of the operating principle of navigation that calculates three-dimensional coordinates, is currently used for positioning at an altitude of 20,200 km above the earth. There are 24 artificial satellites in total, and 4 GPS satellites in each of the 6 orbits revolve around the earth every 12 hours.

이는 미국 정부가 지난 2000년, 민간에 이 GPS 위성 사용을 전면 개방하면서세계 모든 지역에서 이용할 수 있게 되었다고 한다.This is said to have been available in all regions of the world as the US government fully opened the use of GPS satellites to the private sector in 2000.

그리고 이 가운데 3개 위성만 있으면 오차범위 30 내지 100미터의 정확도로 현재 내 위치의 위도, 경도, 고도 등 3차원 좌표 값을 얻을 수 있는데, 보통 지구상의 어느 시간에나 어느 위치에서든지 5 내지 8개의 GPS 위성과 송수신이 가능하고, 한국 상공에서는 최대 12개 위성과 송수신이 가능하다고 한다.And with only three of these satellites, you can get the 3D coordinate values such as latitude, longitude, and altitude of your current location with an accuracy of 30 to 100 meters. It is possible to transmit and receive satellites, and it is said that it is possible to transmit and receive up to 12 satellites in the sky over Korea.

그리고 GPS수신기를 탑재한 차량이 터널 등 GPS 위성과 통신할 수 없는 곳에 있을 때에는 추측항법장치인 DR(Dead Reckoning) 시스템을 이용해 차량의 속도, 각도, 방향 등의 데이터를 측정하고, 여기에 기존 GPS 위성과 통신을 통해 얻어진 평균 데이터 값을 연관시켜 위치 값을 찾아내게 되는데 이렇게 과학적으로 얻어진 3차원 좌표 값은 네비게이션용으로 제작된 전자지도와 매칭 작업을 거쳐 네비게이션 LCD 화면상에 점, 화살표, 자동차 등의 모습으로 현 위치를 보여주게 되는 것이다.In addition, when a vehicle equipped with a GPS receiver is in a tunnel or other place where communication with GPS satellites is not possible, the Dead Reckoning (DR) system is used to measure data such as the vehicle's speed, angle, and direction. The position value is found by associating the average data value obtained through communication with the satellite. The scientifically obtained 3D coordinate value is matched with the electronic map designed for navigation, and then displayed as dots, arrows, cars, etc. on the navigation LCD screen. It will show the current location in the form of .

또한 네비게이션용 전자지도는 빠른 길 탐색 등 경로안내의 정확성을 결정짓는 중요한 요소가 되므로 전자지도를 제작하기 위해서는 우선 국토지리정보원에서 제작한 종이 원도와 수치지형도가 필요하기 때문에 이를 바탕으로 전자지도용 원도를 만들어야 하지만, 국토지리정보원은 5년 주기로 지도 데이터를 갱신하므로 최신지도를 제공하기 위해 전자지도 제작업체가 직접 현장조사를 통해 일일이 변경하는 작업을 거쳐야 한다. In addition, since the electronic map for navigation is an important factor in determining the accuracy of route guidance, such as quick route search, in order to produce an electronic map, paper original maps and digital topographic maps produced by the National Geographic Information Institute are required. Maps need to be made, but since the National Geographic Information Institute updates map data every five years, electronic map manufacturers have to go through field surveys to make changes one by one to provide up-to-date maps.

전자지도 제작업체는 GPS수신기를 장착한 차량으로 매년 국내 40만km 이상의 현지 조사를 하면서 새로운 도로나 교차로를 비롯해 일방통행, 차선수, 회전정보, 도로폭 등 상세 도로 정보와 맛집, 테마파크, 골프장, 스키장, 휴양지 등 부가정보까지 수집해 원도에 반영하게 되며, 이렇게 제작된 전자 원도는 1:5000 축척비율의 세부 2만8000개 조각지도로 구성되기 때문에 이것의 용량이 수천 기가바이트(GB)에서 테라(Tera) 바이트가 되어 그대로 네비게이션에 사용할 수는 없기 때문에 이 원도에서 핵심 지도 데이터만을 추출해 1차 전자지도로 압축하고, 이를 프로그래밍 언어가 이해할 수 있는 애플리케이션 형태로 변환시키는 과정 후 실차 테스트 과정을 통해 발견된 오류를 수정, 최종 네비게이션용 전자지도를 완성시키게 된다.Electronic map manufacturers conduct on-site surveys of more than 400,000 km in Korea every year with vehicles equipped with GPS receivers. Additional information such as ski resorts and resorts is also collected and reflected on the original map. The electronic original map produced in this way is composed of 28,000 detailed maps at a scale of 1:5000, so its capacity is thousands of gigabytes (GB). Since it becomes a terabyte and cannot be used for navigation as it is, only the core map data is extracted from this original map, compressed into the first electronic map, and converted into an application form that the programming language can understand, followed by the actual vehicle test process. Errors found through this are corrected, and the final electronic map for navigation is completed.

즉, 기존의 기술은, 국토지리정보원에서 제공 받은 원도를 근거로 전자지도 제작업체가 직접 현장조사를 통해 새로운 도로나 교차로를 비롯해 일방통행, 차선 수, 회전정보, 도로 폭 등 상세 도로 정보와 맛집, 테마파크, 골프장, 스키장, 휴양지 등 부가정보 등을 수집하여 국토지리정보원에서 제공 받은 원도에 반영하며, 이렇게 제작된 전자 원도를 1:5000 축척비율의 세부 2만8000개 조각지도로 구성하고, 이 원도에서 핵심 지도 데이터만을 추출해 1차 전자지도로 압축하는 과정을 거친다.In other words, in the existing technology, based on the original map provided by the National Geographic Information Institute, the electronic map maker conducts a field survey to obtain detailed road information such as new roads or intersections, one-way traffic, number of lanes, turn information, and road width. Additional information such as restaurants, theme parks, golf courses, ski resorts, resorts, etc. is collected and reflected on the original map provided by the National Geographic Information Institute. Then, only the key map data is extracted from this original map and compressed into the first electronic map.

그리고 이를 프로그래밍 언어가 이해할 수 있는 애플리케이션 형태로 변환시키는 과정 후 실차 테스트 과정을 통해 발견된 오류를 수정, 최종 네비게이션용 전자지도를 완성시키게 되는데 여기에는 사용자의 위치를 중심으로 진행방향으로 동선을 나타내기도 하며, 또는 지구의 남북을 고정한 상태에서 사용자의 위치에 대한 이동 동선을 나타내는 등 다양한 활용정보를 담고 있다.And after the process of converting it into an application form that the programming language can understand, errors found through the actual vehicle test process are corrected and the final electronic map for navigation is completed. It contains various utilization information, such as indicating the movement line for the user's location in a state where the north and south of the earth are fixed.

또한 지도의 표현방법으로서는 그래픽 이미지로 2D 또는 3D 표현방법 등을 제공하고 있는데 2D의 경우에는 평면 개념의 서비스로서 다양한 색상 등 다양한 표현 기법을 나타내고 있으며, 3D의 경우에는 제공업체가 조사한 정보를 토대로 도로 및 건물 등이 그래픽 디자인으로 표현하여 제공되고 있다.In addition, as a method of expressing a map, 2D or 3D expression methods are provided as graphic images. In the case of 2D, it is a flat concept service and shows various expression techniques such as various colors, and in the case of 3D, road and buildings are expressed and provided as graphic designs.

그러나 이러한 종래의 기술은 단순 지도 표기와 방향에 대한 표시 방식으로 현실의 실제의 영상과는 다소 차이가 있을 뿐만 아니라, 발 빠르게 변화하는 도로, 교통신호, 공사현장 및 건물 등의 정보를 손쉽게 취득하지 못하는 한계점이 있어 왔다.However, these conventional technologies are not only slightly different from actual images in reality as they are simple map and direction display methods, but also do not easily acquire information such as rapidly changing roads, traffic signals, construction sites and buildings. There have been limitations.

특허문헌 1 : 국내공개특허공보 제10-2013-0082582호(2013년 07월 22일 공개) "전자지도에서 범위 검색 서비스 제공 방법 및 시스템(Method and system for providing range search services in digital map)"Patent Document 1: Korean Patent Publication No. 10-2013-0082582 (published on July 22, 2013) "Method and system for providing range search services in digital map"

본 발명은 상기의 문제점을 해결하기 위한 것으로, 국토지리정보원의 원도와 네비게이션의 작동 원리의 핵심인 '위성위치추적시스템(GPS) 수신기'를 기반으로 하여 2차원 또는 3차원 좌표를 산출, 이를 네비게이션을 통하여 사용자의 실시간 위치정보를 기반으로 한 현실의 이미지를 제공하도록 하기 위한 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법을 제공하기 위한 것이다.The present invention is to solve the above problems, based on the original map of the National Geographic Information Institute and the 'Global Positioning System (GPS) receiver', which is the core of the navigation operation principle, calculates 2-dimensional or 3-dimensional coordinates for navigation Location-based convergence electronic map service method matching navigation terminal and real-time image for location-based convergence electronic map service matching real-time image to provide real-time image based on user's real-time location information through is to provide

또한, 본 발명은 지도 제작업체에서는 국토지리원에서 5년마다 갱신하는 원도를 토대로 날로 변하는 도로망이나 신호체계 그리고 각종 건물 등의 정보를 주기적으로 갱신하듯이, 사용자가 이동하는 과정에서 카메라로 촬영되는 현재 환경의 실시간 영상을 차량 및 스마트 폰의 네비게이션 실시간 지도서비스에 매칭시켜 서비스 하도록 하기 위한 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법을 제공하기 위한 것이다.In addition, according to the present invention, as map manufacturers periodically update information such as road networks, signal systems, and various buildings that change day by day based on original maps updated every five years by the National Geospatial Information Service, the user is photographed with a camera in the process of moving. Location-based convergence electronic map matching real-time video and navigation terminal for location-based convergence electronic map service matching real-time video to match real-time video of the current environment with navigation real-time map service of vehicle and smart phone to service It is to provide a service method.

또한, 본 발명은 네비게이션에서 제공되는 그래픽 디자인의 2D 또는 3D 화면에 카메라의 실시간 영상을 매칭시켜 합성하여 제공함으로써, 사용자는 기존에 제공되던 단순 그래픽 이미지의 지도와는 다르게 카메라가 허용하는 범위에서 주변환경의 실시간 현재의 영상을 네비게이션 지도와 결합시켜 입체적으로 제공받음으로써 실시간 영상의 현실감 있는 환경을 접할 수 있기 때문에 발 빠르게 변화하는 도로, 교통신호, 공사현장 및 건물 등의 정보를 손쉽게 취득하게 하여 사고의 위험성 감소와 아울러 편리성을 증가시키도록 하기 위한 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법을 제공하기 위한 것이다.In addition, the present invention matches and synthesizes a real-time image of a camera to a 2D or 3D screen of a graphic design provided by a navigation system, so that the user can view the surroundings within the range allowed by the camera, unlike maps of simple graphic images previously provided. By combining real-time current images of the environment with navigation maps and receiving them in three dimensions, you can experience a realistic environment of real-time images, so you can easily acquire information on rapidly changing roads, traffic signals, construction sites, and buildings to prevent accidents. It is to provide a location-based convergence electronic map service method matching real-time images and a navigation terminal for a location-based convergence electronic map service matching real-time images in order to reduce the risk of and increase convenience.

그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.However, the objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned will be clearly understood by those skilled in the art from the description below.

상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법은, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 A/V 입력부(120)를 통해 차량의 카메라(200)로부터 수신되는 실시간 촬영 이미지(10)를 제공받은 뒤, 출력부(160) 중 카메라 실시간 영상 디스플레이부(162)로 실시간 촬영 이미지(10)를 출력 설정하는 제 1 단계; 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 통신부(110)를 통해 제공되는 위성위치추적시스템(GPS)의 GPS 좌표를 제공받은 뒤, 출력부(160) 중 GPS 이미지 영상 디스플레이부(161)로 출력 설정하는 제 2 단계; 를 포함하는 것을 특징으로 한다.In order to achieve the above object, in the location-based convergence electronic map service method matching real-time images according to an embodiment of the present invention, the navigation terminal 100 for the location-based convergence electronic map service matching real-time images is A After receiving the real-time captured image 10 received from the camera 200 of the vehicle through the /V input unit 120, the real-time captured image 10 is displayed through the camera real-time image display unit 162 of the output unit 160. The first step of setting the output; And after the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image is provided with the GPS coordinates of the global positioning system (GPS) provided through the communication unit 110, the output unit 160 A second step of setting the output to the GPS image display unit 161; It is characterized in that it includes.

이때, 상기 제 2 단계 이후, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 카메라 실시간 영상 생성부(141)에서 생성된 실시간 촬영 이미지(10)와, GPS 배경 이미지 영상 생성부(142)에서 생성되는 영상 그래픽 이미지(20)에 대해서 매칭을 위해 실시간 촬영 이미지(10)의 생성시의 GPS 좌표 정보와, 영상 그래픽 이미지(20) 추출시의 GPS 좌표 정보에 대해서 1:1 매칭을 통해 각 GPS 좌표 정보가 동일한 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20)에 대해서 매칭 정보로 활용하도록 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20) 각각에 대해서 GPS 좌표 정보를 매칭 메타데이터로 설정하는 제 3 단계; 를 더 포함하는 것을 특징으로 한다.At this time, after the second step, the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image is the real-time captured image 10 generated by the camera real-time image generator 141 and the GPS background image For matching with respect to the video graphic image 20 generated by the video generator 142, GPS coordinate information at the time of generating the real-time captured image 10 and GPS coordinate information at the time of extracting the video graphic image 20 1 GPS coordinate information for each of the real-time captured image 10 and video graphic image 20 so that each GPS coordinate information is used as matching information for the same real-time captured image 10 and video graphic image 20 through 1 matching A third step of setting as matching metadata; It is characterized in that it further comprises.

또한, 상기 제 3 단계 이후, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 매칭 메타데이터가 동일한 실시간 촬영 이미지(10)와, 영상 그래픽 이미지(20)에 대해서 매칭 메타데이터가 동일한 것에 대해서 출력부(160) 상에서 동기화되어 출력하도록 제어하는 제 4 단계; 를 포함하는 것을 특징으로 한다.In addition, after the third step, the navigation terminal 100 for the location-based convergence electronic map service matching the real-time video matches the real-time captured image 10 and the video graphic image 20 having the same matching metadata. A fourth step of controlling so that metadata having the same metadata is synchronized and output on the output unit 160; It is characterized in that it includes.

상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말은, A/V 입력부(120)를 통해 차량의 카메라(200)로부터 수신되는 실시간 촬영 이미지(10)를 제공받은 뒤, 출력부(160) 중 카메라 실시간 영상 디스플레이부(162)로 실시간 촬영 이미지(10)를 출력 설정하는 카메라 실시간 영상 생성부(141); 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 통신부(110)를 통해 제공되는 위성위치추적시스템(GPS)의 GPS 좌표를 제공받은 뒤, 출력부(160) 중 GPS 이미지 영상 디스플레이부(161)로 출력 설정하는 GPS 배경 이미지 영상 생성부(142); 를 포함하는 것을 특징으로 한다.In order to achieve the above object, the navigation terminal for the location-based convergence electronic map service matching real-time images according to an embodiment of the present invention is received from the camera 200 of the vehicle through the A / V input unit 120 a camera real-time image generator 141 configured to output the real-time captured image 10 to the camera real-time image display unit 162 of the output unit 160 after receiving the real-time captured image 10; And after the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image is provided with the GPS coordinates of the global positioning system (GPS) provided through the communication unit 110, the output unit 160 a GPS background image generation unit 142 that sets output to the GPS image display unit 161; It is characterized in that it includes.

이때, 본 발명은, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 카메라 실시간 영상 생성부(141)에서 생성된 실시간 촬영 이미지(10)와, GPS 배경 이미지 영상 생성부(142)에서 생성되는 영상 그래픽 이미지(20)에 대해서 매칭을 위해 실시간 촬영 이미지(10)의 생성시의 GPS 좌표 정보와, 영상 그래픽 이미지(20) 추출시의 GPS 좌표 정보에 대해서 1:1 매칭을 통해 각 GPS 좌표 정보가 동일한 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20)에 대해서 매칭 정보로 활용하도록 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20) 각각에 대해서 GPS 좌표 정보를 매칭 메타데이터로 설정하는 영상 매칭 생성부(143); 를 더 포함하는 것을 특징으로 한다.At this time, in the present invention, the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image generates the real-time captured image 10 generated by the camera real-time image generator 141 and the GPS background image image For matching with the video graphic image 20 generated in the unit 142, GPS coordinate information at the time of generating the real-time captured image 10 and GPS coordinate information at the time of extracting the video graphic image 20 are 1:1 Through matching, GPS coordinate information is matched for each of the real-time captured image 10 and video graphic image 20 so that each GPS coordinate information is used as matching information for the same real-time captured image 10 and video graphic image 20. an image matching generating unit 143 that is set as metadata; It is characterized in that it further comprises.

본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법은, 국토지리정보원의 원도와 네비게이션의 작동 원리의 핵심인 '위성위치추적시스템(GPS) 수신기'를 기반으로 하여 2차원 또는 3차원 좌표를 산출, 이를 네비게이션을 통하여 사용자의 실시간 위치정보를 기반으로 한 현실의 이미지를 제공하도록 하는 효과를 제공한다. A navigation terminal for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention and a location-based convergence electronic map service method matching real-time images, Based on the core 'Global Positioning System (GPS) receiver', it calculates 2D or 3D coordinates, and provides the effect of providing a real image based on the user's real-time location information through navigation.

또한, 본 발명의 다른 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법은, 지도 제작업체에서는 국토지리원에서 5년마다 갱신하는 원도를 토대로 날로 변하는 도로망이나 신호체계 그리고 각종 건물 등의 정보를 주기적으로 갱신하듯이, 사용자가 이동하는 과정에서 카메라로 촬영되는 현재 환경의 실시간 영상을 차량 및 스마트 폰의 네비게이션 실시간 지도서비스에 매칭시켜 서비스 할 수 있는 효과를 제공한다.In addition, a navigation terminal for a location-based convergence electronic map service matching real-time images according to another embodiment of the present invention and a location-based convergence electronic map service method matching real-time images are map manufacturers using 5 Just as information such as road networks, signal systems, and various buildings that change every day are periodically updated based on the original map updated every year, the real-time image of the current environment captured by the camera while the user is moving is displayed in real-time for vehicle and smart phone navigation. It provides the effect that can be serviced by matching with the map service.

뿐만 아니라, 본 발명의 다른 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말 및 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법은, 네비게이션에서 제공되는 그래픽 디자인의 2D 또는 3D 화면에 카메라의 실시간 영상을 매칭시켜 합성하여 제공함으로써, 사용자는 기존에 제공되던 단순 그래픽 이미지의 지도와는 다르게 카메라가 허용하는 범위에서 주변환경의 실시간 현재의 영상을 네비게이션 지도와 결합시켜 입체적으로 제공받음으로써 실시간 영상의 현실감 있는 환경을 접할 수 있기 때문에 발 빠르게 변화하는 도로, 교통신호, 공사현장 및 건물 등의 정보를 손쉽게 취득하게 하여 사고의 위험성 감소와 아울러 편리성을 증가시킬 수 있는 효과를 제공한다.In addition, a navigation terminal for a location-based convergence electronic map service matching real-time images according to another embodiment of the present invention and a location-based convergence electronic map service method matching real-time images, By matching and synthesizing the real-time video of the camera on a 2D or 3D screen, the user can combine the real-time current video of the surrounding environment with the navigation map within the range allowed by the camera, unlike the map of a simple graphic image previously provided. By being provided in three dimensions, you can access a realistic environment of real-time video, so you can easily acquire information on rapidly changing roads, traffic signals, construction sites and buildings, reducing the risk of accidents and increasing convenience. provide an effect.

도 1은 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)을 나타내는 도면이다.
도 2는 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에서 출력부(160)로 출력된 유저인터페이스(User Interface, 이하 'UI') 화면을 나타내는 도면이다.
도 3은 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 스마트폰인 경우의 UI 화면을 나타내는 도면이다.
도 4는 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법을 나타내는 흐름도이다.
1 is a diagram showing a navigation terminal 100 for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention.
2 is a user interface (UI) screen output from the navigation terminal 100 to the output unit 160 for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention. It is a drawing showing
3 is a diagram showing a UI screen when the navigation terminal 100 for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention is a smartphone.
4 is a flowchart illustrating a location-based convergence electronic map service method matching real-time images according to an embodiment of the present invention.

이하, 본 발명의 바람직한 실시예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.Hereinafter, a detailed description of preferred embodiments of the present invention will be described with reference to the accompanying drawings. In the following description of the present invention, if it is determined that a detailed description of a related known function or configuration may unnecessarily obscure the subject matter of the present invention, the detailed description will be omitted.

본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 상기 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.In the present specification, when one component 'transmits' data or signals to another component, the component may directly transmit the data or signal to the other component, and through at least one other component. It means that data or signals can be transmitted to other components.

도 1은 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)을 나타내는 도면이다. 도 2는 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에서 출력부(160)로 출력된 UI 화면을 나타내는 도면이다. 도 3은 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 스마트폰인 경우의 UI 화면을 나타내는 도면이다.1 is a diagram showing a navigation terminal 100 for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention. 2 is a diagram showing a UI screen output from the navigation terminal 100 to the output unit 160 for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention. 3 is a diagram showing a UI screen when the navigation terminal 100 for a location-based convergence electronic map service matching real-time images according to an embodiment of the present invention is a smartphone.

먼저, 도 1을 참조하면, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)은 GPS 수신모듈을 구비한 통신부(110), 카메라 입력 모듈을 구비한 A/V 입력부(120), 사용자 입력부(130), 영상콘텐트 생성부(140), 제어부(150), 출력부(160)를 포함할 수 있다. First, referring to FIG. 1, a navigation terminal 100 for a location-based convergence electronic map service matching real-time images includes a communication unit 110 equipped with a GPS receiving module and an A/V input unit equipped with a camera input module ( 120), a user input unit 130, a video content generator 140, a control unit 150, and an output unit 160.

출력부(160)는 GPS 이미지 영상 디스플레이부(161), 카메라 실시간 영상 디스플레이부(162), 매칭 영상 디스플레이부(163) 및 오류 알람부(164)를 포함할 수 있으며, 각 구분된 영역(161, 162, 163, 164)는 물리적 공간이 아닌 출력부(160)를 구성하는 하나의 디스플레이 장치 영역에서의 지정되구 구분된 위치 영역일 수 있다. The output unit 160 may include a GPS image display unit 161, a camera real-time video display unit 162, a matching video display unit 163, and an error alarm unit 164, and each divided area 161 , 162, 163, and 164 may be designated and divided location areas in one display device area constituting the output unit 160, not in physical space.

또한, 영상콘텐트 생성부(140)는 카메라 실시간 영상 생성부(141), GPS 배경 이미지 영상 생성부(142), 영상 매칭 생성부(143), 영상 합성부(144)를 포함할 수 있다. In addition, the video content generator 140 may include a camera real-time video generator 141, a GPS background image video generator 142, an image matching generator 143, and a video synthesizer 144.

카메라 실시간 영상 생성부(141)는 도 2와 같이 A/V 입력부(120)를 통해 차량의 카메라(200)로부터 수신되는 실시간 촬영 이미지(10)를 제공받은 뒤, 출력부(160) 중 카메라 실시간 영상 디스플레이부(162)로 실시간 촬영 이미지(10)를 출력하도록 제어부(150)로 제공할 수 있다.The camera real-time image generator 141 receives the real-time captured image 10 received from the camera 200 of the vehicle through the A/V input unit 120 as shown in FIG. It may be provided to the controller 150 to output the real-time captured image 10 to the video display unit 162 .

GPS 배경 이미지 영상 생성부(142)는 통신부(110)를 통해 제공되는 위성위치추적시스템(GPS)의 GPS 좌표를 제공받은 뒤, 출력부(160) 중 GPS 이미지 영상 디스플레이부(161)로 출력하도록 영상 그래픽 이미지(20)를 생성하여 제어부(150)로 제공할 수 있다. 여기서 영상 그래픽 이미지(20)는 차량에 장착된 카메라(200)가 2D 카메라인 경우 2D 영상 그래픽 이미지가 생성되고, 차량에 장착된 카메라(200)가 3D 카메라인 경우 3D 영상 그래픽 이미지가 생성될 수 있다. The GPS background image image generation unit 142 receives the GPS coordinates of the global positioning system (GPS) provided through the communication unit 110 and outputs them to the GPS image display unit 161 of the output unit 160. A video graphic image 20 may be generated and provided to the control unit 150 . Here, the video graphic image 20 may generate a 2D video graphic image when the camera 200 mounted on the vehicle is a 2D camera, and a 3D video graphic image when the camera 200 mounted on the vehicle is a 3D camera. there is.

여기서, GPS 배경 이미지 영상 생성부(142)는 이동저장 장치(USB)나 메모리로부터 각 GPS 좌표별 영상 그래픽 이미지(20)를 추출하여 제어부(150)로 제공할 수 있다. Here, the GPS background image image generation unit 142 may extract the video graphic image 20 for each GPS coordinate from a mobile storage device (USB) or memory and provide the extracted video graphic image 20 to the control unit 150 .

영상 매칭 생성부(143)는 카메라 실시간 영상 생성부(141)에서 생성된 실시간 촬영 이미지(10)와, GPS 배경 이미지 영상 생성부(142)에서 생성되는 영상 그래픽 이미지(20)에 대해서 매칭을 위해 실시간 촬영 이미지(10)의 생성시의 GPS 좌표 정보와, 영상 그래픽 이미지(20) 추출시의 GPS 좌표 정보에 대해서 1:1 매칭을 통해 각 GPS 좌표 정보가 동일한 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20)에 대해서 매칭 정보로 활용하도록 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20) 각각에 대해서 GPS 좌표 정보를 매칭 메타데이터로 설정한다. The image matching generation unit 143 is configured to match the real-time captured image 10 generated by the camera real-time image generation unit 141 and the video graphic image 20 generated by the GPS background image generation unit 142. Real-time captured image 10 and video graphic having the same GPS coordinate information through 1:1 matching with respect to the GPS coordinate information at the time of generating the real-time captured image 10 and the GPS coordinate information at the time of extracting the video graphic image 20. GPS coordinate information is set as matching metadata for each of the real-time captured image 10 and video graphic image 20 so as to be used as matching information for the image 20 .

영상 합성부(144)는 카메라 실시간 영상 생성부(141)에 의해 생성되는 실시간 촬영 이미지(10)와, GPS 배경 이미지 영상 생성부(142)에 의해 생성되는 영상 그래픽 이미지(20)에 대해서 매칭 메타데이터가 동일한 것에 대해서 제어부(150)의 영상 융복합 매칭 모듈(151)로 제공할 수 있다. The video synthesis unit 144 is a matching meta for the real-time captured image 10 generated by the camera real-time video generation unit 141 and the video graphic image 20 generated by the GPS background image generation unit 142. The same data may be provided to the video convergence matching module 151 of the control unit 150.

제어부(150)는 영상 융복합 매칭 모듈(151) 및 네비게이션 출력 영상 오류 판단 모듈(152)을 포함할 수 있다. The control unit 150 may include an image convergence matching module 151 and a navigation output image error determination module 152 .

영상 융복합 매칭 모듈(151)은 영상콘텐트 생성부(140)로부터 매칭 메타데이터와 함께 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20)를 전달받은 뒤, 임시적으로 실시간 촬영 이미지(10)를 출력부(160)의 카메라 실시간 영상 디스플레이부(162)로 출력하고, 영상 그래픽 이미지(20)를 출력부(160)의 GPS 이미지 영상 디스플레이부(161)에 출력할 수 있으며, 도 2와 같이 출력부(160)의 카메라 실시간 영상 디스플레이부(162)이 이미지 영상 디스플레이부(161)에 비해 하단에 위치할 수 있으며 이는 하나의 실시예로 상하 관계가 변형되거나, 좌우 형태로 변형 가능하다.The video convergence matching module 151 receives the real-time captured image 10 and the video graphic image 20 together with matching metadata from the video content generator 140, and then temporarily outputs the real-time captured image 10. It can be output to the camera real-time video display unit 162 of the unit 160, and output the video graphic image 20 to the GPS image display unit 161 of the output unit 160, as shown in FIG. The camera real-time video display unit 162 of (160) may be positioned at a lower level than the image display unit 161, and in one embodiment, a vertical relationship may be modified or a left-right shape may be modified.

이후, 영상 융복합 매칭 모듈(151)은 출력부(160)의 GPS 이미지 영상 디스플레이부(161)로 실시간 촬영 이미지(10)를 출력하고, 출력부(160)의 카메라 실시간 영상 디스플레이부(162)의 네비게이션 출력 영상 오류 판단 모듈(152)로 출력하기 위해서 실시간 촬영 이미지(10)와 영상 그래픽 이미지(20) 간의 영상 융복합을 수행할 수 있다.Thereafter, the video convergence matching module 151 outputs the real-time captured image 10 to the GPS image image display unit 161 of the output unit 160, and the camera real-time video display unit 162 of the output unit 160 Video convergence between the real-time captured image 10 and the video graphic image 20 may be performed to output the navigation output to the video error determination module 152.

보다 구체적으로 영상 융복합 매칭 모듈(151)은 실시간 촬영 이미지(10)와, 영상 그래픽 이미지(20) 간의 영상 이미지 비교를 통해서 매칭되는 형상에 대한 좌표를 중심으로, 실시간 촬영 이미지(10)와 영상 그래픽 이미지(20)에 대한 축척 일치 작업과, 축척 일치 이후에 형상 간의 기울기 차이에 대한 보정을 통해서 영상에 대한 융복합을 수행할 수 있다.More specifically, the image convergence matching module 151 compares the video image between the real-time captured image 10 and the video graphic image 20, centering on the coordinates of the matched shape, the real-time captured image 10 and the image Convergence of images may be performed through a scale matching operation for the graphic image 20 and correction of a tilt difference between shapes after the scale matching operation.

이후, 영상 융복합 매칭 모듈(151)은 융복합된 상태의 실시간 촬영 이미지(10)와 영상 그래픽 이미지(20)에 대해서 각각 GPS 이미지 영상 디스플레이부(161) 및 카메라 실시간 영상 디스플레이부(162) 상에서 투명도를 0%에서 100%로 투명처리하면서 점차적으로 매칭 영상 디스플레이부(163)가 점차적으로 출력부(160)의 전면으로 투명도가 100%에서 0% 정도가 되도록 제어할 수 있다.Thereafter, the video convergence matching module 151 is configured to display the real-time captured image 10 and the video graphic image 20 in a convergence state on the GPS image display unit 161 and the camera real-time video display unit 162, respectively. While processing the transparency from 0% to 100%, the matching image display unit 163 may gradually control the transparency to the front of the output unit 160 from 100% to 0%.

여기서, 영상 융복합 매칭 모듈(151)은 매칭 영상 디스플레이부(163) 상에서 출력된 융복합된 상태의 실시간 촬영 이미지(10)와 영상 그래픽 이미지(20)에서 상부의 영상 그래픽 이미지(20)에 대해서는 미리 설정된 투명도, 예 30~50%로 바탕을 투명하게 처리함과 동시에 하부의 실시간 촬영 이미지(10) 뿐만 아니라 영상 그래픽 이미지(20)로 출력 가능한 영역의 상부의 실시간 촬영 이미지(10)도 함께 매칭 영상 디스플레이부(163) 상에 출력하도록 제어할 수 있다. Here, the video convergence matching module 151 is configured for the video graphic image 20 at the top of the video graphic image 20 and the real-time captured image 10 in a convergence state output on the matching video display unit 163. The background is processed transparently with preset transparency, eg 30 to 50%, and at the same time, not only the real-time captured image 10 at the bottom but also the real-time captured image 10 at the top of the area that can be output as a video graphic image 20 is matched together. It can be controlled to output on the image display unit 163.

네비게이션 출력 영상 오류 판단 모듈(152)은 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에 탑재된 2D 또는 3D로 그래픽 이미지가 실시간 촬영된 현실상의 경로와 일치하지 않는 경우에는 이를 판단하여 사용자에게 음성으로 알리고, 사용자가 네비게이션을 최신 도로정보로 업그레이드 할 수 있도록 하는 "실시간 영상을 매칭한 위치 기반 융복합 전자지도 서비스 방법"을 제공할 수 있다. The navigation output image error determination module 152 is a 2D or 3D graphic image mounted on the navigation terminal 100 for a location-based convergence electronic map service matching real-time images. can provide a "location-based convergence electronic map service method matching real-time images" that determines this and notifies the user by voice and allows the user to upgrade the navigation to the latest road information.

또한, 네비게이션 출력 영상 오류 판단 모듈(152)은 영상 융복합 매칭 모듈(151)에 의한 영상 융복합 매칭 모듈(151)은 실시간 촬영 이미지(10)와, 영상 그래픽 이미지(20) 간의 영상 이미지 비교를 통해서 매칭되는 형상에 대한 좌표를 중심으로, 실시간 촬영 이미지(10)와 영상 그래픽 이미지(20)에 대한 축척 일치 작업과, 축척 일치 이후에 형상 간의 기울기 차이에 대한 보정 과정에서 매칭되는 형상이 발견되지 않는 경우, 출력부(160)의 오류 알람부(164)로 오류 정보를 제공함과 동시에 실시간 촬영 이미지(10)과 영상 그래픽 이미지(20) 중 하나에 대한 선택 요청을 통해 사용자 입력부(130)를 통해 하나에 대한 선택 신호에 따라 출력부(160) 전체의 디스플레이 영역에 해당하는 매칭 영상 디스플레이부(163)로 선택 신호에 해당하는 하나의 이미지를 출력하도록 제어할 수 있다. In addition, the navigation output video error determination module 152 performs video image comparison between the real-time captured image 10 and the video graphic image 20 by the video convergence matching module 151. Centered on the coordinates of the matched shape through the scale matching operation for the real-time captured image 10 and the video graphic image 20, and the process of correcting the inclination difference between the shapes after the scale matching, no matching shape is found. If not, the error information is provided to the error alarm unit 164 of the output unit 160 and at the same time through the user input unit 130 through a request for selection of one of the real-time captured image 10 and video graphic image 20 According to the selection signal for one, the output unit 160 may be controlled to output one image corresponding to the selection signal to the matching image display unit 163 corresponding to the entire display area.

또한 도 3과 같이 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 스마트폰인 경우 기존 전자지도 그래픽 디자인의 투명처리 후 사용자의 경로 등의 노출 표시할 수 있으며, L1은 실시간 영상을 통한 전자지도 환경을 나타내며, L2는 현재의 환경을 나타낸다. In addition, if the navigation terminal 100 for the location-based convergence electronic map service matching real-time images is a smartphone, as shown in FIG. represents the electronic map environment through real-time images, and L2 represents the current environment.

이러한 구성을 통해서 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)은 국토지리정보원의 원도와 네비게이션의 작동 원리의 핵심인 '위성위치추적시스템(GPS) 수신기'를 기반으로 하여 2차원 또는 3차원 좌표를 산출, 이를 네비게이션을 통하여 사용자의 실시간 위치정보를 제공하는 서비스를 제공할 수 있다.Through this configuration, the navigation terminal 100 for the location-based convergence electronic map service matching real-time images is based on the original map of the National Geographic Information Institute and the 'Global Positioning System (GPS) receiver', which is the core of the navigation operation principle. It is possible to provide a service that provides real-time location information of a user through calculation of 2D or 3D coordinates and navigation.

보다 구체적으로, 사용자에게 2D 또는 3D로 그래픽 이미지화 되어 제공되는 기술에서 벗어나 사용자가 보유하고 있는 스마트폰(도 3 참조)이나 차량의 카메라(200)를 통하여 사용자의 위치에서 이동되는 전방의 현재 환경을 실시간 촬영하고, 이를 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에서 서비스 되고 있는 2D 또는 3D의 그래픽 이미지와 매칭을 통한 영상 연출이 가능하게 함으로써 사용자에게 훨씬 더 현실감 있는 정보를 제공할 수 있다.More specifically, the current environment moving from the user's location through the user's smartphone (see FIG. 3) or the camera 200 of the vehicle, away from the technology provided as a 2D or 3D graphic image to the user Real-time filming and real-time video matching for location-based convergence electronic map services, enabling the production of images through matching with 2D or 3D graphic images being serviced in the navigation terminal 100, which is much more realistic for users. can provide information.

이는 사용자의 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)을 통하여 사용자가 원하는 이동 동선으로 이동할 때 사용자가 접하는 주변의 각종 환경들을 사용자 측 카메라(200)의 허용 범위 내에서 촬영되므로 사용자는 이러한 영상 정보를 실시간 파악할 수 있기 때문에, 비록 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에 탑재된 이미지 그래픽이 현재의 변화된 실제 환경을 제공하지 못한다고 하더라도 사용자는 네비게이션의 2D 또는 3D로 그래픽 이미지와 매칭된 실시간 영상정보를 통해 충분히 예측 가능한 판단과 운행이 가능하므로 사고의 위험성을 현저히 줄일 수 있도록 하였다.Through the navigation terminal 100 for the location-based convergence electronic map service matching the user's real-time image, the various environments that the user encounters when moving to the desired movement line are within the allowable range of the camera 200 on the user's side. Since the user can grasp such image information in real time, even though the image graphics loaded in the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image do not provide the current changed real environment. Even though the user can make a sufficiently predictable judgment and operation through real-time video information matched with the 2D or 3D graphic image of the navigation, the risk of an accident can be significantly reduced.

또한 사용자의 스마트폰 또는 차량의 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100) 상에서 사용자가 지정한 경로를 제외한 2D 또는 3D로 그래픽 이미지의 바탕을 투명하게 처리하는 기법을 적용하고, 이를 실시간 카메라의 영상과 매칭, 합성시켜 제공함으로써, 기존의 증강현실에서 제공되는 기존의 녹화된 이미지에 도로나 교차로를 비롯해 일방통행, 차선수, 회전정보, 도로폭 등 상세 도로 정보와 맛집, 테마파크, 골프장, 스키장, 휴양지 등 부가정보를 표시하는 것이 아니라 실시간 현실의 영상 이미지에 이러한 원도에 반영된 위치기반의 각종 정보를 표시되게 함으로써 사용자로 하여금 현실적 접근이 가능하도록 하였다.In addition, on the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image of the user's smartphone or vehicle, a technique of transparently processing the background of the graphic image in 2D or 3D except for the route designated by the user is applied. By matching and synthesizing it with real-time camera images, detailed road information such as roads or intersections, one-way traffic, number of lanes, turn information, road width, etc. Instead of displaying additional information such as theme parks, golf courses, ski resorts, resorts, etc., various location-based information reflected in the original map is displayed in real-time real-time video images, enabling users to approach realistically.

뿐만 아니라 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에 탑재된 2D 또는 3D로 그래픽 이미지가 실시간 촬영된 현실상의 경로와 일치하지 않을 경우에는 이를 판단하여 사용자에게 음성으로 알리고, 사용자가 네비게이션을 최신 도로정보로 업그레이드 할 수 있도록 하는 "실시간 영상을 매칭한 위치 기반 융복합 전자지도 서비스 방법"을 제공할 수 있다. In addition, if the 2D or 3D graphic image mounted on the navigation terminal 100 for the location-based convergence electronic map service matching real-time images does not match the real-time route taken in real time, it is judged and voiced to the user. In addition, it is possible to provide "a location-based convergence electronic map service method matching real-time images" that allows users to upgrade navigation to the latest road information.

도 4는 본 발명의 실시예에 따른 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법을 나타내는 흐름도이다. 도 4를 참조하면, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)은 A/V 입력부(120)를 통해 차량의 카메라(200)로부터 수신되는 실시간 촬영 이미지(10)를 제공받은 뒤, 출력부(160) 중 카메라 실시간 영상 디스플레이부(162)로 실시간 촬영 이미지(10)를 출력 설정한다(S110).4 is a flowchart illustrating a location-based convergence electronic map service method matching real-time images according to an embodiment of the present invention. Referring to FIG. 4, the navigation terminal 100 for the location-based convergence electronic map service matching real-time images is a real-time captured image 10 received from the camera 200 of the vehicle through the A/V input unit 120. After being provided, the real-time captured image 10 is set to be output to the camera real-time image display unit 162 of the output unit 160 (S110).

단계(S110) 이후, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)은 통신부(110)를 통해 제공되는 위성위치추적시스템(GPS)의 GPS 좌표를 제공받은 뒤, 출력부(160) 중 GPS 이미지 영상 디스플레이부(161)로 출력 설정한다(S120).After step S110, the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image receives the GPS coordinates of the global positioning system (GPS) provided through the communication unit 110, and outputs Of the unit 160, the output is set to the GPS image display unit 161 (S120).

단계(S120) 이후, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)은 카메라 실시간 영상 생성부(141)에서 생성된 실시간 촬영 이미지(10)와, GPS 배경 이미지 영상 생성부(142)에서 생성되는 영상 그래픽 이미지(20)에 대해서 매칭을 위해 실시간 촬영 이미지(10)의 생성시의 GPS 좌표 정보와, 영상 그래픽 이미지(20) 추출시의 GPS 좌표 정보에 대해서 1:1 매칭을 통해 각 GPS 좌표 정보가 동일한 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20)에 대해서 매칭 정보로 활용하도록 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20) 각각에 대해서 GPS 좌표 정보를 매칭 메타데이터로 설정한다(S130).After step S120, the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image generates the real-time captured image 10 generated by the camera real-time image generator 141 and the GPS background image image. For matching with the video graphic image 20 generated in the unit 142, GPS coordinate information at the time of generating the real-time captured image 10 and GPS coordinate information at the time of extracting the video graphic image 20 are 1:1 Through matching, GPS coordinate information is matched for each of the real-time captured image 10 and video graphic image 20 so that each GPS coordinate information is used as matching information for the same real-time captured image 10 and video graphic image 20. It is set as metadata (S130).

단계(S130) 이후, 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)은 매칭 메타데이터가 동일한 실시간 촬영 이미지(10)와, 영상 그래픽 이미지(20)에 대해서 매칭 메타데이터가 동일한 것에 대해서 출력부(160) 상에서 동기화되어 출력하도록 제어한다(S140).After step S130, the navigation terminal 100 for the location-based convergence electronic map service matching the real-time video matches the matching metadata for the real-time captured image 10 and the video graphic image 20 having the same matching metadata. Controls to synchronize and output on the output unit 160 for the same thing (S140).

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.The present invention can also be implemented as computer readable codes on a computer readable recording medium. A computer-readable recording medium includes all types of recording devices in which data that can be read by a computer system is stored.

컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. Examples of computer-readable recording media include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc. also includes

또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.In addition, the computer-readable recording medium is distributed in computer systems connected through a network, so that computer-readable codes can be stored and executed in a distributed manner. In addition, functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers in the technical field to which the present invention belongs.

이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.As described above, preferred embodiments of the present invention have been disclosed in the present specification and drawings, and although specific terms have been used, they are only used in a general sense to easily explain the technical content of the present invention and help understanding of the present invention. However, it is not intended to limit the scope of the present invention. It is obvious to those skilled in the art that other modified examples based on the technical spirit of the present invention can be implemented in addition to the embodiments disclosed herein.

100 : 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말
110 : GPS 수신모듈을 구비한 통신부
120 : 카메라 입력 모듈을 구비한 A/V 입력부
130 : 사용자 입력부
140 : 영상콘텐트 생성부
141 : 카메라 실시간 영상 생성부
142 : GPS 배경 이미지 영상 생성부
143 : 영상 매칭 생성부
144 : 영상 합성부
150 : 제어부
151 : 영상 융복합 매칭 모듈
152 : 네비게이션 출력 영상 오류 판단 모듈
160 : 출력부
161 : GPS 이미지 영상 디스플레이부
162 : 카메라 실시간 영상 디스플레이부
163 : 매칭 영상 디스플레이부
164 : 오류 알람부
100: Navigation terminal for location-based convergence electronic map service matching real-time images
110: communication unit equipped with a GPS receiving module
120: A/V input unit with camera input module
130: user input unit
140: video content creation unit
141: camera real-time image generation unit
142: GPS background image video generation unit
143: image matching generation unit
144: video synthesis unit
150: control unit
151: video convergence matching module
152: navigation output image error determination module
160: output unit
161: GPS image video display unit
162: camera real-time image display unit
163: matching image display unit
164: error alarm unit

Claims (5)

실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 A/V 입력부(120)를 통해 차량의 카메라(200)로부터 수신되는 실시간 촬영 이미지(10)를 제공받은 뒤, 출력부(160) 중 카메라 실시간 영상 디스플레이부(162)로 실시간 촬영 이미지(10)를 출력 설정하는 제 1 단계;
실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 통신부(110)를 통해 제공되는 위성위치추적시스템(GPS)의 GPS 좌표를 제공받은 뒤, 출력부(160) 중 GPS 이미지 영상 디스플레이부(161)로 출력 설정하는 제 2 단계;
실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 카메라 실시간 영상 생성부(141)에서 생성된 실시간 촬영 이미지(10)와, GPS 배경 이미지 영상 생성부(142)에서 생성되는 영상 그래픽 이미지(20)에 대해서 매칭을 위해 실시간 촬영 이미지(10)의 생성시의 GPS 좌표 정보와, 영상 그래픽 이미지(20) 추출시의 GPS 좌표 정보에 대해서 1:1 매칭을 통해 각 GPS 좌표 정보가 동일한 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20)에 대해서 매칭 정보로 활용하도록 실시간 촬영 이미지(10) 및 영상 그래픽 이미지(20) 각각에 대해서 GPS 좌표 정보를 매칭 메타데이터로 설정하는 제 3 단계; 및
실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)이 매칭 메타데이터가 동일한 실시간 촬영 이미지(10)와, 영상 그래픽 이미지(20)에 대해서 매칭 메타데이터가 동일한 것에 대해서 출력부(160) 상에서 동기화되어 출력하도록 제어하는 제 4 단계;를 포함하되;
상기 제 4 단계에서 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스를 위한 네비게이션 단말(100)에 탑재된 2D 또는 3D로 그래픽 이미지가 실시간 촬영된 현실상의 경로와 일치하지 않는 경우에는 이를 판단하여 사용자에게 음성으로 알리고, 사용자가 네비게이션을 최신 도로정보로 업그레이드 할 수 있도록 하고,
매칭 영상 디스플레이부(163) 상에서 출력된 융복합된 상태의 실시간 촬영 이미지(10)와 영상 그래픽 이미지(20)에서 상부의 영상 그래픽 이미지(20)에 대해서는 미리 설정된 투명도로 바탕을 투명하게 처리함과 동시에 하부의 실시간 촬영 이미지(10) 뿐만 아니라 영상 그래픽 이미지(20)로 출력 가능한 영역의 상부의 실시간 촬영 이미지(10)도 함께 매칭 영상 디스플레이부(163) 상에 출력하도록 제어하는 것을 특징으로 하는 실시간 영상을 매칭한 위치기반 융복합 전자지도 서비스 방법.
After the navigation terminal 100 for a location-based convergence electronic map service matching real-time images receives the real-time captured image 10 received from the camera 200 of the vehicle through the A/V input unit 120, outputs it. A first step of outputting and setting the real-time captured image 10 to the camera real-time image display unit 162 of the unit 160;
After the navigation terminal 100 for location-based convergence electronic map service matching real-time images receives the GPS coordinates of the global positioning system (GPS) provided through the communication unit 110, the GPS of the output unit 160 A second step of setting output to the image image display unit 161;
The navigation terminal 100 for location-based convergence electronic map service matching real-time images is generated by the real-time captured image 10 generated by the camera real-time image generator 141 and the GPS background image image generator 142 For matching with respect to the video graphic image 20, the GPS coordinate information at the time of generating the real-time captured image 10 and the GPS coordinate information at the time of extraction of the video graphic image 20 are matched through 1: 1 matching. A method for setting GPS coordinate information as matching metadata for each of the real-time captured image 10 and the video graphic image 20 so as to be used as matching information for the real-time captured image 10 and the video graphic image 20 having the same information. Step 3; and
The navigation terminal 100 for the location-based convergence electronic map service matching real-time images outputs the real-time captured image 10 having the same matching metadata and the matching metadata for the video graphic image 20. A fourth step of controlling to synchronize and output on (160); including;
In the fourth step, if the 2D or 3D graphic image loaded in the navigation terminal 100 for the location-based convergence electronic map service matching the real-time image does not match the real-time route taken in real time, it is determined and the user notifies by voice, allows users to upgrade navigation to the latest road information,
In the real-time photographed image 10 and the video graphic image 20 in a convergence state output on the matching video display unit 163, the background of the video graphic image 20 at the top is processed transparently with a preset transparency, At the same time, not only the real-time captured image 10 at the bottom but also the real-time captured image 10 at the top of the area capable of being output as a video graphic image 20 is also controlled to be output on the matching image display unit 163. Location-based convergence electronic map service method matching images.
삭제delete 삭제delete 삭제delete 삭제delete
KR1020200150407A 2020-11-11 2020-11-11 Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video KR102539766B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200150407A KR102539766B1 (en) 2020-11-11 2020-11-11 Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200150407A KR102539766B1 (en) 2020-11-11 2020-11-11 Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video

Publications (2)

Publication Number Publication Date
KR20220064181A KR20220064181A (en) 2022-05-18
KR102539766B1 true KR102539766B1 (en) 2023-06-02

Family

ID=81800839

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200150407A KR102539766B1 (en) 2020-11-11 2020-11-11 Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video

Country Status (1)

Country Link
KR (1) KR102539766B1 (en)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101771657B1 (en) * 2010-12-01 2017-08-25 현대모비스 주식회사 Navigation apparatus for composing camera images of vehicle surroundings and navigation information, method thereof
KR20140044714A (en) * 2012-10-05 2014-04-15 현대모비스 주식회사 Method and apparatus for updating road information of navigation automatically
KR101444685B1 (en) * 2013-02-04 2014-09-26 서울시립대학교 산학협력단 Method and Apparatus for Determining Position and Attitude of Vehicle by Image based Multi-sensor Data
KR20150066036A (en) * 2013-12-06 2015-06-16 이동녀 Position Guidance System and Method Using Transparency Navigation

Also Published As

Publication number Publication date
KR20220064181A (en) 2022-05-18

Similar Documents

Publication Publication Date Title
US10929494B2 (en) Systems and methods for tagging objects for augmented reality
CN109891195B (en) System and method for using visual landmarks in initial navigation
EP3359918B1 (en) Systems and methods for orienting a user in a map display
US20060142943A1 (en) Navigation service method and terminal of enabling the method
US20070103461A1 (en) Virtual space image display method, apparatus, virtual space image display program, and recording medium
EP1750238A1 (en) Map creation device and navigation device
JP5547860B1 (en) A user portable terminal that retrieves target geographical information using the user's current position and current azimuth and provides the user with the information
CA2762743C (en) Updating map data from camera images
EP3338058B1 (en) Location based service tools for video illustration, selection, and synchronization
JP2010534849A (en) Method and apparatus for determining position
JP2007133489A5 (en)
JP5509376B1 (en) How to search local tourist information based on user location
US9411822B2 (en) System and method of generating and using open sky data
CN104101348A (en) Navigation system and method for displaying map on navigation system
CN101166952A (en) Device and method for compiling a combined picture and showing it on a display
JP4989495B2 (en) Image processing apparatus, image processing method, image processing program, and recording medium therefor
KR100774591B1 (en) Navigation system and method of navigating using the same
KR102539766B1 (en) Navigation terminal for location-based convergence electronic map service matching real-time video, location-based convergence electronic map service method matching real-time video
JPWO2010032282A1 (en) Server device, mobile terminal device, intersection guidance system, and intersection guidance method
CN104713544A (en) Location information display method and equipment
KR20150020421A (en) A measurement system based on augmented reality approach using portable servey terminal
US9734619B2 (en) 3-dimensional map view with background images
KR100468387B1 (en) Method, device and system for providing location information using map information
JP6898813B2 (en) In-vehicle device, hazard map display system
EP2385510A2 (en) Device for providing information using structural form and method therefor

Legal Events

Date Code Title Description
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant