KR102259451B1 - 지도 정보 제공 장치 및 방법 - Google Patents

지도 정보 제공 장치 및 방법 Download PDF

Info

Publication number
KR102259451B1
KR102259451B1 KR1020190143180A KR20190143180A KR102259451B1 KR 102259451 B1 KR102259451 B1 KR 102259451B1 KR 1020190143180 A KR1020190143180 A KR 1020190143180A KR 20190143180 A KR20190143180 A KR 20190143180A KR 102259451 B1 KR102259451 B1 KR 102259451B1
Authority
KR
South Korea
Prior art keywords
text
map
map information
shopping mall
image
Prior art date
Application number
KR1020190143180A
Other languages
English (en)
Other versions
KR20210056560A (ko
Inventor
류승완
Original Assignee
류승완
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 류승완 filed Critical 류승완
Priority to KR1020190143180A priority Critical patent/KR102259451B1/ko
Publication of KR20210056560A publication Critical patent/KR20210056560A/ko
Application granted granted Critical
Publication of KR102259451B1 publication Critical patent/KR102259451B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • G06K9/00691—
    • G06K9/3258—
    • G06K9/344—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
    • G06V20/36—Indoor scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/63—Scene text, e.g. street names
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/148—Segmentation of character regions
    • G06V30/153—Segmentation of character regions using recognition of characters or words

Abstract

본 발명은 지도 정보, 보다 상세하게는 건물 내 상가의 지도 정보를 제공하기 위한 시스템 및 방법을 제공한다.
일 예로서, 텍스트 검색을 이용한 지도 정보 제공 장치에 있어서, 특정 영역에서 상가를 촬영한 이미지와 위치 정보를 수신하는 자료수집부; 광학적 문자 인식(optical character reader, OCR) 프로그램을 이용하여 상기 수집된 영상으로부터 텍스트를 추출하는 텍스트 추출부; 상기 추출된 텍스트로부터 상호 및 전화번호를 제외한 나머지 텍스트를 분류하고, 분류된 텍스트와 연관 단어를 저장하는 데이터베이스; 상기 분류된 텍스트 및 연관 단어를 머신 러닝하여 상기 촬영된 이미지와 매칭하도록 학습시키는 학습부; 및 상기 수집된 위치정보를 이용하여 지도 정보를 추출하는 지도추출부를 포함하고, 사용자 단말기가 검색한 단어를 토대로, 상기 데이터베이스는 연관 단어를 검색하고, 사용자 단말기의 현재 위치를 기준으로 인접하고 연관 단어가 포함된 상가를 표시하는 지도 정보 제공 시스템이 개시된다.

Description

지도 정보 제공 장치 및 방법{Device and Method For Providing Map Information}
본 발명은 지도 정보, 보다 상세하게는 건물 내부 또는 상가의 지도 정보를 제공하기 위한 장치 및 방법에 관한 것이다.
일반적으로 지도를 등록하기 위해서는 네이버와 같은 플랫폼에 접속하여 업체명, 전화번호, 주소 및 업종을 입력한다. 그리고 입력하고자 하는 업소의 주소를검색하여 등록시킨다. 접속하여 업체의 주소를 검색 한뒤 해당 위치에 업체명, 전화번호, 주소 및 업종 등을 입력 한다.
그러나 종래의 지도 등록 방법은 업체에서 직접 등록을 하기 때문에, 직접 등록을 해야 하기 때문에 나이가 많은 사람들은 지도 등록에 어려움이 있고, 재래 시장의 경우 또는 같은 종류의 물건을 판매하는 시장 안에 있어서 개별 홍보가 필요하지 않다고 판단하는 경우, 업체가 등록을 하지 않는 경우가 많다. 따라서, 지도 서비스는 실제 존재하는 업체의 일부만을 서비스할 뿐이어서, 지도 서비스에 표시된 업체보다 표시되지 않은 업체가 많은 문제가 있었다.
또한, 재래시장 또는 특정한 지역에 모두 같은 물건을 취급하는 특수한 상권의 경우, 상가 건물 또는 시장 내의 내부 지도를 제공하는 것이 아니라 하나의 블록으로 표시되는 것이 일반적이어서, 업체마다 개별 표시되지 않고, 실제 지리정보와 지도상의 정보가 상이한 문제가 있다.
본 발명은 지도 정보, 보다 상세하게는 건물 내 상가의 지도 정보를 제작하고 제공하기 위한 장치 및 방법을 제공한다.
본 발명에 따른 지도 정보 제공 장치는 텍스트 검색을 이용한 지도 정보 제공 장치에 있어서, 특정 영역에서 상가를 촬영한 이미지와 위치 정보를 수신하는 자료수집부; 광학적 문자 인식(optical character reader, OCR) 프로그램을 이용하여 상기 수집된 영상으로부터 텍스트를 추출하는 텍스트 추출부; 상기 추출된 텍스트로부터 상호 및 전화번호를 제외한 나머지 텍스트를 분류하고, 분류된 텍스트와 연관 단어를 저장하는 데이터베이스; 상기 분류된 텍스트 및 연관 단어를 머신 러닝하여 상기 촬영된 이미지와 매칭하도록 학습시키는 학습부; 및 상기 수집된 위치정보를 이용하여 지도 정보를 추출하는 지도추출부를 포함하고, 사용자 단말기가 검색한 단어를 토대로, 상기 데이터베이스는 연관 단어를 검색하고, 사용자 단말기의 현재 위치를 기준으로 인접하고 연관 단어가 포함된 상가를 표시할 수 있다.
여기서, 상기 텍스트 추출부는 상가의 촬영된 이미지로부터 상호 및 전화번호와 나머지 텍스트를 머신 러닝으로 분류하고, 상기 데이터 베이스는 상기 상호 및 전화번호를 상기 분류된 텍스트 및 연관 단어와 함께 저장할 수 있다.
그리고 상기 사용자 단말기는 상가의 정보를 입력 또는 검색할 수 있고, 상기 데이터 베이스에 접속하여, 상가의 이미지, 추출된 텍스트 또는 연관 단어를 보정할 수 있다.
또한, 상기 지도 정보 추출부는 라이다를 이용해 포인트 클라우드를 만들고, 높이 축을 몇개의 층으로 슬라이스한 뒤, 슬라이스 한 층씩을 평균내어 2D로 생성하고, 도면을 생성하며, 수치 지도와 비교하여 지도 정보를 획득할 수 있다.
또한, 상기 연관 단어는 전문용어, 업계 관용어, 비표준어 중에서 적어도 하나를 포함하고, 상기 학습부는 상기 연관 단어들을 머신러닝을 통해 학습하여 확장할 수 있다.
더불어, 본 발명에 따른 지도 정보 제공 방법은 텍스트 검색을 이용한 지도 정보 제공 방법에 있어서, 자료수집부가 사용자 단말기로부터 특정 영역에서 상가를 촬영한 이미지와 위치 정보를 수신하는 단계; 텍스트 추출부가 광학적 문자 인식(optical character reader, OCR) 프로그램을 이용하여 상기 수집된 영상으로부터 텍스트를 추출하는 단계; 데이터 베이스가 상기 추출된 텍스트로부터 상호 및 전화번호를 제외한 나머지 텍스트를 분류하고, 분류된 텍스트와 연관 단어를 저장하는 단계; 학습부가 상기 분류된 텍스트 및 연관 단어를 머신 러닝하여 상기 촬영된 이미지와 매칭하도록 학습시키는 단계; 지도 추출부가 상기 수집된 위치정보를 이용하여 지도 정보를 추출하는 단계;를 포함하고, 상기 사용자 단말기가 단어를 검색하면, 상기 데이터베이스는 연관 단어를 검색하고, 사용자 단말기의 현재 위치를 기준으로 인접하고 연관 단어가 포함된 상가를 표시할 수 있다.
여기서, 상기 텍스트 추출부는 상가의 촬영된 이미지로부터 상호 및 전화번호와 나머지 텍스트를 분류하고, 상기 데이터 베이스는 상기 상호 및 전화번호를 상기 분류된 텍스트 및 연관 단어와 함께 저장할 수 있다.
그리고 상기 사용자 단말기는 상가의 정보를 입력 또는 검색할 수 있고, 상기 데이터 베이스에 접속하여, 상가의 이미지, 추출된 텍스트 또는 연관 단어를 보정할 수 있다.
또한, 상기 지도 정보 추출부는 라이다를 이용해 포인트 클라우드를 만들고, 높이 축을 몇개의 층으로 슬라이스한 뒤, 슬라이스 한 층씩을 평균내어 2D로 생성하고, 도면을 생성하며, 수치 지도와 비교하여 지도 정보를 획득할 수 있다.
또한, 상기 연관 단어는 전문용어, 업계 관용어, 비표준어 중에서 적어도 하나를 포함하고, 상기 학습부는 상기 연관 단어들을 머신러닝을 통해 학습하여 확장할 수 있다.
본 발명에 따른 지도 정보 제공 장치 및 방법은 사용자 단말기나 주행 로봇을 통해 상가의 이미지를 촬영하고, 이미지로부터 제품과 관련된 텍스트를 추출하여 연관 단어를 함께 데이터베이스에 저장하고, 사용자 단말기의 위치와 검색 단어를 통해 연관된 제품을 취급하는 상가에 대한 지도 정보를 용이하게 제공할 수 있다.
도 1은 본 발명의 실시예에 따른 지도 정보 제공 시스템의 구성도이다.
도 2는 본 발명의 실시예에 따른 지도 정보 제공 방법 중 상가 지도 입력 단계를 도시한 순서도이다.
도 3a은 본 발명의 실시예에 따른 지도 정보 제공 시스템에서 상가 입력의 예시 화면을 도시한 것이다.
도 3b는 본 발명의 실시예에 따른 지도 정보 제공 시스템에서 SLAM 기술을 통한 지도 표시 방법을 도시한 것이다.
도 4는 본 발명의 실시예에 따른 지도 정보 제공 방법 중 상가 지도 검색 단계를 도시한 순서도이다.
도 5는 본 발명의 실시예에 따른 지도 정보 제공 시스템에서 상가 검색 결과의 예시 화면을 도시한 것이다.
본 발명이 속하는 기술분야에 있어서 통상의 지식을 가진 자가 용이하게 실시할 수 있을 정도로 본 발명의 바람직한 실시예를 도면을 참조하여 상세하게 설명하면 다음과 같다.
도 1은 본 발명의 실시예에 따른 지도 정보 제공 시스템의 구성도이다.
도 1을 참조하면, 본 발명의 실시예에 따른 지도 정보 제공 시스템(1)은 제 1 사용자 단말기(10), 제 2 사용자 단말기(20)와 지도 정보 제공 장치(100)를 포함할 수 있다.
여기서, 제 1 사용자 단말기(10)와 제 2 사용자 단말기(20)는 통상의 PC, 스마트폰, 태블릿 또는 휴대용 라이다 등의 디바이스를 포함할 수 있다. 또한, 예를 들어, 제 1 사용자 단말기(10)는 상가 지도 정보를 업로드하는데 활용될 수 있고, 제 2 사용자 단말기(20)는 상가 지도 정보를 검색하는데 활용될 수 있다. 다만, 제 1 사용자 단말기(10)와 제 2 사용자 단말기(20)의 용어가 구분되어 있으나, 설명의 편의를 위한 것으로, 실제로는 사용자는 하나의 단말기로서 상기 지도 정보를 업로드하거나 검색하는데 모두 활용할 수 있다.
지도 정보 제공 장치(100)는 자료수집부(110), 텍스트추출부(120), 데이터베이스(130), 학습부(140), 지도추출부(150) 및 제어부(160)를 포함할 수 있다.
먼저, 자료수집부(110)는 특정한 지역을 촬영한 영상과 촬영된 지역의 위치정보를 수집할 수 있다.
사용자는 재래시장이나 유사한 품목을 취급하는 특수한 상권을 광각 카메라를 이용하여 촬영할 수 있다. 그리고 사용자는 제 1 디바이스(10)를 통해, 촬영된 영상을 지도 정보 제공 장치(100)에 업로드할 수 있다. 따라서, 자료수집부(110)는제 1 사용자 단말기(10)로부터 업로드된 이미지를 수집하고, 수집된 이미지가 촬영된 지역의 위치정보를 획득할 수 있다.
텍스트추출부(120)는 광학적 문자 인식(optical character reader, OCR) 프로그램을 이용하여 수신된 이미지로부터 텍스트를 추출할 수 있다. 제 1 사용자 단말기(10)에 의해 업로드된 이미지에는 상점의 간판 상호, 전화번호, 진열 상품의 브랜드, 홍보문구를 포함한다. 텍스트추출부(120)는 이미지에 포함된 텍스트를 추출한다. 또한, 텍스트추출부(120)는 텍스트 중에서 간판 상호, 전화번호는 별도로 추출하고, 홍보 문구, 진열 상품의 브랜드, 모델명 등을 분리해서 추출할 수 있다. 또한, 텍스트추출부(120)는 추출된 텍스트를 데이터베이스(130)에 전달할 수 있다.
데이터베이스(130)는 텍스트추출부(120)로부터 전달받은 텍스트에 대해, 여러 제 1 사용자 단말기(10)들로부터 기존에 입력받아 학습된 연관단어를 저장한다. 즉, 기존 사용자들이 제 1 사용자 단말기(10)를 통해 입력했던 단어들이 학습되어 연관단어를 형성하고, 데이터베이스(130)는 추출된 텍스트와 이에 해당되는 연관 단어를 저장할 수 있다. 여기서, 연관 단어는 전문용어, 업계 관용어, 비표준어, 혼용어, 관용 오기, 외국어 등을 포함할 수 있다.
학습부(140)는 제 1 사용자 디바이스(10)로부터 입력된 텍스트와 이미지를 기반으로 머신러닝을 수행한다. 그리고 학습부(140)는 기 구축된 머신러닝에 텍스트를 입력하면, 입력된 텍스트에 매칭되는 영상이 출력되도록 학습할 수 있다.
지도추출부(150)는 머신러닝을 통해 추출된 이미지의 위치정보를 이용하여 지도정보를 추출하고 생성할 수 있다.
제어부(160)는 사용자로부터 입력된 텍스트를 학습이 완료된 머신러닝에 입력하여 매칭되는 이미지을 추출할 수 있다. 또한, 제어부(160)는 추출된 이미지에 대응하는 지도정보를 제공할 수 있다.
이하에서는 본 발명의 실시예에 따른 지도 정보 제공 방법을 설명하도록 한다.
도 2는 본 발명의 실시예에 따른 지도 정보 제공 방법 중 상가 지도 입력 단계를 도시한 순서도이다. 도 3a는 본 발명의 실시예에 따른 지도 정보 제공 시스템에서 상가 입력의 예시 화면을 도시한 것이다. 도 3b는 본 발명의 실시예에 따른 지도 정보 제공 시스템에서 SLAM 기술을 통한 지도 표시 방법을 도시한 것이다. 이하에서는 도 2, 도 3a 및 3b에 대해 도 1을 함께 참조하여 설명하도록 한다.
도 1 내지 도 3을 참조하면, 상가 지도 입력 단계는 상가 이미지 촬영 및 위치 정보 수신 단계(S11), 텍스트 추출 및 선별 단계(S12), 연관 단어 검색 및 저장 단계(S13), 지도 매칭 단계(S14), 사용자 보정 단계(S15)를 포함할 수 있다.
상가 이미지 촬영 및 위치 정보 수신 단계(S11)는 제 1 사용자 단말기(10)가 상가의 이미지를 촬영하고, 제 1 사용자 단말기(10)의 현재 위치 정보를 자료수집부(110)에 전달하는 단계이다. 여기서, 제 1 사용자 단말기(10)는 앞서 언급한 것과 같이 통상의 PC, 스마트폰, 태블릿 등일 수 있다.
또한, 제 1 사용자 단말기(10)의 다른 예로써, 라이다가 장착된 주행 로봇 등이 활용되는 것도 가능하다. 주행 로봇의 경우, 사람의 유무와 무관하게 이동이 가능하며, 특히 사람이 없는 새벽 시간대에 건물 내 상가를 이동하도록 하여 상가 이미지를 취득하는 것도 가능하다.
또한, 제 1 사용자 단말기(10)는 광각 카메라를 활용할 수도 있다. 알려진 바와 같이, 광각 카메라는 근접해서 촬영하는 것이 가능하고, 상가 내부 전체 이미지를 촬영할 수 있기 때문에, 활용성이 높다.
제 1 사용자 단말기(10)는 이러한 방법으로 이미지를 촬영하고, 위치 정보와 함께 자료 수집부(100)에 전송할 수 있다.
텍스트 추출 및 선별 단계(S12)는 텍스트 추출부(120)에서 이미지로부터 텍스트를 추출하고, 연관단어를 추출하는 단계이다. 촬영된 이미지에는 상호명, 전시되어 있는 물품, 광고문구 등이 포함될 수 있다. 텍스트 추출부(120)는 영상에 포함된 텍스트를 추출한다. 예를 들면, 도 3에 도시된 바와 같이, 텍스트 추출부(120)는 촬영된 이미지로부터 "펌프", "노즐", "공조기기", "전기온수기" 등의 텍스트(T)를 추출할 수 있다. 이때, 추출된 텍스트는 단어 형태일 수도 있고 문장 형태일 수도 있다. 그리고 텍스트 추출부(120)는 형태소 분석을 통해 명사만을 추출한다.
연관 단어 검색 및 저장 단계(S13)에서 지도 정보 제공 장치(100)의 텍스트 추출부(120)는 추출된 명사를 이용하여 연관 단어 검색을 수행할 수 있다. 지도 정보 제공 장치(100)는 다양한 연령대의 사용자들에 의해 사용된다. 다양한 연령대의 사용자는 연령과 관심분야에 따라 같은 물건을 검색하더라도 각각 상이한 검색어를 입력할 수 있다. 따라서, 텍스트 추출부(120)는 사용자로부터 입력되는 검색어에 따라 매칭되는 지도 정보를 제공할 수 있도록 추출된 텍스트에 연관되는 단어 검색을 수행한다. 여기서 연관 단어는 전문용어, 업계 관용어, 비표준어 중에서 적어도 하나를 포함한다. 또한, 학습부(140)는 연관 단어들을 머신러닝을 통해 학습할 수 있으며, 이에 따라 연관 단어들을 점차 확장할 수 있다.
또한, 텍스트 추출부(120)는 추출된 텍스트와 연관 단어를 데이터베이스(130)에 전달하고, 데이터베이스(130)는 텍스트와 연관 단어를 저장한다. 또한, 데이터베이스(130)는 상가의 이미지와 함께, 위치, 추출된 텍스트 및 연관 단어를 함께 저장하여, 나중에 제 2 사용자 단말기(20)가 검색하기 용이하게 분류할 수 있다.
지도 매칭 단계(S14)에서 지도추출부(150)는 데이터베이스(130)로부터 지도 정보를 불러오고, 현재 제 1 사용자 단말기(10)의 위치 정보에 따라 상가의 위치를 지정하여 매핑할 수 있다. 또한, 매핑에서 상가의 상호, 주소는 물론이고, 상가의 이미지와 앞서 이미지로부터 추출한 텍스트와 연관 단어를 함께 저장할 수 있다.
한편, 도 3b에 도시된 것과 같이, 지도에 표시하는 때, SLAM(Simultaneous localization and mapping) 방법을 사용할 수 있다. 지도 추출부(150)는 (1) 먼저 라이다를 이용해 먼저 포인트 클라우드를 만들고, (2) 높이 축을 몇개의 층으로 슬라이스하며, (3) 슬라이스 한 층 한 층을 평균내서 2D를 생성한 후, (4) 마지막으로 도면을 생성할 수 있다. 여기서, 포인트 클라우드는 RGB 포인트 클라우드일 수 있고, 깊이 정보와 색 정보가 동시에 들어가 있으며 해상도가 낮은 사진과 유사한 형태를 띄는 특징을 갖는다.
또한, 지도 추출부(150)는 이렇게 만들어진 부분적인 도면을 국토지리정보원 등에서 나누어 주는 수치 지도와 몇 개의 포인트를 지정 하여 겹친 뒤 정답을 먼저 만들고 그것을 조각별로 잘라 외곽선이 일치하도록 이미지를 일치 시키는 것을 학습 시킬 수 있다. 이 과정에서 건물의 일부인 불법 증축물과 임시적인 가판대 또는 자동차 등을 구분 할 수 있게 되며 국토지리정보원의 지도에선　단순히 속이 빈 네모난 건물로 표시된 부분에도 대략적인 건물 내부의 모습을 겹쳐 놓을 수 있게 된다. 또한, 학습이 완료되면 라이다를 통해 포인트 클라우드 형태로 된 3D 그림에서 대략적인 지도를 얻어낼 수 있고 실제 GIS 데이타와 연동함으로써, 지도 정보를 획득하는 것이 가능하다.
사용자 보정 단계(S15)는 제 1 사용자 단말기(10)를 통해 사용자가 지도 정보를 보정하는 단계이다. 예를 들어, 제 1 사용자 단말기(10)는 현재의 위치를 지도에서 이동하여 다시 설정할 수 있고, 텍스트나 연관 단어 중에서 원하는 용어를 수정하거나, 상가의 이미지를 다른 이미지로 대체하는 것도 가능할 수 있다. 또한, 제 1 사용자 단말기(10)가 앞서 언급한 보행 로봇의 이미지를 사용한 경우, 이미지의 촬영 위치와 이미지를 확인해서 상기 지도에 대해 매핑을 진행하고, 보정하는 것도 가능하다.
도 4는 본 발명의 실시예에 따른 지도 정보 제공 방법 중 상가 지도 검색 단계를 도시한 순서도이다. 도 5는 본 발명의 실시예에 따른 지도 정보 제공 시스템에서 상가 검색 결과의 예시 화면을 도시한 것이다.
도 4를 참조하면, 본 발명의 실시예에 따른 지도 정보 제공 방법 중 상가 지도 검색 단계는 상가 검색 단계(S16), 근접한 상기 이미지 표시 단계(S17), 상가 선택 단계(S18), 지도상 위치 표시 단계(S19), 사용자 보정 단계(S20)를 포함할 수 있다.
도 5를 함께 참조하면, 상가 검색 단계(S16)는 제 2 사용자 단말기(20)가 지도 정보 제공 시스템(100)에 접속하여, 표시 화면(21) 상에서 검색창(22)에 원하는 상가를 검색하는 단계이다. 이 때, 제 2 사용자 단말기(20)는 앞서 언급한 것처럼, 상가의 이름을 모르더라도 검색하고자 하는 단어를 통해 검색을 수행할 수 있다. 또한, 제 2 사용자 단말기(20)는 정확한 단어가 아니더라도, 이미 데이터베이스(130)에 저장된 연관 단어를 입력하기만 하면, 원하는 제품과 관련된 상가가 검색될 수 있다.
근접한 상기 이미지 표시 단계(S17)에서, 지도 정보 제공 시스템(100)은 제 2 사용자 단말기(20)에 대해, 검색 결과인 상가의 정보를 제공할 수 있다. 이 때, 제 2 사용자 단말기(20)의 현재 위치를 기준으로, 인접한 상가들이 지도에 표시될 수 있다. 구체적으로, 상가의 정보는 검색 화면(21)에서 상가의 이미지(23), 추출된 단어 및 연관 단어(24), 지도 상에서의 위치(25)를 함께 표시할 수 있다.
상가 선택 단계(S18)는 제 2 사용자 단말기(20)가 표시된 여러 상가 중에서, 원하는 상가를 선택하는 단계이다. 이 때, 제 2 사용자 단말기(20)는 상가의 위치와 추출된 텍스트 및 연관 단어를 통해, 자신이 원하는 제품이 있는 상가를 선택할 수 있게 된다.
지도상 위치 표시 단계(S19)는 현재 제 2 사용자 단말기(20)의 위치로부터 선택된 상가까지의 경로를 지도상에서 표시하는 단계이다. 제 2 사용자 단말기(20)의 경로를 따라 사용자는 실제 상가에 가장 편리한 경로로 도달할 수 있다.
사용자 보정 단계(S20)는 제 2 사용자 단말기(20)가 검색된 상가의 정보를 보정하는 단계이다. 예를 들어, 실제 상가의 이미지가 변경되었거나, 폐업을 했거나, 새로운 텍스트를 추가할 필요가 있는 경우 등에서, 제 2 사용자 단말기(20)는 상가의 정보를 보정할 수 있다. 따라서, 지도 정보 제공 시스템(100)의 상가 정보는 사용자들의 참여에 의해 업데이트될 수 있다.
이상에서 설명한 것은 본 발명에 의한 지도 정보 제공 시스템 및 방법을 실시하기 위한 하나의 실시예에 불과한 것으로서, 본 발명은 상기 실시예에 한정되지 않고, 이하의 특허청구범위에서 청구하는 바와 같이 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변경 실시가 가능한 범위까지 본 발명의 기술적 정신이 있다고 할 것이다.
1; 지도 정보 제공 시스템 10; 제 1 사용자 단말기
20; 제 2 사용자 단말기 100; 지도 정보 제공 장치
110; 자료 수집부 120; 텍스트 추출부
130; 데이터베이스 140; 학습부
150; 지도추출부 160; 제어부

Claims (10)

  1. 텍스트 검색을 이용한 지도 정보 제공 장치에 있어서,
    특정 영역에서 상가를 촬영한 이미지와 위치 정보를 수신하는 자료수집부;
    광학적 문자 인식(optical character reader, OCR) 프로그램을 이용하여 상가의 촬영된 이미지로부터 텍스트를 추출하는 텍스트 추출부;
    상기 추출된 텍스트로부터 상호 및 전화번호를 제외한 나머지 텍스트를 머신 러닝을 통해 분류하고, 분류된 텍스트와 관련된 전문용어, 업계 관용어, 비표준어 중에서 적어도 하나를 포함하는 연관 단어를 저장하는 데이터베이스;
    상기 분류된 텍스트 및 연관 단어를 머신 러닝하여 상기 촬영된 이미지와 매칭하도록 학습시키는 학습부; 및
    상기 수집된 위치정보를 이용하여 지도 정보를 추출하는 지도추출부를 포함하고,
    사용자 단말기가 검색한 단어를 토대로, 상기 데이터베이스는 연관 단어를 검색하고, 사용자 단말기의 현재 위치를 기준으로 인접하고 연관 단어가 포함된 상가를 표시하는 지도 정보 제공 장치.
  2. 제 1 항에 있어서,
    상기 텍스트 추출부는 상가의 촬영된 이미지로부터 상호 및 전화번호와 나머지 텍스트를 분류하고,
    상기 데이터 베이스는 상기 상호 및 전화번호를 상기 분류된 텍스트 및 연관 단어와 함께 저장하는 지도 정보 제공 장치.
  3. 제 1 항에 있어서,
    상기 사용자 단말기는 상가의 정보를 입력 또는 검색할 수 있고, 상기 데이터 베이스에 접속하여, 상가의 이미지, 추출된 텍스트 또는 연관 단어를 보정하는 지도 정보 제공 장치.
  4. 제 1 항에 있어서,
    상기 지도 추출부는 라이다를 이용해 포인트 클라우드를 만들고, 높이 축을 몇개의 층으로 슬라이스한 뒤, 슬라이스 각 층을 평균내어 2D로 생성하고, 도면을 생성하며, 수치 지도와 비교하여 지도 정보를 획득하는 지도 정보 제공 장치.
  5. 제 1 항에 있어서,
    상기 학습부는 상기 연관 단어들을 머신러닝을 통해 학습하여 확장하는 지도 정보 제공 장치.
  6. 텍스트 검색을 이용한 지도 정보 제공 방법에 있어서,
    자료수집부가 사용자 단말기로부터 특정 영역에서 상가를 촬영한 이미지와 위치 정보를 수신하는 단계;
    텍스트 추출부가 광학적 문자 인식(optical character reader, OCR) 프로그램을 이용하여 상가의 촬영된 이미지로부터 텍스트를 추출하는 단계;
    데이터 베이스가 상기 추출된 텍스트로부터 상호 및 전화번호를 제외한 나머지 텍스트를 분류하고, 분류된 텍스트와 관련된 전문용어, 업계 관용어, 비표준어 중에서 적어도 하나를 포함하는 연관 단어를 저장하는 단계;
    학습부가 상기 분류된 텍스트 및 연관 단어를 머신 러닝하여 상기 촬영된 이미지와 매칭하도록 학습시키는 단계;
    지도 추출부가 상기 수집된 위치정보를 이용하여 지도 정보를 추출하는 단계;를 포함하고,
    상기 사용자 단말기가 단어를 검색하면, 상기 데이터베이스는 연관 단어를 검색하고, 사용자 단말기의 현재 위치를 기준으로 인접하고 연관 단어가 포함된 상가를 표시하는 지도 정보 제공 방법.
  7. 제 6 항에 있어서,
    상기 텍스트 추출부는 상가의 촬영된 이미지로부터 상호 및 전화번호와 나머지 텍스트를 분류하고,
    상기 데이터 베이스는 상기 상호 및 전화번호를 상기 분류된 텍스트 및 연관 단어와 함께 저장하는 지도 정보 제공 방법.
  8. 제 6 항에 있어서,
    상기 사용자 단말기는 상가의 정보를 입력 또는 검색할 수 있고, 상기 데이터 베이스에 접속하여, 상가의 이미지, 추출된 텍스트 또는 연관 단어를 보정하는 지도 정보 제공 방법.
  9. 제 6 항에 있어서,
    상기 지도 추출부는 라이다가 장착된 주행 로봇 또는 휴대용 라이다를 통해 상가의 이미지를 제공받고, 상기 주행 로봇의 촬영 위치 및 이미지를 함께 상기 자료 수집부에 제공하는 지도 정보 제공 방법.
  10. 제 6 항에 있어서,
    상기 학습부는 상기 연관 단어들을 머신러닝을 통해 학습하여 확장하는 지도 정보 제공 방법.
KR1020190143180A 2019-11-11 2019-11-11 지도 정보 제공 장치 및 방법 KR102259451B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190143180A KR102259451B1 (ko) 2019-11-11 2019-11-11 지도 정보 제공 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190143180A KR102259451B1 (ko) 2019-11-11 2019-11-11 지도 정보 제공 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20210056560A KR20210056560A (ko) 2021-05-20
KR102259451B1 true KR102259451B1 (ko) 2021-06-01

Family

ID=76142764

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190143180A KR102259451B1 (ko) 2019-11-11 2019-11-11 지도 정보 제공 장치 및 방법

Country Status (1)

Country Link
KR (1) KR102259451B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230106961A (ko) * 2022-01-07 2023-07-14 충남대학교산학협력단 지도 업데이트를 위한 정보 제공 플랫폼

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102015388B1 (ko) * 2019-01-21 2019-08-28 주식회사 지공간솔루션 무인항공기와 지상용 3d라이다스캐너를 활용한 정사영상 3차원 포인트클라우드 db 구축기반 가상현실 공간 맵 제공시스템 및 제공방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140137254A (ko) * 2013-05-22 2014-12-02 서울시립대학교 산학협력단 문자 인식을 이용한 위치 정보 제공 단말, 서버, 시스템 및 방법
KR102362117B1 (ko) * 2014-07-01 2022-02-11 삼성전자주식회사 지도 정보를 제공하기 위한 전자 장치
KR101823464B1 (ko) * 2016-05-24 2018-03-14 네이버 주식회사 지역 사진 및 거리뷰의 간판 이미지를 활용한 지역 정보 검출 및 보정 방법 및 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102015388B1 (ko) * 2019-01-21 2019-08-28 주식회사 지공간솔루션 무인항공기와 지상용 3d라이다스캐너를 활용한 정사영상 3차원 포인트클라우드 db 구축기반 가상현실 공간 맵 제공시스템 및 제공방법

Also Published As

Publication number Publication date
KR20210056560A (ko) 2021-05-20

Similar Documents

Publication Publication Date Title
US11782959B2 (en) Systems and methods for utilizing property features from images
EP3637303B1 (en) Methods for generating a base of training images, for training a cnn and for detecting a poi change in a pair of inputted poi images using said cnn
US9881231B2 (en) Using extracted image text
US7953295B2 (en) Enhancing text in images
US20120330646A1 (en) Method For Enhanced Location Based And Context Sensitive Augmented Reality Translation
US7992181B2 (en) Information presentation system, information presentation terminal and server
CN105517679B (zh) 用户地理位置的确定
US20100309226A1 (en) Method and system for image-based information retrieval
US20080002893A1 (en) Recognizing text in images
WO2008003095A2 (en) Recognizing text in images
JP2011253424A (ja) 画像認識装置及び画像認識方法並びに情報提供システム
US20140309925A1 (en) Visual positioning system
US20180247122A1 (en) Method and system of providing information pertaining to objects within premises
Revaud et al. Did it change? learning to detect point-of-interest changes for proactive map updates
KR102259451B1 (ko) 지도 정보 제공 장치 및 방법
JPWO2007004521A1 (ja) マーカ特定装置及びマーカ特定方法
US10853643B2 (en) Image extraction device, image extraction method, and image extraction program
CN116092100A (zh) 文本内容提取方法及装置
CN110580299A (zh) 生成对象的推荐语的配图的方法、系统、设备及存储介质
CN110569323B (zh) 一种室内导航地标提取方法
KR102271720B1 (ko) 텍스트 검색을 이용한 지도 정보 제공 장치 및 그 방법
KR102358533B1 (ko) 식당 정보 제공 시스템 및 방법
CN112802049B (zh) 一种家庭物品检测数据集构建方法及系统
KR102503797B1 (ko) 스마트폰 카메라를 이용한 cnn과 ar기반의 공간 속성 탐지 방법 및 그 장치
Menzner et al. Which Country Is This? Automatic Country Ranking of Street View Photos

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant