KR20060067033A - Apparatus and method for updating navigation information using scene analisys - Google Patents

Apparatus and method for updating navigation information using scene analisys Download PDF

Info

Publication number
KR20060067033A
KR20060067033A KR1020040105796A KR20040105796A KR20060067033A KR 20060067033 A KR20060067033 A KR 20060067033A KR 1020040105796 A KR1020040105796 A KR 1020040105796A KR 20040105796 A KR20040105796 A KR 20040105796A KR 20060067033 A KR20060067033 A KR 20060067033A
Authority
KR
South Korea
Prior art keywords
information
navigation
navigation information
stereo image
updating
Prior art date
Application number
KR1020040105796A
Other languages
Korean (ko)
Inventor
이승용
황태현
김성백
최경호
이종훈
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020040105796A priority Critical patent/KR20060067033A/en
Priority to CNA2005100881414A priority patent/CN1790319A/en
Publication of KR20060067033A publication Critical patent/KR20060067033A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Navigation (AREA)
  • Instructional Devices (AREA)

Abstract

1. 청구범위에 기재된 발명이 속한 기술분야1. TECHNICAL FIELD OF THE INVENTION

본 발명은, 영상인식을 이용한 항법정보 갱신 장치 및 그 방법에 관한 것임.The present invention relates to an apparatus and method for updating navigation information using image recognition.

2. 발명이 해결하려고 하는 기술적 과제2. The technical problem to be solved by the invention

본 발명은, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득한 후 영상인식을 통해 상기 스테레오 영상에서 추출한 항법정보 및 그에 상응하는 위치정보와 자세정보를 이용하여 항법정보 데이터베이스를 갱신함으로써, 신속하고 효율적으로 기존의 항법정보를 갱신하기 위한, 영상인식을 이용한 항법정보 데이터베이스 갱신 장치 및 그 방법을 제공하는데 그 목적이 있음.According to the present invention, after obtaining a stereo image and corresponding position information and attitude information, the navigation information database is updated by using navigation information extracted from the stereo image through image recognition, and corresponding position information and attitude information. The purpose of the present invention is to provide an apparatus and method for updating a navigation information database using image recognition for updating existing navigation information efficiently and efficiently.

3. 발명의 해결방법의 요지3. Summary of Solution to Invention

본 발명은, 영상인식을 이용한 항법정보 갱신 장치에 있어서, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하기 위한 정보 획득수단; 상기 정보 획득수단에서 획득한 스테레오 영상에서 영상인식을 이용하여 항법정보를 추출한 후 상기 추출한 항법정보와 상기 획득한 위치정보와 자세정보를 이용하여 항법정보 데이터베이스를 갱신하기 위한 항법정보 처리수단; 및 상기 갱신된 항법정보를 저장하기 위한 항법정보 데이터베이스를 포함함.According to an aspect of the present invention, there is provided a navigation information updating apparatus using image recognition, comprising: information obtaining means for obtaining a stereo image and corresponding position information and attitude information; Navigation information processing means for extracting navigation information from the stereo image obtained by the information acquisition means by using image recognition and updating the navigation information database by using the extracted navigation information, the acquired position information and attitude information; And a navigation information database for storing the updated navigation information.

4. 발명의 중요한 용도4. Important uses of the invention

본 발명은 항법정보 갱신 장치 등에 이용됨.The present invention is used in the navigation information updating device.

항법 지도정보, 항법 경로정보, 스테레오 영상, 위치정보, 자세정보, 갱신Navigation map information, navigation route information, stereo image, location information, attitude information, update

Description

영상인식을 이용한 항법정보 갱신 장치 및 그 방법{Apparatus and method for updating navigation information using scene analisys} Apparatus and method for updating navigation information using scene analisys}             

도 1 은 본 발명에 따른 영상을 이용한 주행 안내정보 갱신 장치의 일실시예 구성도,1 is a configuration diagram of an embodiment of an apparatus for updating driving guide information using an image according to the present invention;

도 2 는 본 발명에 따른 영상인식을 이용한 항법정보 갱신 방법에 대한 일실시예 흐름도이다.2 is a flowchart illustrating a method for updating navigation information using image recognition according to the present invention.

* 도면의 주요 부분에 대한 부호의 설명* Explanation of symbols for the main parts of the drawings

11 : 정보 획득부 12 : 항법정보 처리부11: information acquisition unit 12: navigation information processing unit

13 : 항법정보 데이터베이스13: navigation information database

본 발명은 영상인식을 이용한 항법정보 데이터베이스 갱신 장치 및 그 방법에 관한 것으로, 더욱 상세하게는 스테레오 영상 및 그에 상응하는 위치정보와 자 세정보를 획득한 후 영상인식을 통해 상기 스테레오 영상에서 추출한 항법정보와 상기 획득한 위치정보 및 자세정보를 이용하여 항법정보 데이터베이스를 갱신하기 위한, 영상인식을 이용한 항법정보 데이터베이스 갱신 장치 및 그 방법에 관한 것이다.The present invention relates to an apparatus and method for updating a navigation information database using image recognition. More particularly, the navigation information extracted from the stereo image through image recognition after acquiring a stereo image and corresponding position information and position information is obtained. And an apparatus and method for updating a navigation information database using image recognition for updating the navigation information database using the acquired position information and attitude information.

본 발명에서 무선통신 단말기는 이동통신 단말기, PCS(Personal Communication Service) 단말기, PDA(Personal Digital Assistant), 스마트폰, 차세대 이동통신(IMT-2000) 단말기, 무선랜 단말기 등과 같이 무선 통신을 통하여 음성, 문자 및 영상 데이터 등을 송/수신할 수 있는 휴대 가능한 무선통신 단말기를 말한다. In the present invention, the wireless communication terminal is a mobile communication terminal, a personal communication service (PCS) terminal, a personal digital assistant (PDA), a smart phone, a next generation mobile communication (IMT-2000) terminal, a wireless LAN terminal and the like through wireless communication, Refers to a portable wireless communication terminal capable of transmitting and receiving text and image data.

또한, 본 발명에서 항법정보는 항법 지도정보, 항법 경로정보 및 POI(Point Of Interest)정보를 포함한다. 이 때, 항법 지도정보는 도로, 도로의 차선, 도로의 중앙선, 주변건물 등을 포함하고, 항법 경로정보는 표지판상의 좌회전, 일방통행, 유턴, 차량의 제한속도 등과 같은 정보를 포함하며, POI정보는 주요시설물(관공서, 대형빌딩, 학교 등) 정보를 포함한다.In addition, the navigation information in the present invention includes navigation map information, navigation route information and point of interest (POI) information. In this case, the navigation map information includes a road, a lane of a road, a center line of a road, a surrounding building, and the like. The navigation route information includes information such as a left turn, a one-way street, a U-turn, a speed limit of a vehicle, and the like, and POI information. Contains information on major facilities (public offices, large buildings, schools, etc.).

일반적으로 주행 안내 서비스(네비게이션) 제공 시스템은 항법 지도정보 데이터베이스와 항법 경로정보 데이터베이스를 이용하여 주행하는 차량에 주행 안내 서비스를 제공한다.In general, a driving guidance service (navigation) providing system provides a driving guidance service to a vehicle driving by using a navigation map information database and a navigation route information database.

현재 항법 지도정보 데이터베이스는 국립지리원에서 제작한 지도를 기본으로 각 서비스 업체에서 편집하여 다양한 서비스 제공을 위해 이용하고 있다.Currently, the navigation map information database is edited by each service company based on the map produced by the National Geographical Institute and used for providing various services.

그런데 국립지리원은 3 ~ 5년 정도의 주기로 항법 지도정보 데이터베이스를 갱신하기 때문에, 항법 지도정보 데이터베이스의 갱신없이는 정확한 서비스를 제공할 수 없다.However, since the National Geographic Institute updates the navigation map information database every three to five years, it cannot provide accurate services without updating the navigation map information database.

따라서, 항법 지도정보 데이터베이스를 이용하여 서비스를 제공하는 업체는 항법 지도정보가 변경될 때마다 변경된 정보를 일일이 수집하여 기존의 항법 지도정보를 갱신해야 하는 불편함이 있었다.Therefore, a company that provides a service using a navigation map information database has a disadvantage in that it is necessary to update the existing navigation map information by collecting the changed information every time the navigation map information is changed.

또한, 항법 지도정보 데이터베이스를 이용하여 서비스를 제공하는 업체는 항법 지도정보가 변경될 때마다 변경된 정보를 일일이 수집하여 기존의 항법 지도정보를 갱신해야 하기 때문에 많은 시간과 비용이 소요되는 불편함이 있었다.In addition, companies that provide services using the navigation map information database need to collect the changed information every time the navigation map information is changed and update the existing navigation map information. .

본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득한 후 영상인식을 통해 상기 스테레오 영상에서 추출한 항법정보와 상기 획득한 위치정보 및 자세정보를 이용하여 항법정보 데이터베이스를 갱신함으로써, 신속하고 효율적으로 항법정보 데이터베이스를 갱신하기 위한, 영상인식을 이용한 항법정보 데이터베이스 갱신 장치 및 그 방법을 제공하는데 그 목적이 있다.The present invention has been proposed in order to solve the above problem, using a navigation information extracted from the stereo image and the acquired position information and attitude information through image recognition after obtaining a stereo image and corresponding position information and attitude information It is an object of the present invention to provide an apparatus and method for updating a navigation information database using image recognition for updating the navigation information database quickly and efficiently by updating the navigation information database.

본 발명의 다른 목적 및 장점들은 하기의 설명에 의해서 이해될 수 있으며, 본 발명의 실시예에 의해 보다 분명하게 알게 될 것이다. 또한, 본 발명의 목적 및 장점들은 특허 청구 범위에 나타낸 수단 및 그 조합에 의해 실현될 수 있음을 쉽게 알 수 있을 것이다.Other objects and advantages of the present invention can be understood by the following description, and will be more clearly understood by the embodiments of the present invention. Also, it will be readily appreciated that the objects and advantages of the present invention may be realized by the means and combinations thereof indicated in the claims.

상기 목적을 달성하기 위한 본 발명의 장치는, 영상인식을 이용한 항법정보 갱신 장치에 있어서, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하기 위한 정보 획득수단; 상기 정보 획득수단에서 획득한 스테레오 영상에서 영상인식을 이용하여 항법정보를 추출한 후 상기 추출한 항법정보와 상기 획득한 위치정보와 자세정보를 이용하여 항법정보 데이터베이스를 갱신하기 위한 항법정보 처리수단; 및 상기 갱신된 항법정보를 저장하기 위한 항법정보 데이터베이스를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a navigation information updating apparatus using image recognition, comprising: information acquiring means for acquiring a stereo image and corresponding position information and attitude information; Navigation information processing means for extracting navigation information from the stereo image obtained by the information acquisition means by using image recognition and updating the navigation information database by using the extracted navigation information, the acquired position information and attitude information; And a navigation information database for storing the updated navigation information.

한편, 본 발명의 방법은, 영상인식을 이용한 항법정보 갱신 방법에 있어서, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하는 정보 획득단계; 상기 획득한 스테레오 영상에서 항법정보를 추출하는 항법정보 추출단계; 상기 추출한 항법정보를 항법정보 데이터베이스에 저장되어 있는 기존의 항법정보와 비교하여 변경된 항법정보를 갱신하는 항법정보 갱신단계; 및 상기 갱신한 항법정보를 저장하는 항법정보 저장단계를 포함하는 것을 특징으로 한다.On the other hand, the method of the present invention, in the navigation information updating method using image recognition, information acquisition step of obtaining a stereo image and corresponding position information and attitude information; A navigation information extraction step of extracting navigation information from the obtained stereo image; A navigation information updating step of comparing the extracted navigation information with existing navigation information stored in a navigation information database to update the changed navigation information; And a navigation information storage step of storing the updated navigation information.

상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실 시예를 상세히 설명하기로 한다.The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings, whereby those skilled in the art may easily implement the technical idea of the present invention. There will be. In addition, in describing the present invention, when it is determined that the detailed description of the known technology related to the present invention may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1 은 본 발명에 따른 영상을 이용한 주행 안내정보 갱신 장치의 일실시예 구성도이다.1 is a block diagram of an embodiment of an apparatus for updating driving guide information using an image according to the present invention.

도 1 에 도시된 바와 같이, 본 발명에 따른 영상을 이용한 주행 안내정보 갱신 장치는, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하기 위한 정보 획득부(11), 상기 정보 획득부(11)를 통해 획득한 스테레오 영상에서 자동 영상 인식/분석 기술을 이용하여 항법정보를 추출한 후 상기 추출한 항법정보와 상기 획득한 위치정보 및 자세정보를 이용하여 항법정보 데이터베이스를 갱신하기 위한 항법정보 처리부(12), 상기 갱신한 항법정보 및 그에 상응하는 위치정보와 자세정보를 관리하기 위한 항법정보 데이터베이스(13)를 포함한다.As illustrated in FIG. 1, the apparatus for updating driving guide information using an image according to the present invention includes an information obtaining unit 11 and an information obtaining unit 11 for obtaining a stereo image and corresponding position information and attitude information. Navigation information processing unit for extracting navigation information from the stereo image obtained by using the automatic image recognition / analysis technology, and then update the navigation information database by using the extracted navigation information, the acquired position information and attitude information (12) ), The navigation information database 13 for managing the updated navigation information and the corresponding position information and attitude information.

본 발명의 일실시예에서 상기 항법정보 및 그에 상응하는 위치정보와 자세정보를 출력하기 위한 출력부(도면에는 도시되어 있지 않음)를 더 포함할 수도 있다.In one embodiment of the present invention may further include an output unit (not shown) for outputting the navigation information and the corresponding position information and attitude information.

한편, 상기 정보 획득부(11)는, GPS(Global Positioning System) 위성으로부터 위치정보를 획득하기 위한 GPS 수신기(111), 스테레오 영상을 수집하기 위한 스테레오 영상 수집기(114), 상기 스테레오 영상 수집기(114)의 자세정보(일예로 방향, 기울기, 흔들림, 회전 등)를 획득하기 위한 자세정보 획득기(112), 터널 등과 같이 상기 GPS 수신기(111)를 통해 위치정보를 수신할 수 없을 경우 최초 시작점으로부터의 이동거리를 측정하여 현재의 위치정보를 획득하기 위한 거리 측정기(113), 상기 GPS 수신기(111), 자세정보 획득기(112) 및 거리 측정기(113)를 동기화시키며, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하도록 상 기 각 구성요소들을 제어하기 위한 제어기(116)를 포함한다.Meanwhile, the information acquisition unit 11 may include a GPS receiver 111 for acquiring position information from a global positioning system (GPS) satellite, a stereo image collector 114 for collecting stereo images, and the stereo image collector 114. If the position information cannot be received through the GPS receiver 111, such as a posture information acquirer 112, a tunnel, etc., to obtain posture information (eg, direction, tilt, shaking, rotation, etc.) Synchronize the distance measurer 113, the GPS receiver 111, the attitude information obtainer 112 and the distance measurer 113 to obtain the current position information by measuring the moving distance of the stereo image and the corresponding It includes a controller 116 for controlling each of the components to obtain position information and attitude information.

여기서, 상기 거리 측정기(DMI : Distance Measurement unIt)(113)는 본 발명의 부가적인 요소이다.Here, the distance measurement unIt (DMI) 113 is an additional element of the present invention.

또한, 상기 스테레오 영상 수집기(114)는 스테레오 영상을 획득하기 위한 두개의 카메라를 포함한다.In addition, the stereo image collector 114 includes two cameras for acquiring stereo images.

또한, 상기 자세정보 획득기(112)는 INS(Inertial Measurement System)를 포함한다. 이 때, 상기 자세정보 획득기(112)가 획득하는 자세정보는 스테레오 영상 수집기(114)의 스테레오 영상 촬영 방향(일예로 동서남북), 기울기, 회전, 흔들림 정보 등을 포함한다.In addition, the attitude information obtainer 112 includes an Inertial Measurement System (INS). In this case, the attitude information obtained by the attitude information obtainer 112 includes a stereo image capturing direction (eg, east, west, north and south), tilt, rotation, and shake information of the stereo image collector 114.

한편, 상기 항법정보 처리부(12)는 정보 획득부(11)에서 획득한 스테레오 영상에서 항법 지도정보를 추출하기 위한 항법 지도정보 추출부(121), 정보 획득부(11)에서 획득한 스테레오 영상에서 항법 경로정보를 추출하기 위한 항법 경로정보 추출부(122) 및 정보 획득부(11)에서 획득한 스테레오 영상에서 주요시설물 정보를 추출하기 위한 POI정보 추출부(123)를 포함한다.Meanwhile, the navigation information processing unit 12 includes a navigation map information extractor 121 for extracting navigation map information from a stereo image obtained by the information acquisition unit 11, and a stereo image obtained by the information acquisition unit 11. The navigation path information extracting unit 122 for extracting the navigation path information and the POI information extracting unit 123 for extracting main facility information from the stereo image acquired by the information obtaining unit 11 are included.

여기서, 항법 지도정보는 도로, 도로의 차선, 도로의 중앙선, 건물 등을 포함하고, 항법 경로정보는 표지판상의 좌회전, 일방통행, 유턴, 차량의 제한속도 등과 같은 정보를 포함하며, POI정보는 주요시설물 정보를 포함한다.Here, the navigation map information includes a road, a lane of a road, a center line of a road, a building, and the like, and the navigation route information includes information such as a left turn on a sign, a one-way street, a U-turn, a speed limit of a vehicle, and the POI information Include facility information.

또한, 상기 항법정보 처리부(12)는 인터넷/통신망을 통해 상기 갱신한 항법정보 및 그에 상응하는 위치정보와 자세정보를 무선통신 단말기로 전송할 수도 있다.In addition, the navigation information processing unit 12 may transmit the updated navigation information, corresponding location information and attitude information to the wireless communication terminal through the Internet / communication network.

또한, 상기 항법정보 처리부(12)는 자동 영상 인식/분석 기술을 이용하여 추출한 항법정보를 기 구축된 항법정보 데이터베이스와 비교하여 변경된 항법정보를 갱신함으로써, 신속하고 효율적으로 항법정보 데이터베이스를 갱신한다.In addition, the navigation information processing unit 12 updates the navigation information database by comparing the navigation information extracted using an automatic image recognition / analysis technique with a previously constructed navigation information database, thereby updating the navigation information database quickly and efficiently.

한편, 상기 항법정보 데이터베이스(13)는 상기 항법 지도정보 추출부(121)에서 추출한 항법 지도정보를 저장하기 위한 항법 지도정보 데이터베이스(131), 상기 항법 경로정보 추출부(122)에서 추출한 항법 경로정보를 저장하기 위한 항법 경로정보 데이터베이스(132) 및 상기 POI정보 추출부(123)에서 추출한 주요시설물 정보를 저장하기 위한 POI정보 데이터베이스(133)를 포함한다.Meanwhile, the navigation information database 13 includes a navigation map information database 131 for storing navigation map information extracted by the navigation map information extractor 121 and a navigation route information extracted by the navigation route information extractor 122. Navigation route information database 132 for storing the POI information database 133 for storing the main facility information extracted by the POI information extraction unit 123.

도 2 는 본 발명에 따른 영상인식을 이용한 항법정보 갱신 방법에 대한 일실시예 흐름도이다.2 is a flowchart illustrating a method for updating navigation information using image recognition according to the present invention.

먼저, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득한다(201). 즉, 스테레오 영상 수집기(114)를 통해 스테레오 영상을 수집하고, 위치정보 수신기(111)를 통해 상기 스테레오 영상을 수집(촬영)한 위치정보를 획득하며, 자세정보 획득기(112)를 통해 상기 스테레오 영상을 수집한 스테레오 영상 수집기(114)의 자세정보를 획득한다.First, a stereo image and corresponding position information and attitude information are obtained (201). That is, the stereo image is collected through the stereo image collector 114, the position information obtained by collecting (shooting) the stereo image is acquired through the position information receiver 111, and the stereo is obtained through the attitude information obtainer 112. The attitude information of the stereo image collector 114 which collected the image is acquired.

이후, 상기 획득한 스테레오 영상에서 항법정보를 추출한다(202). 이 때, 항법정보는 도로, 도로의 차선, 도로의 중앙선, 건물 등을 포함하는 항법 지도정보와 좌회전, 일방통행, 유턴, 차량의 제한속도 등을 나타내는 표지판 등을 포함하는 항법 경로정보 및 POI정보를 포함한다.Thereafter, navigation information is extracted from the obtained stereo image (202). At this time, the navigation information includes navigation map information including roads, lanes of roads, center lines of roads, buildings, and the like, and navigation route information and POI information including signs indicating left turn, one-way traffic, U-turns, and speed limit of vehicles It includes.

이후, 상기 추출한 항법정보와 상기 획득한 위치정보 및 자세정보를 이용하 여 항법정보 데이터베이스(13)를 갱신한다(203). 이 때, 새롭게 획득한 항법정보가 항법정보 데이터베이스(13)에 존재하지 않을 경우는 이를 추가하고, 새롭게 획득한 항법정보에 포함되어 있지 않지만, 항법정보 데이터베이스(13)에 항법정보가 존재할 경우는 항법정보 데이터베이스(13)의 해당 항법정보를 삭제한다.Thereafter, the navigation information database 13 is updated using the extracted navigation information, the acquired position information, and attitude information (203). At this time, if the newly acquired navigation information does not exist in the navigation information database 13, it is added and it is not included in the newly acquired navigation information, but if navigation information exists in the navigation information database 13, navigation is performed. The corresponding navigation information of the information database 13 is deleted.

이후, 상기 갱신한 항법정보를 항법정보 데이터베이스에 저장한다(204).Thereafter, the updated navigation information is stored in the navigation information database (204).

이후, 갱신 정보를 담은 로그파일을 생성할 수도 있다.Thereafter, a log file containing the update information may be generated.

한편, 일예로 스테레오 영상에서 도로의 차선을 추출하는 방법에 대해 살펴보면, 먼저 영상을 전처리 과정을 통해 화질을 개선한 후 도로 중앙선과 주행 차선에 해당하는 직선 선분의 영역을 추출한다.Meanwhile, as an example, a method of extracting a lane of a road from a stereo image is first performed to improve image quality through a preprocessing process, and then to extract an area of straight line segments corresponding to a center line of a road and a driving lane.

그리고, 칼라정보를 이용하여 노란색의 중앙선과 파란색의 버스전용차선, 흰선의 주행차선 등으로 선을 세분하여 분리한다. The color information is further subdivided into yellow center lines, blue bus lanes, white lanes, and the like.

이후, 상기 분리한 선들의 모서리 점 등과 같은 특징점을 추출한 후 에피폴라 라인을 이용하여 스테레오 영상의 동일한 점을 자동으로 선택하여 도로 차선의 3차원 공간 좌표를 획득한다. 이렇게 획득한 도로 차선에 대한 3차원 공간 좌표를 기존 항법 지도정보 데이터베이스에 새로운 도로 차선에 대한 정보로써 추가한다. Thereafter, after extracting feature points such as corner points of the separated lines, the same point of the stereo image is automatically selected using an epipolar line to obtain three-dimensional spatial coordinates of the road lane. The three-dimensional spatial coordinates of the road lanes thus obtained are added to the existing navigation map information database as new road lane information.

또한, 다른 예로 스테레오 영상에서 도로 표지판을 추출하는 방법에 대해 살펴보면, 먼저 영상을 전처리 과정을 통해 화질을 개선한 후 취득된 영상에서 우선적으로 삼각형과 원형의 표지판 영역을 추출한다. As another example, a method of extracting a road sign from a stereo image may first improve image quality through a preprocessing process, and then firstly extract triangle and circular sign regions from the acquired image.

이 때, 파라미터 공간에 정의되는 히스토그램을 이용하여 영상속에 존재하는 도형을 추출하는 무작위 허프 변환(Randomize Hough Transform)을 이용하여 표지판 영역을 추출한다. 여기서, 무작위 허프 변환 방법은 무작위로 선정된 일정수의 점들만을 처리하여 작업 수행시간을 단축할 수 있다.At this time, the sign region is extracted by using a random hough transform that extracts a figure existing in the image using a histogram defined in the parameter space. Here, the random Hough transform method can shorten the execution time by processing only a predetermined number of randomly selected points.

이후, 칼라정보와 영상의 특징점에 대하여 조명 등의 변화가 심하고, 잡음이나 손실 등으로 인해 변형된 입력이 들어와도 이를 안전하게 처리할 수 있는 통계적 방법인 신경망 패턴인식 과정을 통해 표지판의 종류 및 내용을 인식/구분한다.Afterwards, recognition of sign types and contents through the neural network pattern recognition process, which is a statistical method that can handle the color information and the feature points of the image, is a statistical method that can be safely handled even if the input is modified due to noise or loss. / Separate

이후, 상기 표지판의 위치 정보(3차원 공간 좌표)를 추출하여 항법경로 정보 데이터베이스에 기록한다. Then, the location information (three-dimensional space coordinates) of the sign is extracted and recorded in the navigation route information database.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.The present invention described above is capable of various substitutions, modifications, and changes without departing from the technical spirit of the present invention for those skilled in the art to which the present invention pertains. It is not limited by the drawings.

상기와 같은 본 발명은, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득한 후 영상인식을 통해 상기 스테레오 영상에서 추출한 항법정보와 상기 획득한 위치정보 및 자세정보를 이용하여 항법정보 데이터베이스를 갱신함으로써, 신속하고 효율적으로 기존의 항법정보를 실시간으로 자동 갱신할 수 있는 효과가 있다.The present invention as described above, after obtaining a stereo image and corresponding position information and attitude information, and updates the navigation information database by using the navigation information extracted from the stereo image and the acquired position information and attitude information through image recognition By doing so, there is an effect that can automatically and automatically update the existing navigation information in real time.

Claims (7)

영상인식을 이용한 항법정보 갱신 장치에 있어서,In the navigation information updating apparatus using image recognition, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하기 위한 정보 획득수단;Information obtaining means for obtaining a stereo image and corresponding position information and attitude information; 상기 정보 획득수단에서 획득한 스테레오 영상에서 영상인식을 이용하여 항법정보를 추출한 후 상기 추출한 항법정보와 상기 획득한 위치정보와 자세정보를 이용하여 항법정보 데이터베이스를 갱신하기 위한 항법정보 처리수단; 및Navigation information processing means for extracting navigation information from the stereo image obtained by the information acquisition means by using image recognition and updating the navigation information database by using the extracted navigation information, the acquired position information and attitude information; And 상기 갱신된 항법정보를 저장하기 위한 항법정보 데이터베이스Navigation information database for storing the updated navigation information 를 포함하는 영상인식을 이용한 항법정보 갱신 장치.Navigation information updating apparatus using image recognition comprising a. 제 1 항에 있어서,The method of claim 1, 상기 항법정보 처리수단은,The navigation information processing means, 상기 추출한 항법정보를 상기 항법정보 데이터베이스에 저장되어 있는 이전 항법정보와 비교하여 변경된 항법정보만을 갱신함으로써 상기 항법정보 데이터베이스를 실시간으로 갱신하는 것을 특징으로 하는 영상인식을 이용한 항법정보 갱신 장치.And the navigation information database is updated in real time by comparing the extracted navigation information with previous navigation information stored in the navigation information database, thereby updating the navigation information database in real time. 제 1 항 또는 제 2 항에 있어서,The method according to claim 1 or 2, 상기 항법정보는,The navigation information, 항법 지도정보, 항법 경로정보 및 POI정보를 포함하되, Including navigation map information, navigation route information and POI information, 상기 항법 지도정보는 도로, 도로의 차선, 도로의 중앙선, 건물을 포함하고, 상기 항법 경로정보는 좌회전, 일방통행, 유턴, 차량의 제한속도 등을 나타내는 표지판을 포함하며, 상기 POI정보는 주요시설물 정보를 포함하는 것을 특징으로 하는 영상인식을 이용한 항법정보 갱신장치.The navigation map information includes a road, a lane of a road, a center line of a road, a building, and the navigation route information includes a sign indicating a left turn, a one-way street, a U-turn, a speed limit of a vehicle, and the POI information includes major facilities. Navigation information update apparatus using image recognition, characterized in that it comprises information. 제 1 항 또는 제 2 항에 있어서,The method according to claim 1 or 2, 상기 정보 획득수단은,The information obtaining means, 위치정보를 획득하기 위한 위치정보 획득수단;Location information obtaining means for obtaining location information; 스테레오 영상을 수집하기 위한 스테레오 영상 수집수단;Stereo image collecting means for collecting stereo images; 상기 스테레오 영상 수집수단의 자세정보를 획득하기 위한 자세정보 획득수단;Posture information acquiring means for acquiring posture information of the stereo image collecting means; 상기 위치정보 획득수단과 상기 자세정보 획득수단을 동기화시키며, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하도록 상기 각 구성요소들을 제어하기 위한 제어수단Control means for synchronizing the position information acquiring means with the attitude information acquiring means and controlling the respective components to acquire a stereo image and corresponding position information and attitude information; 을 포함하는 영상인식을 이용한 항법정보 갱신 장치.Navigation information updating apparatus using image recognition comprising a. 제 1 항 또는 제 2 항에 있어서,The method according to claim 1 or 2, 상기 항법정보 처리수단은,The navigation information processing means, 상기 정보 획득수단에서 획득한 스테레오 영상에서 항법 지도정보를 추출하기 위한 항법 지도정보 추출수단; Navigation map information extracting means for extracting navigation map information from the stereo image obtained by the information obtaining means; 상기 정보 획득수단에서 획득한 스테레오 영상에서 항법 경로정보를 추출하기 위한 항법 경로정보 추출수단; 및Navigation path information extracting means for extracting navigation path information from the stereo image obtained by the information obtaining means; And 상기 정보 획득수단에서 획득한 스테레오 영상에서 주요시설물 정보를 추출하기 위한 POI정보 추출수단POI information extraction means for extracting main facility information from the stereo image obtained by the information acquisition means 을 포함하는 영상인식을 이용한 항법정보 갱신장치.Navigation information update apparatus using image recognition comprising a. 제 4 항에 있어서,The method of claim 4, wherein 상기 위치정보 획득수단이 위치정보를 획득할 수 없을 경우에 최초 시작점으로부터의 이동거리를 측정하여 현재의 위치정보를 획득하기 위한 보조 위치정보 획득수단Secondary location information acquisition means for acquiring the current location information by measuring the moving distance from the initial starting point when the location information acquisition means cannot obtain the location information. 을 더 포함하는 영상인식을 이용한 항법정보 갱신 장치.Navigation information update apparatus using image recognition further comprising. 영상인식을 이용한 항법정보 갱신 방법에 있어서,In the navigation information updating method using image recognition, 스테레오 영상 및 그에 상응하는 위치정보와 자세정보를 획득하는 정보 획득단계;An information acquiring step of acquiring a stereo image and corresponding position information and attitude information; 상기 획득한 스테레오 영상에서 항법정보를 추출하는 항법정보 추출단계;A navigation information extraction step of extracting navigation information from the obtained stereo image; 상기 추출한 항법정보를 항법정보 데이터베이스에 저장되어 있는 기존의 항법정보와 비교하여 변경된 항법정보를 갱신하는 항법정보 갱신단계; 및A navigation information updating step of comparing the extracted navigation information with existing navigation information stored in a navigation information database to update the changed navigation information; And 상기 갱신한 항법정보를 저장하는 항법정보 저장단계Navigation information storage step of storing the updated navigation information 를 포함하는 영상인식을 이용한 항법정보 갱신 방법.Navigation information update method using image recognition comprising a.
KR1020040105796A 2004-12-14 2004-12-14 Apparatus and method for updating navigation information using scene analisys KR20060067033A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020040105796A KR20060067033A (en) 2004-12-14 2004-12-14 Apparatus and method for updating navigation information using scene analisys
CNA2005100881414A CN1790319A (en) 2004-12-14 2005-07-29 Navigation information updating device and method using image identification

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040105796A KR20060067033A (en) 2004-12-14 2004-12-14 Apparatus and method for updating navigation information using scene analisys

Publications (1)

Publication Number Publication Date
KR20060067033A true KR20060067033A (en) 2006-06-19

Family

ID=36788182

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040105796A KR20060067033A (en) 2004-12-14 2004-12-14 Apparatus and method for updating navigation information using scene analisys

Country Status (2)

Country Link
KR (1) KR20060067033A (en)
CN (1) CN1790319A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100728377B1 (en) * 2006-11-09 2007-06-13 주식회사 유삼씨앤씨 Method for real-time updating gis of changed region vis laser scanning and mobile internet
KR20110053096A (en) * 2009-11-13 2011-05-19 엘지전자 주식회사 Method for registering poi for mobile terminal and apparatus thereof

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8751154B2 (en) * 2008-04-24 2014-06-10 GM Global Technology Operations LLC Enhanced clear path detection in the presence of traffic infrastructure indicator
CN107515006A (en) * 2016-06-15 2017-12-26 华为终端(东莞)有限公司 A kind of map updating method and car-mounted terminal
CN106372577A (en) * 2016-08-23 2017-02-01 北京航空航天大学 Deep learning-based traffic sign automatic identifying and marking method
CN109766498A (en) * 2018-12-26 2019-05-17 斑马网络技术有限公司 Evaluation processing method, device, system and the storage medium of POI
CN110530385A (en) * 2019-08-21 2019-12-03 西安华运天成通讯科技有限公司 City navigation method and its system based on image recognition
CN111076738A (en) * 2019-12-26 2020-04-28 上海擎感智能科技有限公司 Navigation path planning method, planning device, storage medium and electronic equipment

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100728377B1 (en) * 2006-11-09 2007-06-13 주식회사 유삼씨앤씨 Method for real-time updating gis of changed region vis laser scanning and mobile internet
KR20110053096A (en) * 2009-11-13 2011-05-19 엘지전자 주식회사 Method for registering poi for mobile terminal and apparatus thereof

Also Published As

Publication number Publication date
CN1790319A (en) 2006-06-21

Similar Documents

Publication Publication Date Title
KR101147748B1 (en) A mobile telecommunication device having a geographic information providing function and the method thereof
US20210003712A1 (en) Lidar-to-camera transformation during sensor calibration for autonomous vehicles
KR102362714B1 (en) Methods and systems for generating route data
US11815359B2 (en) Method, device and system for processing positioning information
CN102829788A (en) Live action navigation method and live action navigation device
KR20190080009A (en) Automatic drawing method using lane information
CN110998684B (en) Image collection system, image collection method, image collection device, and recording medium
KR100968837B1 (en) Portable camera system provides information about captured objects
KR101413011B1 (en) Augmented Reality System based on Location Coordinates and Augmented Reality Image Providing Method thereof
EP3827222B1 (en) Method and device for navigating two or more users to a meeting location
KR20050013445A (en) Position tracing system and method using digital video process technic
US20230334850A1 (en) Map data co-registration and localization system and method
KR100809524B1 (en) System and method for providing traffic information using navigation apparatus and server based on ubiquitous network
JP2007150681A (en) Location specifying system and location specifying method
JP4004798B2 (en) Distribution device, display device, distribution method, and information distribution / display method
KR20200002219A (en) Indoor navigation apparatus and method
CN1790319A (en) Navigation information updating device and method using image identification
KR100685790B1 (en) System and Method for Real Image based Navigation
US20140300623A1 (en) Navigation system and method for displaying photomap on navigation system
KR100981588B1 (en) A system for generating geographical information of city facilities based on vector transformation which uses magnitude and direction information of feature point
KR100701150B1 (en) Method and Apparatus for supplement of navigation map
JP2015129696A (en) Route guidance system, method, program, and data structure therefor
KR20030084855A (en) Method for implementing Video GIS system of car navigation system having GPS receiver
CN112115219A (en) Position determination method, device, equipment and storage medium
KR100682976B1 (en) System and method for Generation of Image-Based Route Information

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application