상기 목적을 달성하기 위한 본 발명의 시스템은, 영상기반 경로정보 생성 시스템에 있어서, 영상 획득 장치를 이용하여 획득한 원시영상 데이터로부터 주요 영상을 추출하여 영상 데이터베이스(DB)를 구축하기 위한 영상 데이터베이스 구축장치; 외부의 클라이언트 단말기로부터의 영상기반 경로정보 요청신호에 따라 전자도로지도 데이터베이스로부터 도로 데이터를 탐색하여 벡터 형태의 경로정보를 생성하기 위한 경로탐색장치; 상기 경로탐색장치에서 생성한 벡터 경로정보와 상기 벡터 경로정보를 이용하여 상기 영상 데이터베이스로부터 검색한 영상들을 조합하여 벡터 경로정보와 영상이 통합된 형태의 영상기반 경로정보를 생성하기 위한 영상기반 경로정보 생성장치; 및 상기 영상기반 경로정보 생성장치에서 생성한 영상기반 경로정보를 상기 외부의 클라이언트 단말기로 전송하기 위한 전송장치를 포함하는 것을 특징으로 한다.
한편, 상기 다른 목적을 달성하기 위하여 상기 본 발명의 시스템은, 영상-벡터 통합 경로정보 생성기에서 생성한 영상-벡터 통합 경로정보와 주석정보를 통합하여 영상기반 경로정보(영상-벡터 통합 경로정보)를 생성하기 위한 영상 주석 생성기를 더 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 단말기는, 영상기반 경로정보 제공 단말기에 있어서, 외부의 영상기반 경로정보 생성장치로 영상기반 경로정보를 요청하기 위한 영상기반 경로정보 요청수단; 상기 외부의 영상기반 경로정보 생성장치로부터 전달받은 영상기반 경로정보를 해석하기 위한 영상기반 경로정보 해석수단; 전자도로지도를 저장하고 있는 전자도로지도 데이터베이스; 상기 영상기반 경로정보 해석수단으로부터의 벡터 경로정보를 상기 전자도로지도 데이터베이스의 전자도로지도에 표시하여 출력하기 위한 지도 출력 수단; 및 상기 영상기반 경로정보 해석수단으로부터의 영상을 출력하기 위한 영상 출력 수단을 포함하는 것을 특징으로 한다.
한편, 상기 다른 목적을 달성하기 위하여 상기 본 발명의 단말기는, 상기 영상기반 경로정보가 주석정보를 더 포함하도록 하고, 상기 영상 출력 수단이 주석정보가 영상 위에 표시된 형태의 영상을 출력하도록 하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 방법은, 영상기반 경로정보 생성 방법에 있어서, 영상 획득 장치를 이용하여 획득한 원시영상 데이터로부터 주요 영상을 추출하여 영상 데이터베이스(DB)를 구축하는 단계; 외부의 클라이언트 단말기로부터 영상기반 경로정보를 요청받는 단계; 상기 영상기반 경로정보 요청 내용에 따라 전자도로지도 데이터베이스로부터 도로 데이터를 탐색하여 벡터 형태의 경로정보를 생성하는 단계; 상기 생성한 벡터 경로정보를 이용하여 상기 영상 데이터베이스로부터 해당하는 영상을 검색하는 단계; 상기 생성한 벡터 경로정보와 상기 검색한 영상들을 조합하여 벡터 경로정보와 영상이 통합된 형태의 영상기반 경로정보를 생 성하는 단계; 및 상기 생성한 영상기반 경로정보를 상기 외부의 클라이언트 단말기로 전송하는 전송 단계를 포함하는 것을 특징으로 한다.
한편, 상기 다른 목적을 달성하기 위하여 상기 본 발명의 방법은, 상기 생성한 영상기반 경로정보와 주석정보를 통합하여 영상기반 경로정보를 재 생성한 후에 상기 전송 단계로 진행하는 단계를 더 포함하는 것을 특징으로 한다.
상기 목적을 달성하기 위한 본 발명의 다른 방법은, 단말기에서의 영상기반 경로정보 제공 방법에 있어서, 전자도로지도를 저장하고 있는 단계; 외부의 영상기반 경로정보 생성장치로 영상기반 경로정보를 요청하는 단계; 상기 외부의 영상기반 경로정보 생성장치로부터 전달받은 영상기반 경로정보를 해석하는 단계; 상기 영상기반 경로정보 중 벡터 경로정보를 상기 전자도로지도에 표시하여 출력하는 단계; 및 상기 영상기반 경로정보 중 영상을 출력하는 영상 출력 단계를 포함하는 것을 특징으로 한다.
한편, 상기 다른 목적을 달성하기 위하여 상기 본 발명의 다른 방법은, 상기 벡터 경로정보나 영상 중 어느 한 가지 정보가 선택됨에 따라 해당하는 주요지점에 대한 상응하는 다른 정보를 상호 양방향으로 검색하여 출력하는 단계를 더 포함하는 것을 특징으로 한다.
이 때, 본 발명에 따라 생성된 영상기반 경로정보는 기본적인 벡터 경로정보 외에도 경로의 주요 지점, 큰 교차로, 회전해야 할 지점, 주변의 주요 건물 등에 대한 실사 영상을 포함하며, 부가적으로 영상 위에 출력되어 사용자의 이해를 돕는 텍스트 및 그래픽 형태의 주석정보를 더 포함하여, 경로에 대한 요약의 형태로 중 요 지점을 영상으로 보여주어 사용자가 실제 주행 전에도 영상을 보면서 경로에 대한 이해를 할 수 있도록 한다. 예를 들어, "이러한 곳에 가면 우회전을 하고 다음 이러한 곳이 나오면 좌회전을 하면 되는구나"라는 정보를 전자지도상에서 보았을 때보다 쉽고 직관적으로 이해할 수 있게 해준다. 또한 이러한 정보를 제공함으로써, 차량의 경우 외에도 도보로 길을 찾아가는 보행자의 길 안내를 도울 수도 있다.
또한 본 발명에서는 영상기반 경로정보의 이러한 장점에도 불구하고 전자지도상에 표현된 정보도 쓸모 있는 경우가 있으므로, 영상에 나타난 경로정보를 역으로 전자지도상에 나타낼 수 있도록 하는 기능을 제공한다. 예를 들어, 전자지도에 의하여 경로안내를 받을 때 교차로 등 중요지점에 도착하거나 사용자가 전자지도상에서 특정 지점을 선택하였을 경우 해당하는 실사 영상을 주석 등과 함께 출력하고, 반대로 제공되는 실사 영상의 목록 중 하나를 선택할 경우 이 영상에 나타난 교차로, 건물 등에 대하여 미리 계산된 좌표를 참조하여 전자지도상에서 검색한 후에 선택하여 출력한다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실 시 예를 상세히 설명하기로 한다.
도 1은 본 발명의 일실시 예에 따른 영상기반 경로정보 생성 시스템 및 그에 따른 단말기에 대한 구성도이다.
도 1에 도시된 바와 같이, 본 발명에 따른 영상기반 경로정보 생성 시스템은, 비디오 카메라 등과 같은 영상 획득 장치를 이용하여 획득한 원시영상 데이터로부터 교차로, 주요건물 등의 위치에 해당하는 주요 영상을 추출하여 영상 데이터베이스(DB)(14)를 구축하기 위한 영상 데이터베이스(DB) 구축장치(10), 클라이언트 단말기(30)로부터의 영상기반 경로정보 요청신호(예 : 출발점과 도착점을 입력받음)에 따라 전자도로지도 데이터베이스(21)로부터 도로 데이터를 탐색하여 도로상 노드들의 연결 리스트인 벡터 형태의 경로정보를 생성하기 위한 경로탐색장치(20), 상기 경로탐색장치(20)에서 생성한 벡터 경로정보와 상기 벡터 경로정보를 이용하여 상기 영상 데이터베이스(14)로부터 검색한 영상들을 조합하여 벡터 경로정보와 영상이 통합된 형태의 영상기반 경로정보를 생성하기 위한 영상기반 경로정보 생성장치(40), 및 상기 영상기반 경로정보 생성장치(40)에서 생성한 영상기반 경로정보를 상기 클라이언트 단말기(30)로 전송하기 위한 전송장치(도면에 도시되지 않음)를 포함한다.
이 때, 상기 영상 데이터베이스 구축장치(10)는, 비디오 카메라 또는 스틸 카메라 등과 같은 영상 획득 장치를 이용하여 획득한 원시영상 데이터와 각 영상 데이터에 대한 속성값으로 좌표정보를 저장하고 있는 원시영상 데이터베이스(11), 각 관심지점(POI : Point Of Interest)에 대한 좌표정보를 저장하고 있는 관심지점 (POI) 데이터베이스(13), 상기 관심지점(POI) 데이터베이스(13)에 접근하여 주요지점(관심지점)의 좌표정보를 검색한 후에 상기 검색한 각 좌표정보들을 상기 원시영상 데이터베이스(11)의 좌표정보와 비교하여 각 주요지점과 관련된 영상들을 추출한 다음에 특정 지점의 영상을 선택하여 특정 방향정보와 함께 저장하기 위한 영상 데이터베이스 구축기(12), 및 상기 영상 데이터베이스 구축기(12)로부터의 영상을 저장하기 위한 영상 데이터베이스(DB)(14)를 포함한다.
그리고 상기 경로탐색장치(20)는, 전자도로지도를 저장하고 있는 전자도로지도 데이터베이스(21), 및 영상기반 경로정보 생성장치(40)로부터 벡터 형태의 경로정보를 요청받음에 따라 상기 전자도로지도 데이터베이스(21)를 검색하여 벡터 형태의 경로정보를 생성하여 상기 영상기반 경로정보 생성장치(40)로 전달하기 위한 경로탐색기(22)를 포함한다.
그리고 상기 영상기반 경로정보 생성장치(40)는, 클라이언트 단말기(30)로부터 영상기반 경로정보를 요청받음에 따라 상기 경로탐색장치(20)로 요청하여 전달받은 벡터 경로정보와 상기 벡터 경로정보를 이용하여 상기 영상 데이터베이스(DB)(14)로부터 검색한 영상을 통합하여 영상-벡터 통합 경로정보를 생성하기 위한 영상-벡터 통합 경로정보 생성기(41)를 포함한다. 그리고 부가적으로 상기 영상-벡터 통합 경로정보 생성기(41)에서 생성한 영상-벡터 통합 경로정보와 주석정보를 통합하여 영상기반 경로정보(영상-벡터 통합 경로정보)를 생성하기 위한 영상 주석 생성기(42)를 더 포함한다.
한편, 상기 클라이언트 단말기(30)는, 상기 영상기반 경로정보 생성장치(40) 로 영상기반 경로정보를 요청하기 위한 사용자 입력장치(31), 상기 영상기반 경로정보 생성장치(40)로부터 전달받은 영상기반 경로정보를 해석하기 위한 영상기반 경로정보 해석기(33), 전자도로지도를 저장하고 있는 전자도로지도 데이터베이스(33), 상기 영상기반 경로정보 해석기(33)로부터의 벡터 경로정보를 상기 전자도로지도 데이터베이스(33)의 전자도로지도에 표시하여 출력하기 위한 지도 출력부(34), 상기 영상기반 경로정보 해석기(33)로부터의 영상을 출력하기 위한 영상 출력부(35)를 포함한다. 이 때, 부가적으로 주석정보가 영상 위에 표시된 형태의 영상을 출력할 수도 있다. 그리고 상기 클라이언트 단말기(30)는 상기와 같이 영상기반 경로정보를 지도 출력부(34)와 영상 출력부(35)를 통하여 각각 출력하고, 사용자에 의해 어느 한 가지 정보(예 : 벡터 경로정보)가 선택됨에 따라 해당하는 주요지점에 대한 상응하는 다른 정보(예 : 영상)를 상호 양방향으로 검색하여 출력한다.
상기 각 구성요소에 대한 상세 동작 및 좀 더 구체적인 실시 예는 도 2a 내지 도 5를 참조하여 상세히 설명하기로 한다.
도 2a는 본 발명의 일실시 예에 따른 영상기반 경로정보 생성 방법 중 영상 데이터베이스(DB) 구축 과정에 대한 흐름도이다.
먼저, 영상 데이터베이스 구축장치(10)의 원시영상 데이터베이스(11)는 비디오 카메라 또는 스틸 카메라 등과 같은 영상 획득 장치를 이용하여 획득한 원시영상 데이터를 저장하고 있다. 이 때, 원시영상은 각 영상 또는 프레임에 대한 카메라의 위치정보가 포함되고, 도로를 벗어나는 부정확한 위치정보가 도로상의 위치로 보정되어 있는 영상이다.
이후, 영상 데이터베이스(DB) 구축장치(10)의 영상 데이터베이스(DB) 구축기(12)가 관심지점(POI : Point Of Interest) 데이터베이스(13)에 접근하여 주요지점(관심지점)으로 등록되어 있는 정보를 검색하여(101) 해당 지점의 좌표정보를 상기 원시영상 데이터베이스(11)의 각 영상에 속성값으로 저장되어 있는 좌표정보와 비교·검색하여(102) 해당 주요지점에 대한 영상이 존재하는지를 판단한다(103).
상기 판단 결과(103), 해당 주요 지점에 대한 영상이 없는 경우에는 "101" 과정으로 진행하여 다음 순서의 주요지점에 대하여 반복 수행하고, 해당 주요지점에 대한 영상이 있는 경우에는 해당 주요지점과 관련된 주요영상을 추출하여 영상 데이터베이스(DB)(14)로 구축한다(105).
이 때, "105" 과정 이전에 다음과 같은 이유로 전자도로지도 데이터베이스(21)를 검색한다(104). 교차로의 모습이 실제적으로 촬영된 영상을 보기 위해서는 교차로의 좌표와 정확히 같은 위치에 해당하는(같은 위치에서 촬영한) 영상을 선택하는 것이 아니라, 교차로에서 약간 떨어져 있는 위치에서 촬영한 영상을 선택하여야 한다. 따라서 미리 정의된 거리(예를 들어, 교차로 진입 20m 전)에서 촬영한 영상을 선택한다. 이 과정을 위해서는 교차로가 사거리인 경우 네 곳에서 촬영한 영상을 선택하게 되며, 이를 위하여 경로탐색장치(20)의 전자도로지도 데이터베이스(21)를 검색하여 좌표정보를 비교하는 과정을 수행한다. 네 개의 영상은 각각 어느 방향에서 진입하면서 보이는 영상인지의 정보와 함께 저장되어 관리되며, 도 3과 같은 구조로 저장된다.
도 3에 도시된 바와 같이, 상기 영상 데이터베이스(14)는 각 주요지점에 대한 영상 정보(영상 파일 자체 또는 파일명), 주요지점의 좌표(교차로의 위치), 영상 촬영 위치를 나타내는 좌표(촬영 카메라의 위치), 및 주요지점에 대한 도로상의 진입 방향에 대한 주석정보를 저장하기 위한 구조를 가지고 있다.
도 2b는 본 발명의 일실시 예에 따른 영상기반 경로정보 생성 방법과 그에 따른 단말기에서의 영상기반 경로정보 제공 방법에 대한 흐름도이다.
전술한 바와 같이, 상기 영상 데이터베이스 구축 장치(10)에 의하여 영상 데이터베이스(DB)(14)가 구축되어 있는 상태에서, 사용자가 클라이언트 단말기(30)의 사용자 입력장치(31)를 통하여 영상기반 경로정보를 요청하면, 예를 들어 출발점과 도착점을 입력하여 영상정보가 포함된 경로정보를 요청하면(201) 영상기반 경로정보 요청신호는 영상기반 경로정보 생성장치(40)의 영상-벡터 통합 경로정보 생성기(41)로 전달되고, 상기 영상-벡터 통합 경로정보 생성기(41)는 경로탐색장치(20)에 벡터 형태의 경로정보를 요청하고, 경로탐색장치(20)의 경로탐색기(22)는 전자도로지도 데이터베이스(21)를 검색하여 벡터 형태의 경로정보를 생성한다(202). 상기 생성된 벡터 경로정보는 영상기반 경로정보 생성장치(40)의 영상-벡터 통합 경로정보 생성기(41)로 전달된다.
다음으로 상기 과정에서 생성된 벡터 경로정보가 영상과 통합되는 과정을 살펴보면, 영상-벡터 통합 경로정보 생성기(41)가 상기 전달받은 벡터 경로정보를 구성하는 각 노드들의 좌표정보를 이용하여 영상 데이터베이스(DB)(14)의 좌표정보를 검색한다(203). 이 때, 벡터 경로정보의 좌표와 영상 데이터베이스(DB)의 좌표정보 간에는 약간의 오차가 있을 수 있으므로 오차를 검사하여(204) 오차가 없으면 바로 "206" 과정으로 진행하고, 미리 정의된 오차범위 내에 있는 경우 좌표를 보정하여(205) 영상을 검색한다(206).
이 때, 모든 노드들에 대하여 항상 영상 데이터베이스(DB)(14)에 영상이 존재하는 것은 아니며, 상기 "105" 과정에 의하여 주요 교차로 또는 주요지점으로 정의되어 영상 데이터베이스(DB)(14)에 저장된 곳에 대하여만 영상을 사용할 수 있으므로, 각 지점에 대하여 영상 데이터베이스(DB)에 영상이 존재하는지를 확인하여(206) 존재하지 않으면 다음 지점에 대하여 "203" 과정부터 반복 수행하고, 영상이 존재하면 이후의 과정으로 진행한다.
이렇게 검색되어 선택된 다수의 영상에 대하여 벡터 경로정보의 각 주요 교차로를 나타내는 데이터에 해당하는 영상에 대한 정보를 생성하여(207) 영상과 벡터 경로정보를 통합하여 영상-벡터 통합 경로정보를 생성한다(210). 한편, 사용자가 주석정보와 영상을 통합하여 단일 영상을 요구한 경우(208) 부가적으로 영상 주석 생성기(42)가 상기 영상-벡터 통합 경로정보의 내용 중 필요한 사항을 텍스트와 그래픽으로 각 영상 위에 출력하는 방식으로 상기 영상-벡터 통합 경로정보와 주석정보를 통합하여(209) 한 지점당 하나의 영상기반 경로정보를 생성한다(210). 이 때, 상기 영상 주석 생성기(42)는 주석정보의 내용을 영상 위에 직접 출력하여 영상 위에 텍스트 및 그래픽이 추가된 형태로 상기 정보의 내용을 포함하는 영상을 생성한다.
여기서, 상기 생성된 영상기반 경로정보는 도 4와 같은 구조를 가지며(영상- 벡터 통합 경로정보는 도 4에서 주석정보가 없는 구조), 각 주요 교차로의 좌표 및 영상에 대한 정보를 가진다. 상기 영상에 대한 정보는 영상 위에 추가될 주석(예를 들어 교차로 명칭), 영상에 나타난 주요 건물 명칭 및 표시될 화면좌표, 경로를 진행하기 위하여 영상에서 회전할 방향, 및 방면 명칭 등을 포함한다.
이를 정리하여 살펴보면, 상기 생성된 영상기반 경로정보는 벡터 경로정보, 경로를 구성하는 주요지점에 대한 영상정보, 주요지점 영상에 대한 메타정보, 영상 위에 추가된 텍스트 또는 그래픽 형태의 주석의 유형, 주석 내용, 및 주석이 표시될 영상좌표를 포함한다. 이러한 영상기반 경로정보(벡터-영상 통합 경로정보)의 예는 도 5에 도시된 바와 같다.
이후, 상기 생성된 영상기반 경로정보(영상 파일 자체를 포함), 또는 영상이 별도로 존재하는 경우 영상기반 경로정보와 다수의 영상 파일이 전송장치에 의하여 클라이언트 단말기(30)의 영상기반 경로정보 해석기(32)로 전달된다(211). 이 때, 클라이언트 단말기(30)는 전자도로지도 데이터베이스(33)를 가지고 있다.
따라서 클라이언트 단말기(30)는 상기 전송받은 영상기반 경로정보(영상-벡터 통합 경로정보) 중 벡터 경로정보 부분을 해당하는 전자도로지도와 함께 지도 출력부(34)를 통하여 출력하고, 상기 지도 출력부(34)를 통하여 출력된 벡터 경로정보 중 사용자가 특정 지점을 선택하면 또는 주행 중 안내인 경우 특정 지점에 도착하면(정의된 거리-예를 들어 100m 전-에 접근하면) 영상기반 경로정보(영상-벡터 통합 경로정보)에 포함되어 있는 해당 영상 파일 이름에 의하여 영상 파일을 열어서 영상 출력부(35)로 출력한다(212). 이 경우는 영상기반 경로정보와 영상 파일을 별도로 전송받은 경우이고, 영상기반 경로정보에 영상 파일 자체가 포함되어 전송받은 경우에는 영상 파일 이름을 통하지 않고 바로 해당하는 영상을 열어서 출력한다. 또한 사용자가 영상 출력부(35)에 출력된 영상을 선택할 경우 해당 위치를 지도 출력부(34)에 출력된 전자도로지도 상에 나타낸다.
이처럼, 상기 클라이언트 단말기(30)는 영상기반 경로정보를 지도 출력부(34)와 영상 출력부(35)를 통하여 각각 출력하고, 사용자에 의해 어느 한 가지 정보(예 : 벡터 경로정보)가 선택됨에 따라 해당하는 주요지점에 대한 상응하는 다른 정보(예 : 영상)를 상호 양방향으로 검색하여 출력한다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다.