KR100489890B1 - 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법 - Google Patents

스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법 Download PDF

Info

Publication number
KR100489890B1
KR100489890B1 KR10-2002-0073048A KR20020073048A KR100489890B1 KR 100489890 B1 KR100489890 B1 KR 100489890B1 KR 20020073048 A KR20020073048 A KR 20020073048A KR 100489890 B1 KR100489890 B1 KR 100489890B1
Authority
KR
South Korea
Prior art keywords
stereo video
information
video
mpeg
metadata
Prior art date
Application number
KR10-2002-0073048A
Other languages
English (en)
Other versions
KR20040045050A (ko
Inventor
최경호
유재준
황태현
주인학
이종훈
김민수
박종현
이승용
김성백
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR10-2002-0073048A priority Critical patent/KR100489890B1/ko
Priority to CNB021542635A priority patent/CN1290063C/zh
Publication of KR20040045050A publication Critical patent/KR20040045050A/ko
Application granted granted Critical
Publication of KR100489890B1 publication Critical patent/KR100489890B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05—Geographic models
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42—Determining position
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
    • G08G1/0969—Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02—Services making use of location information
    • H04W4/023—Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds

Abstract

1. 청구범위에 기재된 발명이 속하는 기술분야
본 발명은 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치 및 그 방법과 상기 방법을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체에 관한 것임.
2. 발명이 해결하고자 하는 기술적 과제
본 발명은, 사용자의 단말기에서 관심지역이 선택되면, 선택된 지역의 스테레오 비디오를 검색하여 보다 현실감있는 삼차원 영상으로 재생될 수 있도록 제공하며, 재생된 삼차원 영상에서 지리객체가 선택되면, 선택된 지리객체를 인식하여 해당 지리객체의 상세정보를 제공하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치 및 그 방법과 상기 방법을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공하는데 그 목적이 있음.
3. 발명의 해결 방법의 요지
본 발명은, 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치에 있어서, 수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 그 카메라의 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하기 위한 데이터 취득수단; 상기 데이터 취득수단에서 취득된 데이터를 이용하여 MPEG-7 메타데이터를 생성하기 위한 MPEG-7 메타데이터 생성수단; 상기 데이터 취득수단에서 취득된 스테레오 비디오와 상기 MPEG-7 메타데이터 생성수단에서 생성된 MPEG-7 메타데이터의 저장 및 관리를 위한 스테레오 비디오 및 MPEG-7 메타데이터 저장수단; 및 단말기로부터의 특정지역에 대한 스테레오 비디오 요청에 따라 상기 스테레오 비디오 및 MPEG-7 메타데이터 저장수단에 저장된 스테레오 비디오를 검색하여 제공하기 위한 스테레오 비디오 검색 및 제공수단을 포함함.
4. 발명의 중요한 용도
본 발명은 지리정보 시스템 또는 위치기반 서비스(LBS : Location-Based Service) 등에 이용됨.

Description

스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치 및 그 방법 {Apparatus and Method to Provide Stereo Video or/and Detailed Information of Geographic Objects}
본 발명은 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치 및 그 방법과 상기 방법을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체에 관한 것으로, 보다 상세하게는 사용자의 단말기에서 관심지역이 선택되면, 선택된 지역의 스테레오 비디오를 검색하여 보다 현실감있는 삼차원 영상으로 재생될 수 있도록 제공하며, 재생된 삼차원 영상에서 지리객체가 선택되면, 선택된 지리객체를 인식하여 해당 지리객체의 상세정보를 제공하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치 및 그 방법과 상기 방법을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체에 관한 것이다.
현재 단말기의 보편화와 제3 세대 무선통신기술의 도래로 인해 단말기를 이용한 위치기반 서비스(LBS : Location-Based Service) 응용시스템이 다양화되고 있으며, 그 중에서 GPS(Global Positioning System)를 이용한 지리정보 시스템은 가장 유용한 시스템들 중의 하나이다. 이러한 지리정보 시스템에서는 현재의 위치 혹은 특정 위치와 관련된 정적인 비디오 정보 또는 단순한 동적인 비디오 정보를 제공하고 있다. 즉, 비디오 상의 지리객체의 이름 등 단순한 정보를 제공하고 있다. 또한, 이들 시스템에서의 비디오 정보의 제공 방법은 수치지도의 객체에 대한 비디오 파일의 단순 연결, 즉 하나의 지리객체에 하나의 비디오 정보를 연결하는 방식을 취하고 있다.
그러나, 이러한 종래 방식에서는 현재의 위치 혹은 특정 위치와 관련된 정적인 비디오 정보 또는 단순한 동적인 비디오 정보를 제공하므로 현실감있는 삼차원 영상의 제공이 이루어지지 않는 문제점이 있으며, 또한 수치지도 상에서 연결하고자 하는 지리객체의 수가 증가함에 따라 취득해야 하는 비디오 파일의 수도 같이 증가하는 문제점이 있다.
또한, 상기와 같은 종래 방식은 단순히 해당 지리객체의 비디오 정보와 단순한 지리객체의 정보만을 제공하므로, 해당 지역에 있는 건물이나 지리객체들의 형태를 알 수는 있지만, 비디오 상에 나타난 지리객체에 대한 상세정보를 알 수 없는, 즉 그 건물이나 지리객체들 중에 사용자가 원하는 용도의 지리객체가 있는지 등의 상세정보를 알 수 없는 문제점이 있다.
본 발명은, 상기 문제점을 해결하기 위하여 제안된 것으로, 도로별로 스테레오 비디오를 취득하여 취득된 비디오 파일을 효율적으로 관리하고, 스테레오 비디오를 검색하여 보다 실감나는 삼차원 영상으로 재생될 수 있도록 제공하는 스테레오 비디오 제공 장치 및 그 방법과 상기 방법을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공하는데 그 목적이 있다.
또한, 본 발명은, 도로별로 스테레오 비디오를 취득하여 취득된 비디오 파일을 효율적으로 관리하고, 스테레오 비디오를 검색하여 보다 실감나는 삼차원 영상으로 재생될 수 있도록 제공하며, 상기 재생된 삼차원 영상에 나타난 지리객체가 선택되면 선택된 지리객체의 상세한 정보를 제공하는 장치 및 그 방법과 상기 방법을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공하는데 다른 목적이 있다.
상기의 목적을 달성하기 위한 본 발명의 장치는, 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치에 있어서, 수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 그 카메라의 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하기 위한 데이터 취득수단; 상기 데이터 취득수단에서 취득된 데이터를 이용하여 MPEG-7 메타데이터를 생성하기 위한 MPEG-7 메타데이터 생성수단; 상기 데이터 취득수단에서 취득된 스테레오 비디오와 상기 MPEG-7 메타데이터 생성수단에서 생성된 MPEG-7 메타데이터의 저장 및 관리를 위한 스테레오 비디오 및 MPEG-7 메타데이터 저장수단; 및 단말기로부터의 특정지역에 대한 스테레오 비디오 요청에 따라 상기 스테레오 비디오 및 MPEG-7 메타데이터 저장수단에 저장된 스테레오 비디오를 검색하여 제공하기 위한 스테레오 비디오 검색 및 제공수단을 포함하는 것을 특징으로 한다.
한편, 본 발명의 방법은, 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치에 적용되는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법에 있어서, 수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 카메라 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하는 제 1 단계; 상기 취득된 스테레오 비디오 및 카메라 내·외부 표정, GPS(Global Positioning System)정보, 및 INS(Information Network System)정보를 이용하여 MPEG-7 메타데이터를 생성하는 제 2 단계; 상기 취득된 스테레오 비디오 및 상기 생성된 MPEG-7 메타데이터를 도로의 이름별로 저장하는 제 3 단계; 및 스테레오 비디오 요청에 따라, 상기 저장된 스테레오 비디오를 검색하여 제공하는 제 4 단계를 포함하는 것을 특징으로 한다.
한편, 본 발명은, 프로세서를 구비한 스테레오 비디오 또는/및 지리객체의 상세정보 제공장치에, 수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 카메라 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하는 제 1 기능; 상기 취득된 스테레오 비디오 및 카메라 내·외부 표정, GPS(Global Positioning System)정보, 및 INS(Information Network System)정보를 이용하여 MPEG-7 메타데이터를 생성하는 제 2 기능; 상기 취득된 스테레오 비디오 및 상기 생성된 MPEG-7 메타데이터를 도로의 이름별로 저장하는 제 3 기능; 및 스테레오 비디오 요청에 따라, 상기 저장된 스테레오 비디오를 검색하여 제공하는 제 4 기능을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공한다.
상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을통하여 보다 분명해 질 것이다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명한다.
도 1 은 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 장치의 일실시예 구성도이다.
도 1 에 도시된 바와 같이, 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 장치는, 두 대의 카메라를 이용하여 그 카메라의 내·외부 표정, 그리고 스테레오 비디오 및 이와 동기화하여 GPS정보, INS정보를 취득하기 위한 데이터 취득부(110), 상기 데이터 취득부(110)에서 취득된 데이터를 이용하여 MPEG-7 메타데이터를 생성하기 위한 MPEG-7 메타데이터 생성부(120), 상기 데이터 취득부(110)에서 취득된 스테레오 비디오와 상기 MPEG-7 메타데이터 생성부(120)에서 생성된 MPEG-7 메타데이터의 저장 및 관리를 위한 스테레오 비디오 및 MPEG-7 메타데이터 저장부(130), 사용자 단말기(160)로부터의 관심지역에 대한 스테레오 비디오 요청에 따라 상기 스테레오 비디오 및 MPEG-7 메타데이터 저장부(130)에 저장된 스테레오 비디오 및 MPEG-7 메타데이터를 검색하여 통신망을 통하여 사용자 단말기(160)로 제공하기 위한 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)를 포함한다. 또한, 상기 스테레오 비디오 및/또는 지리객체의 상세정보 제공 장치는, 지리객체의 상세정보를 저장하고 있다가 상기 사용자 단말기(160)로부터의 지리객체에 대한 상세정보 요청에 따라 해당하는 지리객체의 상세정보를 검색하여 통신망을 통하여 상기 사용자 단말기(160)로 제공하는 지리정보 저장 및 검색부를 더 포함한다.
다음으로, 상기 각 구성요소의 구체적인 실시예를 좀 더 상세히 살펴보면 다음과 같다.
상기 데이터 취득부(110)에서는 GPS 및 INS, 그리고 카메라 두 대를 장착한 이동차량을 이용하여 지리정보 제공을 위한 데이터를 취득한다. 그리고, MPEG-7 메타데이터 생성부(120)에서는 도로 이름별로 취득된 비디오 정보를 MPEG-7 메타데이터로 생성한다. 상기 생성된 메타데이터는 GPS 및 INS 정보, 카메라의 위치 및 내·외부 표정요소를 일정 프레임 간격(예를 들어 1초 간격)으로 갖는다. 부가적으로, MPEG-7 메타데이터 생성부(120)는 비디오 획득시의 조건 즉, 촬영날짜, 시간, 날씨, 장소 등의 정보를 메타데이터로 생성하며, 취득된 도로에서의 특정 사건에 대한 정보를 요약하는 기능도 갖는다. 예를 들어, 선택된 도로상에서의 삼거리, 사거리, 혹은 육교 근처를 포함하는 프레임만을 요약하거나, 사고 상황이 있는 경우에 사고 발생지역만을 포함하는 비디오로 요약하는 등의 기능을 갖는다.
도 6 에 스테레오 비디오의 취득과 관리 과정에 대한 일실시예가 나타나있다. 도 6 에서 도시된 바와 같이, 각각의 카메라에 대해 비디오 정보가 취득된 후 MPEG-7 메타데이터로 변환되어 '도로 이름_왼쪽(또는 오른쪽) 카메라.mpg7'형태의 화일로 저장된다(도로 1_카메라 1.mpg7, 도로 1_카메라 2.mpg7).
상기 생성된 스테레오 비디오 및 MPEG-7 메타데이터는 스테레오 비디오 및 MPEG-7 메타데이터 저장부(130)에 저장된다. 이러한 스테레오 비디오 및 MPEG-7 메타데이터는 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)에 의해 검색되어 통신망을 통하여 단말기(160)에 제공되고, 또한 현재와 과거 비디오 정보를 비교하여 변화 탐지 기능을 제공하기 위한 비디오 자료로도 사용된다.
상기 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)는 단말기(160)의 현재 위치 또는 단말기(160)에서 선택된 지점에 대한 비디오 정보를 스테레오 비디오 및 MPEG-7 메타데이터 저장부(130)에서 검색하여 단말기(160)에 제공한다.
한편, 상기 지리정보 저장 및 검색부(150)는, 사용자가 단말기(160)에서 재생되는 삼차원 영상에서 상세한 정보를 알고자하는 지리객체를 선택하면, 선택된 지리객체에 대한 상세정보를 검색하여 이를 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)에 제공하며, 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)는 상기 제공된 지리객체의 상세정보를 통신망을 통하여 단말기(160)에 제공한다. 물론, 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)를 거치지 않고 바로 통신망을 통하여 단말기(160)로 제공할 수도 있다.
도 2 는 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 방법 중 스테레오 비디오 취득 및 관리 과정에 대한 일실시예 흐름도이다.
우선, 수치지도로부터 도로의 이름별로 스테레오 비디오를 취득할 지역을 구분한 후(210), 수치지도에서 스테레오 비디오를 취득할 도로를 선택한다(220). 다음으로, 스테레오 비디오를 취득할 도로가 선택되면 선택된 도로에 대해 이동차량을 이용하여 스테레오 비디오 및 GPS/INS 정보, 그리고 카메라의 내/외부 표정을 취득하여 기록한 후(230), 이를 이용하여 MPEG-7 메타데이터 생성한다(240). 이 때, 취득된 비디오 파일 이름에는 해당 길 이름이 자동으로 할당된다. 도 6 은 본 발명에 따른 스테레오 비디오의 취득과 관리 과정에 대한 일예시도이다. 도 6 에 도시된 바와 같이, 수치지도상에서 비디오 취득을 위한 도로를 선택한 후, 선택한 도로상에서 이동차량을 이용하여 두 대의 카메라로 왼쪽·오른쪽 비디오를 취득하여 각각 '도로 이름_왼쪽(또는 오른쪽) 카메라.mpg'라는 화일 형태로 저장된다(도로 1_카메라 1.mpg, 도로 1_카메라 2.mpg). 이는 길 이름을 이용하여 비디오 파일을 관리함으로써, 누구나 쉽게 스테레오 비디오 파일이 포함하는 지역에 대한 정보를 알 수 있도록 하기 위함이다.
도 3 은 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 방법 중 선택된 지역의 스테레오 비디오 제공 과정에 대한 일실시예 흐름도이다.
우선, GPS에서 수신한 단말기(160)의 현재의 위치, 혹은 수치지도상에서 사용자에 의해 선택된 특정 위치의 스테레오 비디오 정보가 요청되면(310), 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)에서는 요청된 위치 정보를 포함하는 비디오 파일의 이름을 검색하여 스테레오 비디오 파일을 확인한다(320). 다음으로, 해당 지점을 포함하는 도로의 방향을 결정하여 스테레오 비디오 파일의 시작 프레임과 마지막 프레임의 정보를 찾아내야 한다. 이는 각 비디오 파일이 포함하는 도로 전체의 비디오를 요구하는 경우가 아니고, 선택된 지점을 시작으로 해서 해당 도로의 비디오를 요구하는 경우를 위해서 필요한 프레임의 정보를 찾아 제공하기 위함이다.
이 때, 도로의 방향을 결정하는 방법은 다음과 같다.
우선, 도로의 시작 좌표(X1,Y1)와 마지막 좌표(Xn,Yn)를 MPEG-7 메타데이터에서 읽고, 절대거리((X1-Xn)의 절대값과 (Y1-Yn)의 절대값)를 비교한다. 비교한 결과, (X1-Xn)의 절대값이 크면 수평 방향, (Y1-Yn)의 절대값이 크면 수직 방향으로 정한다(330).
다음으로, 시작 프레임의 정보는, 해당 MPEG-7 메타데이터에서 카메라의 위치(X,Y) 좌표를 1초 단위로 읽어온 후에, 도로의 방향이 수평이면 수평방향 좌표(X좌표)를 단말기(160)로부터 넘겨받은 좌표와 비교해서 시작 프레임의 위치를 찾으며, 도로의 방향이 수직이면 수직 방향 좌표(Y좌표)를 단말기(160)로부터 넘겨받은 좌표와 비교해서 찾게 된다(340, 350). 이 때, 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)에서는 검색된 스테레오 비디오의 MPEG-7 메타데이터에 기록된 사용자의 프로파일 즉, 사용자의 단말기 성능, 사용자가 사용 가능한 대역폭과 요구된 비디오의 사건 정보 등을 확인한 후(360), 필요한 경우 스테레오 비디오 정보를 재작성하여, 즉 단말기의 크기에 맞도록 스테레오 비디오의 크기를 재조정하고, 사용 가능한 대역폭이 작은 경우에는 프레임율(frame rate)을 줄이는 등의 과정을 거친 후 스테레오 비디오를 제공한다(370). 제공된 스테레오 비디오는 삼차원 영상의 디스플레이 기능을 갖는 단말기(160)에 의해서 삼차원 영상으로 디스플레이된다(380).
도 4 는 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 방법 중 지리객체의 상세정보 제공 과정에 대한 일실시예 흐름도이다.
전술한 바와 같이, 사용자에 의해 요구된 스테레오 비디오는 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)로부터 제공되고, 이 때, 사용자는 디스플레이되는 삼차원 영상의 지리객체에 대한 상세정보를 요청할 수 있다. 이 경우 사용자는 삼차원 영상의 지리객체를 마우스 등의 수단을 이용하여 선택할 수 있다. 이 때, 단말기(160)로부터 현재 디스플레이되고 있는 비디오의 이름 및 프레임 번호(n) 그리고 선택된 위치의 스크린 좌표가 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)로 전달된다(401). 한편, 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)에서는 입력된 스크린 좌표를 기준으로 선택된 지형지물의 특징점(feature point)을 자동으로 추적한다. 특징점을 추적하는 이유는 스테레오 정합 후에 구한 삼차원 좌표의 정확도를 높이기 위함이다.
상기 특징점을 추적(tracking)하는 과정은 다음과 같다.
우선, 현재 디스플레이되고 있는 비디오에서 선택된 위치의 스크린 좌표가 그 비디오 프레임(n)에서의 특징점으로 결정된다(402). 다음으로, 스테레오 비디오 및 MPEG-7 메타데이터 검색부(140)에서는 입력된 스크린 좌표, 즉 특징점을 중심으로 탐색창(mask)(8x8)을 설정하고(도 7 참조)(403), 탐색창의 화소들과 가장 유사도가 높은 점의 위치를 다음 프레임(n+1)에서 찾는다. 여기서, 유사도라 함은 여러가지가 있을 수 있으나, 본 발명의 실시예에서는 탐색창의 화소들의 칼라값의 평균값에 가까운 정도를 말한다. 다음 프레임(n+1)에서 특징점을 찾는 방법은, 이전 프레임(n)의 탐색창의 현재위치를 중심으로 16x16의 영역을 탐색 영역(search area)으로 설정한 후(도 7 참조)(404), 그 탐색영역 내에서 이전 프레임(n)의 탐색창 내의 화소들과 유사도가 가장 높은 점을 결정한다(405). 탐색 영역 내에서 결정된 점에서의 유사도가 특정값(threshold)보다 큰 경우는 특징점이 영상내에 존재함을 의미하므로, 그 점을 특징점으로 결정한 후 그 다음 프레임(n+2)에서 특징점의 추출을 반복한다(407). 그러나, 유사도가 특정값보다 작은 경우는 특징점이 영상 내에 존재하지 않는 것을 의미하므로, 특징점의 추적을 종료한다(406).
상기 특징점의 추적이 끝난 후에는 해당하는 스테레오 비디오를 로딩하고 특징점의 삼차원 좌표를 스테레오 정합을 통해서 계산한다(408). 차량이 앞으로 이동하며 비디오를 취득하였다고 가정할 때, 특징점의 추적이 종료된 후에는 지리객체와 카메라의 거리가 가장 가까운 거리에 있게 되며, 카메라와 선택한 지리객체의 거리가 가까울수록 계산된 삼차원 좌표의 오차는 줄어들게 된다.
스테레오 정합에 의해서 지리객체의 삼차원 정보를 얻으면, 지리객체의 상세정보 저장부에서 스테레오 정합에 의해 계산된 삼차원 좌표를 포함하는 지리객체를 찾고(409), 그 지리객체의 상세정보를 검색하여 단말기(160)에 제공한다(410).
도 5 는 본 발명에 따른 지리객체의 상세정보 저장부에서 지리객체의 위치를 설명하는 설명도이다. 건물의 삼차원 좌표는 건물을 구성하는 바닥의 모서리점 좌표((X1, Y1), …, (Xn, Yn))와 각 모서리의 높이(H1, H2, …, Hn)로 이루어진다. 선택된 특징점의 좌표(Xi, Yi, Hi)가 건물의 좌표 내에 있거나 일정한 거리(Threshold) 내에 있으면, 선택된 특징점을 해당 객체상의 한 점으로 인정한다. 지리객체의 상세정보는 수치지도를 통해서 생성할 수도 있고, 취득된 스테레오 비디오를 이용하여 생성할 수도 있다. 스테레오 비디오를 이용한 지리객체의 상세정보 입력은 스테레오 비디오에서 두 점을 선택함으로써, 지리객체의 삼차원 정보를 생성하고, 해당 지리객체에 대한 상세정보를 함께 저장함으로써 가능하다. 지리객체의 상세정보를 제공받음으로써 사용자는 해당 지역의 삼차원 영상과 더불어 해당 지역 지리객체의 이름과 용도 등의 상세정보를 얻을 수 있으며 이를 통해 지리정보 제공의 극대화를 이룰 수 있다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니고, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러가지 치환, 변형 및 변경이 가능하다는 것이 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 명백할 것이다.
상기와 같은 본 발명은, 취득한 비디오 정보를 MPEG-7 메타데이터에 의해서 저장, 관리함으로 인해서 LBS 응용 시스템 등에서 요구되는 특정지역의 비디오는 물론 스테레오 비디오 정보를 제공할 수 있으며, 서로 다른 시점에서 취득한 두 비디오, 예를 들어 1년 전에 취득한 비디오와 한달 전에 취득한 비디오를 비교하여 지리정보의 변화를 손쉽게 탐지할 수 있는 효과가 있다.
또한, 본 발명은, 특정지역의 비디오 중에서 관심이 있는 사건이나 대상물을 선택적으로 재생할 수 있게 해 주는 효과가 있다. 예를 들어, 특정 도로상의 비디오를 디스플레이하면서, 삼거리나 사거리 지역을 위주로 해서 비디오 정보를 볼 수 있고, 혹은 도로상에서 육교나 횡단보도가 있는 부분의 비디오를 요약해서 볼 수도 있다.
또한, 본 발명은, 스테레오 정합을 이용하여 비디오상의 지리객체에 대한 상세정보를 지리객체의 상세정보 저장부에서 읽어 제공함으로써, 초행길인 사람에게 방문하고자 하는 지역이나 관심지역의 개략적인 비디오 정보만을 제공하는 것이 아니라, 각 지리객체의 용도 및 명칭 등의 상세정보도 제공할 수 있는 효과가 있다.
도 1 은 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 장치의 일실시예 구성도.
도 2 는 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 방법 중 스테레오 비디오 취득 및 관리 과정에 대한 일실시예 흐름도.
도 3 은 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 방법 중 선택된 지역의 스테레오 비디오 제공 과정에 대한 일실시예 흐름도.
도 4 는 본 발명에 따른 스테레오 비디오 및/또는 지리객체의 상세정보 제공 방법 중 지리객체의 상세정보 제공 과정에 대한 일실시예 흐름도.
도 5 는 본 발명에 따른 지리객체의 상세정보 저장부에서 지리객체의 위치를 설명하는 설명도.
도 6 은 본 발명에 따른 스테레오 비디오의 취득과 관리 과정에 대한 일예시도.
도 7 은 본 발명에 따른 특징점 추적을 위한 탐색창 및 탐색 영역 설정 과정에 대한 일예시도.
* 도면의 주요 부분에 대한 부호의 설명
110 : 데이터 취득부
120 : MPEG-7 메타데이터 생성부
130 : 스테레오 비디오 및 MPEG-7 메타데이터 저장부
140 : 스테레오 비디오 및 MPEG-7 메타데이터 검색부
150 : 지리정보 저장 및 검색부

Claims (11)

  1. 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치에 있어서,
    수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 그 카메라의 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하기 위한 데이터 취득수단;
    상기 데이터 취득수단에서 취득된 데이터를 이용하여 MPEG-7 메타데이터를 생성하기 위한 MPEG-7 메타데이터 생성수단;
    상기 데이터 취득수단에서 취득된 스테레오 비디오와 상기 MPEG-7 메타데이터 생성수단에서 생성된 MPEG-7 메타데이터의 저장 및 관리를 위한 스테레오 비디오 및 MPEG-7 메타데이터 저장수단; 및
    단말기로부터의 특정지역에 대한 스테레오 비디오 요청에 따라 상기 스테레오 비디오 및 MPEG-7 메타데이터 저장수단에 저장된 스테레오 비디오를 검색하여 제공하기 위한 스테레오 비디오 검색 및 제공수단
    을 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치.
  2. 제 1 항에 있어서,
    지리객체의 상세정보를 저장하고 있다가, 상기 단말기로부터의 지리객체의 상세정보 요청에 따라 해당하는 지리객체의 상세정보를 검색하여 제공하기 위한 지리정보 저장 및 검색수단
    을 더 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 MPEG-7 메타데이터 생성수단은,
    비디오 중에서 특정 대상물들을 요약하거나, 특정 사건을 요약·편집하는 기능을 갖는 것을 특징으로 하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치.
  4. 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치에 적용되는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법에 있어서,
    수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 카메라 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하는 제 1 단계;
    상기 취득된 스테레오 비디오 및 카메라 내·외부 표정, GPS(Global Positioning System)정보, 및 INS(Information Network System)정보를 이용하여 MPEG-7 메타데이터를 생성하는 제 2 단계;
    상기 취득된 스테레오 비디오 및 상기 생성된 MPEG-7 메타데이터를 도로의 이름별로 저장하는 제 3 단계; 및
    스테레오 비디오 요청에 따라 상기 저장된 스테레오 비디오를 검색하여 제공하는 제 4 단계
    를 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  5. 제 4 항에 있어서,
    상기 제공된 스테레오 비디오에 포함된 지리객체에 대한 상세정보 요청에 따라 해당하는 지리객체의 상세정보를 검색하여 제공하는 제 5 단계
    를 더 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  6. 제 5 항에 있어서,
    상기 제 5 단계는,
    상기 제공된 스테레오 비디오에 포함된 지리객체 중 사용자에 의해 선택된 지리객체의 특징점을 프레임별로 결정하는 제 6 단계;
    상기 프레임별로 결정된 지리객체의 특징점과 상기 카메라와의 거리가 가장 근접한 비디오 프레임을 결정하여 그 프레임에 해당하는 스테레오 비디오를 로딩하는 제 7 단계;
    상기 로딩된 스테레오 비디오를 이용하여 스테레오 정합을 한 후 특징점의 삼차원 좌표를 결정하는 제 8 단계; 및
    상기 결정된 특징점의 삼차원 좌표를 포함하는 지리객체를 검색하여 제공하는 제 9 단계
    를 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  7. 제 6 항에 있어서,
    상기 제 6 단계는,
    선택된 비디오의 이름 및 프레임 번호, 그리고 선택된 위치의 스크린 좌표를 전달받는 제 10 단계;
    상기 전달받은 스크린 좌표를 그 프레임의 특징점으로 결정하는 제 11 단계;
    상기 결정된 특징점을 중심으로 탐색창(mask)을 설정하여 탐색창 내의 화소에 대한 칼라값의 평균값을 계산하는 제 12 단계;
    상기 특징점이 결정된 프레임의 다음 프레임에서 탐색창의 현재위치를 중심으로 탐색영역(search area)을 설정하는 제 13 단계;
    상기 설정된 탐색영역 내에서 상기 계산된 탐색창의 화소들의 칼라값의 평균값과 유사도가 가장 높은 점을 결정하는 제 14 단계; 및
    상기 제 14 단계에서 결정된 점에서의 유사도가 임계치(threshold)보다 큰 경우 그 점을 그 프레임에서의 특징점으로 결정하고 상기 제 12 단계로 진행하고, 상기 제 14 단계에서 결정된 점에서의 유사도가 임계치(threshold)보다 작은 경우 상기 제 7 단계로 진행하는 제 15 단계
    를 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  8. 제 4 항 내지 제 7 항 중 어느 한 항에 있어서,
    상기 제 4 단계는,
    GPS에서 수신한 단말기의 현재의 위치나 수치지도상에서 선택된 위치의 스테레오 비디오 정보를 요청받는 제 16 단계;
    상기 요청받은 비디오 화일을 확인하는 제 17 단계;
    상기 확인된 비디오 화일을 포함하는 도로의 방향을 결정하는 제 18 단계;
    상기 결정된 도로의 방향성분의 좌표를 선택된 위치의 좌표와 비교하여 시작 프레임 및 마지막 프레임을 결정하는 19 단계; 및
    상기 결정된 시작 프레임에 따라 스테레오 비디오를 제공하는 20 단계
    를 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  9. 제 8 항에 있어서,
    사용자의 프로파일, 단말기 성능, 사용 가능한 대역을 확인하여 스테레오 비디오를 재작성하는 제 21 단계
    를 더 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  10. 제 9 항에 있어서,
    제 18단계는,
    MPEG-7 메타데이터에서 카메라의 위치(X,Y) 좌표를 일정 시간간격으로 읽어오는 제 22 단계; 및
    상기 읽어 온 좌표 중 시작 좌표와 마지막 좌표 간의 수직 거리(Y)와 수평 거리(X)의 절대 거리를 비교하여 큰 쪽을 도로의 방향으로 결정하는 제 23 단계
    를 포함하는 스테레오 비디오 또는/및 지리객체의 상세정보 제공 방법.
  11. 프로세서를 구비한 스테레오 비디오 또는/및 지리객체의 상세정보 제공장치에,
    수치지도상에서 비디오 취득을 위한 지역을 도로의 이름별로 구분한 후, 각각의 도로의 이름별로 다수의 카메라를 이용하여 카메라 내·외부 표정, 스테레오 비디오, 및 상기 스테레오 비디오와 동기화하여 GPS(Global Positioning System)정보, INS(Information Network System)정보를 취득하는 제 1 기능;
    상기 취득된 스테레오 비디오 및 카메라 내·외부 표정, GPS(Global Positioning System)정보, 및 INS(Information Network System)정보를 이용하여 MPEG-7 메타데이터를 생성하는 제 2 기능;
    상기 취득된 스테레오 비디오 및 상기 생성된 MPEG-7 메타데이터를 도로의 이름별로 저장하는 제 3 기능; 및
    스테레오 비디오 요청에 따라 상기 저장된 스테레오 비디오를 검색하여 제공하는 제 4 기능
    을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR10-2002-0073048A 2002-11-22 2002-11-22 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법 KR100489890B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR10-2002-0073048A KR100489890B1 (ko) 2002-11-22 2002-11-22 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법
CNB021542635A CN1290063C (zh) 2002-11-22 2002-12-31 提供地理目标立体图像和/或详细信息的装置及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2002-0073048A KR100489890B1 (ko) 2002-11-22 2002-11-22 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법

Publications (2)

Publication Number Publication Date
KR20040045050A KR20040045050A (ko) 2004-06-01
KR100489890B1 true KR100489890B1 (ko) 2005-05-17

Family

ID=34270533

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2002-0073048A KR100489890B1 (ko) 2002-11-22 2002-11-22 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법

Country Status (2)

Country Link
KR (1) KR100489890B1 (ko)
CN (1) CN1290063C (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100735564B1 (ko) 2005-12-02 2007-07-04 삼성전자주식회사 정보 매핑 장치, 시스템, 및 방법
WO2014092226A1 (ko) * 2012-12-10 2014-06-19 전자부품연구원 가상세계를 표현하는 자동차 센서 및 그를 포함하는 자동차와, 자동차 시스템

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100657826B1 (ko) * 2004-12-01 2006-12-14 한국전자통신연구원 위치정보 보정을 위한 휴대 단말기 및 지리정보 제공장치와 그 방법
CN101138015B (zh) * 2005-03-02 2011-06-15 株式会社纳维泰 地图显示装置及地图显示方法
CN101146216B (zh) * 2006-09-14 2010-05-12 黄柏霞 基于画面分割的视频定位及参数计算方法
US8872940B2 (en) * 2008-03-03 2014-10-28 Videoiq, Inc. Content aware storage of video data
KR100901331B1 (ko) * 2008-06-27 2009-06-09 주식회사 비츠로시스 교통 정보 시스템
KR101667416B1 (ko) * 2008-07-16 2016-10-19 한국전자통신연구원 실감 효과 표현 방법 및 그 장치 및 실감 기기 성능 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체
CN102109355B (zh) * 2009-12-25 2013-01-09 神达电脑股份有限公司 根据行程目的选择性地显示兴趣点的方法及装置
CN102591867B (zh) * 2011-01-07 2015-05-27 清华大学 一种基于移动设备位置的搜索服务方法
CN102999513B (zh) * 2011-09-14 2016-03-16 腾讯科技（深圳）有限公司 基于地理位置服务搜索的信息展示方法和装置
KR101783982B1 (ko) * 2012-01-31 2017-10-11 한화테크윈 주식회사 차량용 감시 카메라를 이용한 통합 관제 시스템 및 그 방법
EP2825847A4 (en) * 2012-03-16 2015-12-09 Qoros Automotive Co Ltd MOBILE SYSTEM AND LOCATION MARKING METHOD
CN106969774A (zh) * 2013-04-28 2017-07-21 腾讯科技（深圳）有限公司 导航方法与装置、终端、服务器及系统
US9734399B2 (en) * 2014-04-08 2017-08-15 The Boeing Company Context-aware object detection in aerial photographs/videos using travel path metadata
CN105208372A (zh) * 2015-10-15 2015-12-30 浙江卓锐科技股份有限公司 具有交互可量测功能及真实感的3d景观生成系统及方法
CN105635616B (zh) * 2016-01-27 2018-10-02 中测新图(北京)遥感技术有限责任公司 一种视频数据和地理位置信息的融合方法和装置
KR102490520B1 (ko) 2020-04-29 2023-01-25 주식회사 모빌테크 Gps정보 및 라이다 신호를 기초로 형성되는 컬러 맵 생성 장치 및 그 제어방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100735564B1 (ko) 2005-12-02 2007-07-04 삼성전자주식회사 정보 매핑 장치, 시스템, 및 방법
US8121353B2 (en) 2005-12-02 2012-02-21 Samsung Electronics Co., Ltd. Apparatus, system and method for mapping information
WO2014092226A1 (ko) * 2012-12-10 2014-06-19 전자부품연구원 가상세계를 표현하는 자동차 센서 및 그를 포함하는 자동차와, 자동차 시스템
KR101456054B1 (ko) * 2012-12-10 2014-10-31 전자부품연구원 가상세계를 표현하는 자동차 센서 및 그를 포함하는 자동차와, 자동차 시스템

Also Published As

Publication number Publication date
CN1290063C (zh) 2006-12-13
CN1503200A (zh) 2004-06-09
KR20040045050A (ko) 2004-06-01

Similar Documents

Publication Publication Date Title
KR100489890B1 (ko) 스테레오 비디오 또는/및 지리객체의 상세정보 제공 장치및 그방법
US10473465B2 (en) System and method for creating, storing and utilizing images of a geographical location
US7272501B2 (en) System and method for automatically collecting images of objects at geographic locations and displaying same in online directories
US7110592B2 (en) Image recording apparatus, image reproducing apparatus and methods therefor
US7991234B2 (en) Apparatus and method for image-classifying, and recording medium storing computer-readable program for the same
US8447787B2 (en) System and method for geocoding content
US10191635B1 (en) System and method of generating a view for a point of interest
KR100735564B1 (ko) 정보 매핑 장치, 시스템, 및 방법
CN108139227B (zh) 用于视频图示、选择和同步的基于位置的服务工具
US11315340B2 (en) Methods and systems for detecting and analyzing a region of interest from multiple points of view
SG192884A1 (en) Apparatus, system, and method for annotation of media files with sensor data
KR20100054057A (ko) 이미지 데이터를 제공하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
KR20160087284A (ko) 영상 처리 장치, 영상 처리 장치가 수행하는 영상 저장 방법 및 영상 검색 방법
Zhang et al. Dynamic multi-video summarization of sensor-rich videos in geo-space
WO2019127320A1 (zh) 信息处理方法、装置、云处理设备及计算机程序产品
JPH1013720A (ja) 情報提示装置
Si et al. Timeline collaging as an extension of map collaging using geo-referencing and time-referencing
KR20180075222A (ko) 전자 장치 및 그 동작 방법
CN115951782A (zh) 一种表现大空间ar体验稳定性的视觉交互方法
Ay Leveraging georeferenced meta-data for the management of large video collections

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130424

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20140430

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20150427

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20160427

Year of fee payment: 12

LAPS Lapse due to unpaid annual fee