KR100833603B1 - Navigation system for providing bird view and method thereof - Google Patents

Navigation system for providing bird view and method thereof Download PDF

Info

Publication number
KR100833603B1
KR100833603B1 KR1020060137455A KR20060137455A KR100833603B1 KR 100833603 B1 KR100833603 B1 KR 100833603B1 KR 1020060137455 A KR1020060137455 A KR 1020060137455A KR 20060137455 A KR20060137455 A KR 20060137455A KR 100833603 B1 KR100833603 B1 KR 100833603B1
Authority
KR
South Korea
Prior art keywords
vehicle
image
camera
camera module
bird
Prior art date
Application number
KR1020060137455A
Other languages
Korean (ko)
Inventor
이동경
Original Assignee
주식회사 엠티오메가
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엠티오메가 filed Critical 주식회사 엠티오메가
Priority to KR1020060137455A priority Critical patent/KR100833603B1/en
Application granted granted Critical
Publication of KR100833603B1 publication Critical patent/KR100833603B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0258Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for navigation systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02Rear-view mirror arrangements
    • B60R1/08Rear-view mirror arrangements involving special optical features, e.g. avoiding blind spots, e.g. convex mirrors; Side-by-side associations of rear-view and other mirrors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/0969Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Navigation (AREA)

Abstract

A car GPS(Global Positioning System) navigation system capable of providing a bird's-eye view and a method thereof are provided to secure precise and practical traffic information around a vehicle using a plurality of cameras capable of taking images by sections according to angle of view and outputting a synthesized image using the images. A car GPS navigation system capable of providing a bird's-eye view comprises a GPS antenna(110), a memory unit(160), a camera module(180), an image synthesis unit(170), and a navigation control unit(130). The GPS antenna receives location and speed information of a vehicle from a GPS satellite. The memory unit stores two-dimensional topography database. The camera module comprises a plurality of cameras(181,182), each of which is arranged adjacent to the vehicle to take images of the front, rear, and lateral sides of the vehicle by sections according to its angle of view. The image synthesis unit creates a bird's-eye view image by synthesizing images taken by each camera of the camera module, and divides a picture to be displayed into each image area for displaying the each image area. The navigation control unit displays an icon of the vehicle on a picture of surroundings synthesized by the image synthesis unit, and displays a route to a destination requested by a user on the bird's-eye view image by using location and speed data and topography database.

Description

버드 뷰를 제공하는 차량용 네비게이션 장치 및 그 방법{Navigation System for Providing Bird View and Method Thereof}Navigation system for providing a bird view and its method {Navigation System for Providing Bird View and Method Thereof}

도 1은 종래의 GPS 수신기를 포함하는 차량용 네비게이션 장치의 구성을 나타낸 블록도.1 is a block diagram showing a configuration of a vehicle navigation apparatus including a conventional GPS receiver.

도 2는 본 발명의 일 실시예에 따른 차량용 네비게이션 장치의 내부 구성을 나타낸 블록도.Figure 2 is a block diagram showing the internal configuration of a vehicle navigation apparatus according to an embodiment of the present invention.

도 3은 본 발명의 다른 실시예에 따른 차량용 네비게이션 제공 방법을 나타낸 순서도.3 is a flow chart showing a vehicle navigation providing method according to another embodiment of the present invention.

도 4는 본 발명의 또 다른 실시예에 따른 차량 주위 환경 영상 데이터 합성을 위한 카메라의 구성 예를 나타낸 예시도.4 is an exemplary view showing a configuration example of a camera for synthesizing environment image data around a vehicle according to another embodiment of the present invention.

도 5a 및 5b는 본 발명에 따른 영상 합성부가 실제 합성한 영상의 예를 나타낸 예시도.5A and 5B are exemplary views showing examples of images actually synthesized by the image synthesizing unit according to the present invention.

<도면의 주요 부분에 대한 부호 설명><Description of the symbols for the main parts of the drawings>

110 : 안테나 120 : GPS 수신기110: antenna 120: GPS receiver

130 : 네비게이션 제어부 140 : 디스플레이부130: navigation control unit 140: display unit

150 : 유저 인터페이스부 160 : 메모리부150: user interface unit 160: memory unit

170 : 영상 합성부 180 : 카메라 모듈170: image synthesizer 180: camera module

본 발명은 버드 뷰를 제공하는 차량용 네비게이션 장치 및 그 방법에 관한 것으로서, 보다 상세하게는 운전자가 운전하는 차량을 중심으로 전후 및 좌우의 교통상황을 실제적이고 현실감 있게 제공하여, 교통사고의 예방, 현재의 운전 상태를 최적으로 인식할 수 있는 버드 뷰를 제공하는 차량용 네비게이션 장치 및 그 방법에 관한 것이다. The present invention relates to a vehicle navigation device and a method for providing a bird view, and more particularly, to provide a realistic and realistic traffic conditions of the front and rear and left and right around the vehicle driven by the driver, to prevent traffic accidents, present The present invention relates to a vehicle navigation apparatus and a method for providing a bird view capable of optimally recognizing a driving state of a vehicle.

일반적으로 차량용 네비게이션 장치는 GPS 수신기와 연계되어 지능형 교통 정보 장치(ITS)의 일부로 위치 추적 및 검색, 위치 기반 서비스(LBS : Location Based Service)와 지도 서비스를 제공한다. 특히, GPS 수신기를 이용한 자동차 네비게이션 장치는 GPS 위성에서 송출한 전파를 수신하여 차량의 위치, 속도, 시간 등을 정확하게 감지하는 차량 항법 장치를 의미한다.In general, a navigation device for a vehicle provides location tracking and retrieval, a location based service (LBS) and a map service as part of an intelligent traffic information device (ITS) in association with a GPS receiver. In particular, an automobile navigation apparatus using a GPS receiver refers to a vehicle navigation apparatus that accurately detects a position, a speed, a time, etc. of a vehicle by receiving radio waves transmitted from a GPS satellite.

도 1은 종래의 GPS 수신기를 포함하는 차량용 네비게이션 장치의 구성을 나타낸 블록도이다.1 is a block diagram showing the configuration of a vehicle navigation apparatus including a conventional GPS receiver.

도 1에 도시된 바와 같이 차량용 네비게이션 장치는 안테나(10), GPS 수신부(20), 네비게이션 제어부(30), 디스플레이부(40), 유저 인터페이스부(50), 메모리부(60) 등을 포함할 수 있다.As shown in FIG. 1, the vehicle navigation apparatus may include an antenna 10, a GPS receiver 20, a navigation controller 30, a display 40, a user interface 50, a memory 60, and the like. Can be.

차량용 네비게이션 장치는 GPS 위성으로부터 안테나(10)와 GPS 수신부(20)를 통하여 차량의 위치 정보와 속도 데이터를 수신하게 된다. 또한, 차량용 네비게이션 장치는 2D의 포맷을 포함하는 지형 정보를 저장하는 메모리부(60)를 포함하고 있다. The vehicle navigation apparatus receives position information and speed data of the vehicle from the GPS satellite through the antenna 10 and the GPS receiver 20. In addition, the vehicle navigation device includes a memory unit 60 for storing terrain information including a 2D format.

네비게이션 제어부(30)는 GPS 수신부(20)로부터 현재 차량의 속도 및 위치 정보를 전달받는 한편, 메모리부(60)에 저장되어 있는 지도 정보를 전달받게 된다. 네비게이션 제어부(30)는 GPS 수신부(20)로부터 전달받은 차량의 위치 정보와 지도 정보를 조합하여 차량을 지도에 마킹할 수 있게 된다. 이와 같이 마킹된 지도는 디스플레이부(40) 등을 통하여 사용자에게 제공될 수 있다. The navigation controller 30 receives current vehicle speed and location information from the GPS receiver 20, and map information stored in the memory unit 60. The navigation controller 30 may mark the vehicle on the map by combining the vehicle location information and the map information received from the GPS receiver 20. The marked map may be provided to the user through the display unit 40 or the like.

또한, 네비게이션 장치는 키패드, 터치 스크린 등의 유저 인터페이스부(50)를 통하여 사용자의 목적지 등을 입력받게 된다. 네비게이션 제어부(30)는 차량의 현재 위치로부터 입력된 사용자의 목적지를 가는 경로를 계산하여 디스플레이할 수 있다. 물론, 최근에는 사용자가 입력한 목적지를 다시 GPS 위성을 통하여 외부 네트워크 상의 서버로 전송하고 혼잡한 길을 회피한 경로를 다시 수신하여 디스플레이 하는 등의 지능형 차량용 항법 장치도 제공되고 있는 실정이다.In addition, the navigation device receives a user's destination through a user interface unit 50 such as a keypad or a touch screen. The navigation controller 30 may calculate and display a route to the user's destination input from the current location of the vehicle. Of course, recently, an intelligent vehicle navigation apparatus has also been provided, such as transmitting a destination input by a user to a server on an external network through a GPS satellite and receiving and displaying a route avoiding a congested route.

그러나, 일반적인 차량 네비게이션 장치는 단순하게 평면적인 지도에서 자신의 차량의 위치 및 이동상황에 대한 정보만을 제공하고 있을뿐 주변의 교통상황을 구체적으로 제공하지 않아 현실감이 부족할 뿐 아니라 자신의 차량의 주변의 교통상황을 정확하고 현실적으로 인식할 수 없는 문제점이 있다.However, the general vehicle navigation device merely provides information about the location and movement of the vehicle on a flat map and does not provide specific traffic conditions. There is a problem that can not recognize the traffic situation accurately and realistically.

따라서, 본 발명은 상기한 종래 기술에 따른 문제점을 해결하기 위한 것으로, 본 발명의 목적은, 인접 배치되는 카메라 모듈을 이용하여 차량의 주위 환경을 자신의 화각에 따라 분할 촬영하고, 이를 합성하여 출력함으로써 자신의 차량 주변의 교통상황을 가장 정확하고 현실감 있게 사용자에게 제공할 수 있는 버드 뷰를 제공하는 차량용 네비게이션 장치 및 그 방법을 제공하는데 있다. Therefore, the present invention is to solve the above problems according to the prior art, an object of the present invention, by using a camera module that is disposed adjacent to take a photograph of the surrounding environment of the vehicle according to its own angle of view, synthesized and output Accordingly, the present invention provides a vehicle navigation apparatus and a method for providing a bird view that can provide a user with the most accurate and realistic traffic conditions around his vehicle.

본 발명의 일 측면에 따른 차량용 네비게이션 장치는 GPS 위성으로부터 차량의 위치 정보와 속도 데이터를 수신하기 위한 GPS 안테나, 이차원 형식의 지형 데이터베이스를 저장하는 메모리부, 차량의 주위 환경을 자신의 화각에 따라 분할 촬영하기 위하여 인접 배치되는 카메라 모듈, 상기 카메라에서 촬영된 영상을 합성하여 버드 뷰 영상을 생성하는 영상 합성부, 및 상기 영상 합성부에서 합성한 차량 주위 환경에 상기 차량의 아이콘을 디스플레이하고, 상기 GPS 안테나로부터 전달받은 차량의 위치 정보와 속도 데이터 및 상기 메모리부에 저장된 지형 데이터베이스를 이용하여 사용자가 요청한 목적지로의 경로를 상기 생성된 버드 뷰 영상에 디스플레이하는 네비게이션 메인 제어부를 포함할 수 있다.According to an aspect of the present invention, a vehicle navigation apparatus includes a GPS antenna for receiving vehicle position information and speed data from a GPS satellite, a memory unit for storing a terrain database in a two-dimensional format, and a surrounding environment of the vehicle according to an angle of view of the vehicle. A camera module disposed adjacent to be photographed, an image synthesizer for synthesizing the images photographed by the camera to generate a bird view image, and displaying the icon of the vehicle in the environment around the vehicle synthesized by the image synthesizer, and the GPS The navigation controller may include a navigation main controller configured to display, on the generated bird view image, a route to a destination requested by a user using location information and speed data of the vehicle received from an antenna and a terrain database stored in the memory unit.

이 경우 상기 카메라 모듈은 차량의 전방을 촬영하기 위하여 90도의 화각을 가지는 두 개의 전방 카메라를 포함하는 것을 특징으로 하며, 이 때 상기 영상 합성부는 디스플레이할 화면을 두 개의 영역으로 분할하고, 상기 두 개의 전방 카메라 모듈을 통하여 촬영한 두 개의 영상을 각각 분할된 영역에 디스플레이하는 것을 특징으로 한다. 또한, 상기 영상 합성부는 상기 두 개의 전방 카메라 모듈을 통하여 촬영한 두 개의 영상에 화상 겹침이 발생하는 경우 푸리에 변환을 이용하여 화 상 겹침 현상을 제거할 수 있다.In this case, the camera module may include two front cameras having an angle of view of 90 degrees in order to photograph the front of the vehicle. In this case, the image synthesizer divides the screen to be displayed into two regions. Two images captured by the front camera module are displayed in the divided areas. The image synthesizing unit may remove image overlap by using a Fourier transform when image overlap occurs in two images photographed through the two front camera modules.

또한, 차량의 전방, 후방 및 양측방을 촬영하기 위한 광각의 화각을 가지는 복수의 카메라를 포함하는 것을 특징으로 한다.In addition, it characterized in that it comprises a plurality of cameras having a wide angle of view for photographing the front, rear and both sides of the vehicle.

본 발명의 다른 측면에 따른 차량용 네비게이션 서비스 제공 방법은 차량용 네비게이션 장치는 카메라를 차량 주위의 환경을 촬영하고, 촬영된 차량 주위의 영상에 특정 형태의 차량 아이콘을 마킹한 버드 뷰 영상을 디스플레이하는 단계, 차량용 네비게이션 장치는 GPS 위성으로부터 현재 차량의 위치 및 속도 정보를 수신하는 단계, 및 차량용 네비게이션 장치에 기저장되어 있는 지도 데이터베이스와 차량의 위치 및 속도 정보를 이용하여 사용자가 요청한 목적지로의 경로를 판단하고, 이를 상기 버드 뷰 영상에 반영하여 디스플레이하는 단계를 포함할 수 있다.According to another aspect of the present invention, there is provided a vehicle navigation service providing method, wherein the vehicle navigation apparatus photographs an environment around a vehicle and displays a bird view image marking a specific type of vehicle icon on an image around the vehicle, The vehicle navigation apparatus receives the current vehicle position and speed information from a GPS satellite, and determines a route to a destination requested by the user using a map database stored in the vehicle navigation device and the position and speed information of the vehicle. And reflecting the same on the bird view image.

이 경우 상기 차량 주위의 환경을 촬영하는 단계는 차량의 전방, 후방 및 양측방을 촬영하기 위하여 광각의 화각을 가지는 복수의 카메라들을 이용하여 차량의 전방 환경을 촬영하는 것을 특징으로 한다. In this case, the step of photographing the environment around the vehicle is characterized by photographing the front environment of the vehicle using a plurality of cameras having a wide angle of view to photograph the front, rear and both sides of the vehicle.

또한, 본 차량용 네비게이션 서비스 제공 방법은 차량용 네비게이션 장치는 하나의 화면을 좌우의 영역으로 분할하며, 각각의 영역에 상기 두 개의 전방 카메라를 이용하여 촬영한 영상을 삽입하는 단계를 더 포함할 수 있다.The vehicle navigation service providing method may further include splitting one screen into left and right regions, and inserting images captured by the two front cameras in each region.

이하, 본 발명에 따른 버드 뷰를 제공하는 차량용 네비게이션 장치 및 그 방법에 대하여 첨부된 도면을 참조하여 상세히 설명한다.Hereinafter, a vehicle navigation apparatus and a method for providing a bird view according to the present invention will be described in detail with reference to the accompanying drawings.

도 2는 본 발명의 일 실시예에 따른 차량용 네비게이션 장치의 내부 구성을 나타낸 블록도이다.2 is a block diagram showing an internal configuration of a vehicle navigation apparatus according to an embodiment of the present invention.

도 2에 도시된 바와 같이 차량용 네비게이션 장치는 안테나(110), GPS 수신기(120), 네비게이션 제어부(130), 디스플레이부(140), 유저 인터페이스부(150), 메모리부(160), 영상 합성부(170), 다수의 카메라(181, 182, --- , n)를 포함하는 카메라 모듈(180) 등을 포함할 수 있다.As shown in FIG. 2, the vehicle navigation apparatus includes an antenna 110, a GPS receiver 120, a navigation controller 130, a display 140, a user interface 150, a memory 160, and an image synthesizer. 170, a camera module 180 including a plurality of cameras 181, 182, ---, n, and the like.

마찬가지로 차량용 네비게이션 장치는 GPS 위성으로부터 안테나(110)와 GPS 수신기(120)를 통하여 차량의 위치 정보와 속도 데이터를 수신하게 된다. 또한, 차량용 네비게이션 장치는 2D 포맷의 지도 정보를 저장하는 메모리부(160)를 포함한다.Similarly, the vehicle navigation device receives location information and speed data of the vehicle from the GPS satellite through the antenna 110 and the GPS receiver 120. In addition, the vehicle navigation device includes a memory unit 160 for storing map information in a 2D format.

네비게이션 제어부(130)는 GPS 수신기(120)로부터 현재 차량의 속도 및 위치 정보를 전달받는 한편, 메모리부(160)에 저장되어 있는 지도 정보를 전달받게 된다. 상기 GPS 수신기(120)로부터 전달된 차량의 위치 좌표 등의 정보는 영상 합성부(170)로도 전달된다.The navigation controller 130 receives the speed and location information of the current vehicle from the GPS receiver 120, and receives map information stored in the memory 160. Information such as the position coordinates of the vehicle transmitted from the GPS receiver 120 is also transmitted to the image synthesizing unit 170.

한편, 카메라 모듈(180)에 포함되어 있는 다수의 카메라(181, 182, ---, n)는 자동차의 루프, 트렁크 등과 같이 자동차의 적정 위치에 장착되어 차량 주위의 환경을 관찰할 수 있도록 구성되어 있다. 이와 같이 촬영된 차량 주위의 환경은 영상 합성부(170)로 전달이 된다. On the other hand, a plurality of cameras (181, 182, ---, n) included in the camera module 180 is mounted at an appropriate position of the vehicle, such as a roof, trunk, etc. of the vehicle so that the environment around the vehicle can be observed. It is. The environment around the vehicle photographed as described above is transmitted to the image synthesizing unit 170.

이와 같이 다수의 카메라(181, 182, ---, n)로부터 전달된 차량 주위의 영상 데이터들은 영상 합성부(170)에서 합성이 된다. 이 경우 영상 합성부(170)에서는 광학 왜곡 및 겹침 현상이 발생하지 않도록 차량 주위의 영상 데이터를 합성하여야 하는 바, 이와 같은 합성방법은 널리 공지되어 있는 바, 설명의 명확성을 위해 이에 대한 상세한 설명은 생략한다. 이와 같이 합성된 영상 데이터는 네비게이션 제어부(130)로 전달된다.As described above, the image data around the vehicle transmitted from the plurality of cameras 181, 182, ---, n are synthesized by the image synthesizing unit 170. In this case, the image synthesizing unit 170 should synthesize image data around the vehicle so that optical distortion and overlapping may not occur. Such a synthesis method is well known. Omit. The synthesized image data is transferred to the navigation controller 130.

네비게이션 제어부(130)는 합성된 영상 데이터에 GPS 위성으로부터 전달받은 차량의 위치 및 속도 데이터를 반영하여 마킹하는 작업을 수행하게 된다. 즉, 네비게이션 제어부(130)는 종래의 2D의 지도 데이터베이스 정보를 이용하는 대신, 차량 주위에 장착되어 있는 카메라를 통하여 촬영된 실제 동영상 화면에 현재 자동차의 위치 및 속도 정보를 마킹하게 되는 것이다. 이와 같이 마킹된 지도는 디스플레이부(140) 등을 통하여 사용자에게 제공될 수 있다. The navigation controller 130 performs a marking operation by reflecting the position and velocity data of the vehicle received from the GPS satellites in the synthesized image data. That is, instead of using the conventional 2D map database information, the navigation controller 130 marks the current vehicle position and speed information on an actual video screen photographed through a camera mounted around the vehicle. The marked map may be provided to the user through the display unit 140 or the like.

또한, 네비게이션 장치는 키패드, 터치 스크린 등의 유저 인터페이스부(150)를 통하여 사용자의 목적지 등을 입력받을 수도 있다. 이와 같은 경우 네비게이션 제어부(130)는 메모리부(160)에 저장되어 있는 지도 데이터베이스와 차량의 현재 위치를 이용하여 목적지로 가기 위한 경로를 결정하게 된다. 다만, 이와 같이 계산된 경로는 기존의 2D 맵에 표시되는 것이 아니며, 합성된 동영상 위에 마킹되는 것이다. In addition, the navigation device may receive a user's destination through a user interface unit 150 such as a keypad or a touch screen. In this case, the navigation controller 130 determines a route to the destination using the map database stored in the memory 160 and the current location of the vehicle. However, the calculated route is not displayed on the existing 2D map, but is marked on the synthesized video.

도 3은 본 발명의 다른 실시예에 따른 차량용 네비게이션 제공 방법을 나타낸 순서도이다.3 is a flowchart illustrating a vehicle navigation providing method according to another exemplary embodiment of the present invention.

먼저 차량용 네비게이션 장치는 사용자로부터 소정의 ID 및 패스워드 등을 입력받고, 이를 이용하여 인증 과정을 수행하게 된다(S301). First, the vehicle navigation apparatus receives a predetermined ID and password from a user, and performs an authentication process using the same (S301).

차량용 네비게이션 장치는 차량의 적절한 위치에 장착되어 있는 카메라를 이용하여 차량 주위의 환경 정보를 촬영하는 작업을 수행하게 된다(S302). 그 후 차량용 네비게이션 장치는 다수의 카메라를 통하여 촬영된 개별 영상 데이터를 합성하는 작업을 수행하게 된다(S303). 이와 같이 합성 과정을 통해 차량용 네비게이션 장치는 자동차가 중심에 있는 반구 형태의 3차원 동영상 정보를 획득할 수 있게 된다. 차량용 네비게이션 장치는 3차원 동영상 데이터의 중심에 자동차 형태의 아이콘을 마킹하고, 디스플레이하여 준다(S304). 이상의 과정은 차량 주위에 존재하는 영상 데이터를 합성하고, 합성된 영상 데이터의 중심에 차량 아이콘을 마킹하여 디스플레이함으로써 현재 차량의 주행 상태를 사용자에게 알려주는 과정에 해당한다.The vehicle navigation apparatus performs a task of photographing environmental information around the vehicle by using a camera mounted at an appropriate position of the vehicle (S302). After that, the vehicle navigation apparatus synthesizes individual image data photographed through a plurality of cameras (S303). As such, the vehicle navigation device may acquire hemispherical three-dimensional video information in which the vehicle is at the center. The vehicle navigation apparatus marks and displays a car-shaped icon at the center of the 3D video data (S304). The above process corresponds to a process of informing the user of the current driving state of the vehicle by synthesizing image data existing around the vehicle and marking and displaying a vehicle icon at the center of the synthesized image data.

한편, 사용자는 키패드, 터치 스크린 또는 음성 입력 수단 등을 이용하여 가고자 하는 목적지를 입력하게 된다(S305). 이와 같이 입력된 목적지는 차량용 네비게이션 장치에 기저장되어 있는 지도 데이터베이스를 통하여 위치 좌표로 변환될 수 있다. 또한 차량용 네비게이션 장치는 안테나 등의 GPS 수신 장치를 이용하여 GPS 위성으로부터 현재 차량의 위치 및 속도 정보를 수신하게 된다(S306). On the other hand, the user inputs a destination to go using a keypad, a touch screen or a voice input means (S305). The input destination may be converted into location coordinates through a map database that is pre-stored in the vehicle navigation apparatus. In addition, the vehicle navigation device receives the current vehicle position and speed information from the GPS satellites using a GPS receiver such as an antenna (S306).

차량용 네비게이션 장치는 GPS 위성으로부터 전달받은 차량의 현재 위치 좌표와 사용자가 입력한 목적지의 위치 좌표를 이용하여 최단 거리의 경로를 계산하게 된다(S307). 차량용 네비게이터 장치는 계산된 경로를 합성된 주위 환경 영상 데이터에 반영함으로써 디스플레이하여 주는 것이다(S308).The vehicle navigation apparatus calculates a path of the shortest distance using the current location coordinates of the vehicle received from the GPS satellites and the location coordinates of the destination input by the user (S307). The vehicle navigator device displays the calculated route by reflecting it on the synthesized surrounding image data (S308).

도 4는 본 발명의 또 다른 실시예에 따른 차량 주위 환경 영상 데이터 합성을 위한 카메라의 구성 예를 나타낸 예시도이다.4 is an exemplary view showing a configuration example of a camera for synthesizing environment image data around a vehicle according to another embodiment of the present invention.

도 4에 도시된 바와 같이 본 발명의 차량에는 기본적으로 4개의 카메라(181, 182, 183, 184)를 포함하는 카메라 모듈(180)을 이용하여 차량 주위의 환경을 촬영하는 것을 그 특징으로 한다. 본 실시예에서의 카메라는 일반 카메라와 마찬가지로 CCD 또는 CMOS와 같은 촬상 소자와 렌즈를 구비하는 것을 그 특징으로 한다. 또한, 본 발명의 카메라는 렌즈와 촬상 소자의 특성을 조절하여 적어도 180°이상의 광각의 촬영각을 가지게 된다. 이와 같은 카메라를 자동차의 루프의 일 지점(본 실시예에서는 루프의 전방, 트렁크, 루프의 양측방 지점)에 설치하게 되는 것이다. 각각의 카메라(181, 182, 183, 184)는 설치된 방향을 중심으로 좌우 180°씩의 영역을 촬영하게 되며, 촬영된 영상을 도 2의 영상 합성부에 전달하는 것이다. As illustrated in FIG. 4, the vehicle of the present invention basically photographs an environment around the vehicle by using a camera module 180 including four cameras 181, 182, 183, and 184. The camera according to the present embodiment is characterized by including a lens and an imaging device such as a CCD or a CMOS like a normal camera. In addition, the camera of the present invention has a wide angle photographing angle of at least 180 degrees by adjusting the characteristics of the lens and the image pickup device. Such a camera is installed at one point of the roof of the vehicle (in this embodiment, the front of the roof, the trunk, and both sides of the roof). Each of the cameras 181, 182, 183, and 184 photographs an area of 180 ° left and right with respect to the installed direction, and transmits the photographed image to the image combining unit of FIG. 2.

영상 합성부(170)는 각각의 카메라(181, 182, 183, 184)로 구성된 카메라 모듈(180)에 의해 촬영되어 수집된 영상을 합성하게 된다. 영상 합성부(170)는 바탕 화면을 소정의 영역으로 구획하고 카메라 모듈(180)에서 촬영한 영상을 대응하는 영역에 삽입하게 되는 것이다. 예를 들어, 영상 합성부(170)는 도 5a에 도시된 바와 같이 카메라 모듈(180)의 각각의 카메라(181;182;183;184)에 의해 촬영된 데이터를 에에 대응하는 각각의 소정 영역(A;B;C;D)별로 배열할 수 있으며, 이를 디스플레이부(140)로 전달하여 운전자에게 제공할 수 있다. The image synthesizing unit 170 synthesizes the images captured and collected by the camera module 180 including the cameras 181, 182, 183, and 184. The image synthesizing unit 170 divides the background screen into a predetermined area and inserts the image photographed by the camera module 180 into a corresponding area. For example, the image synthesizing unit 170 may display data photographed by each camera 181; 182; 183; 184 of the camera module 180 as shown in FIG. 5A. A; B; C; D) can be arranged for each, and can be delivered to the display unit 140 to provide to the driver.

특히, 영상 합성부(170)는 상기와 같이 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)에 의해 촬영된 각각의 영역(A;B;C;D)의 영상 데이터를, 도 5b에 도시된 바와 같이 상호 겹쳐지는 부분을 처리 및 합성하여 사용자의 차량(O)을 중심으로 주변의 교통상황을 실제적이고, 현실적이며, 입체적으로 제공하게 되는 것이다. In particular, the image synthesizing unit 170 displays image data of each area A; B; C; D photographed by each camera 181, 182, 183, 184 of the camera module 180 as described above. As illustrated in FIG. 5B, the overlapping portions are processed and synthesized to provide a realistic, realistic and three-dimensional traffic situation around the user's vehicle O. FIG.

이로써, 사용자는 자신의 차량의 운전정보를 디스플레이를 통해 확인할 수 있을 뿐 아니라, 자신의 차량의 주변의 교통상황을 직접 눈으로 확인하지 않고도 디스플레이(140)를 통해 정확하고 사실적으로 확인할 수 있는 것이다. As a result, the user may not only check driving information of his vehicle through the display, but also accurately and realistically check the display 140 without directly checking the traffic situation around the vehicle.

이상에서 살펴본 바와 같이 본 발명에 따르면 차량의 전후좌우 360°의 주변 환경을 4대의 카메라를 이용하여 촬영할 수 있게 된다. 그러나 일반적인 네비게이션 장치를 이용하는 경우 차량 전방의 주변 환경을 도시하는 것으로 충분하다. As described above, according to the present invention, the surrounding environment of 360 ° in front, rear, left, and right of the vehicle can be photographed using four cameras. However, when using a general navigation device, it is sufficient to show the surrounding environment in front of the vehicle.

따라서 평소에는 후방을 촬영하기 위한 카메라는 비활성화시키게 된다. 다만, 사용자가 소정의 키버튼 등을 이용하여 차량 후방의 환경 관찰 요청을 하는 경우, 후방 촬영을 위한 카메라가 활성화되는 것이다. 물론, 이 경우 전방을 촬영하는 카메라는 비활성화될 것이다. Therefore, the camera for photographing the rear is usually deactivated. However, when the user makes a request for observing the environment behind the vehicle by using a predetermined key button, the camera for rear photographing is activated. Of course, in this case, the camera that photographs the front will be deactivated.

도 5a는 각각의 카메라를 이용하여 촬영한 각각 분할되어 촬영된 영상이며, 도 5b는 네비게이션 장치의 카메라 영상을 조합한 결과를 나타낸 것이다. FIG. 5A illustrates a divided image captured by each camera, and FIG. 5B illustrates a result of combining camera images of a navigation device.

본 발명의 영상의 합성에 대해 보다 상세히 설명하면, 본 발명에서 카메라의 화각은 180도 이상의 광각을 촬영할 수 있으며, 각각의 카메라(181, 182, 183, 184)에 의해 주변의 영상이 겹쳐지거나 중첩되는 부분은 영상합성부(170)에서 푸리에 변환 등과 같은 다양한 방식의 영상 합성방식에 의해 중첩부분이 단일 영상으로 처리되므로, 결과적으로 각각의 영상이 중첩되는 부분 없이 합성되어, 마치 새가 공중에서 사용자의 차량을 중심으로 주변을 모두 관찰하거나 인식할 수 있는 버드뷰 영상으로 제공되는 것이다. In more detail with respect to the synthesis of the image of the present invention, the angle of view of the camera in the present invention can shoot a wide angle of more than 180 degrees, the surrounding images are overlapped or overlapped by each camera (181, 182, 183, 184) Since the overlapped portion is processed as a single image by various image synthesizing methods such as a Fourier transform in the image synthesizer 170, the result is that each image is synthesized without overlapping portions, as if the bird is in the air. It will be provided as a bird view image that can observe or recognize all around the vehicle.

또한, 본 발명에서는 카메라를 통하여 찍힌 2차원의 데이터를 3차원의 영상처럼 출력하여야 하는 영상 처리 기법이 적용되는 것이 바람직하다. 이와 같은 렌더링 기법은 3차원의 물체를 임의의 방향에서 바라보았을 때, 입체감을 느끼게 하기 위하여 2차원 투영 화면에 있는 화소(Pixel) 각각의 색깔을 만들어주는 방법에 해당한다. In addition, in the present invention, it is preferable that an image processing technique that outputs two-dimensional data taken through a camera as a three-dimensional image is applied. Such a rendering technique corresponds to a method of creating a color of each pixel on a two-dimensional projection screen in order to feel a three-dimensional feeling when a three-dimensional object is viewed from an arbitrary direction.

이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 상술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리 범위는 설명된 실시예에 국한되어 정해져서는 안되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의하여 정해져야 한다.Although the present invention has been described in detail through the representative embodiments, those skilled in the art to which the present invention pertains can make various modifications without departing from the scope of the present invention. I will understand. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be defined not only by the claims below but also by the equivalents of the claims.

상기한 바와 같이 본 발명에 따른 버드 뷰를 제공하는 차량용 시야 확보 장치 및 그 방법에 의하면, 사용자의 차량을 중심으로 주변의 교통상황을 현실적이고 입체적으로 디스플레이할 수 있어, 사용자가 보다 현실감있게 네비게이션 서비스를 제공받을 수 있을 뿐만 아니라, 운전자가 사각 지역을 포함하는 차량 주변 환경을 체크할 수 있어 보다 안전하고 정확한 주행이 가능하다는 효과가 있다.As described above, according to the apparatus for securing a vehicle vision providing a bird view according to the present invention and a method thereof, the surrounding traffic situation can be displayed in a realistic and three-dimensional manner centering on the user's vehicle, thereby providing a more realistic navigation service for the user. In addition to being provided with the driver, the driver can check the surrounding environment of the vehicle including the blind spots, which has the effect of enabling safer and more accurate driving.

Claims (8)

차량용 네비게이션 장치에 있어서,In a vehicle navigation device, GPS 위성으로부터 차량(O)의 위치 정보와 속도 데이터를 수신하기 위한 GPS 안테나(110);A GPS antenna 110 for receiving position information and speed data of the vehicle O from the GPS satellites; 이차원 형식의 지형 데이터베이스를 저장하는 메모리부(160);A memory unit 160 for storing a terrain database in a two-dimensional format; 상기 차량(O)의 주위 환경을 자신의 화각에 따라 전방, 후방 및 양 측방을 분할 촬영하기 위하여 상기 차량(O)에 인접 배치되는 복수의 카메라(181, 182, 183, 184)를 구비한 카메라 모듈(180);A camera having a plurality of cameras 181, 182, 183, and 184 disposed adjacent to the vehicle O to separately photograph the front, rear, and both sides of the surrounding environment of the vehicle O according to an angle of view. Module 180; 상기 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)에서 촬영된 영상을 합성하여 버드 뷰 영상을 생성하며, 디스플레이할 화면을 상기 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)에 의해 촬영되는 영상을 각각의 영상영역(A, B, C, D)으로 분할하고, 상기 각각의 영상영역(A, B, C, D)을 디스플레이하는 영상 합성부(170); 및A bird view image is generated by synthesizing the images captured by the cameras 181, 182, 183, and 184 of the camera module 180, and a screen to be displayed is displayed on each camera 181, of the camera module 180. An image synthesizer for dividing the image photographed by the images 182, 183, and 184 into the respective image regions A, B, C, and D, and displaying the respective image regions A, B, C, and D; 170); And 상기 영상 합성부(170)에서 합성한 상기 차량(O) 주위 환경에 상기 차량(O)의 아이콘을 디스플레이하고, 상기 GPS 안테나(110)로부터 전달받은 상기 차량(O)의 위치 정보와 속도 데이터 및 상기 메모리부(160)에 저장된 지형 데이터베이스를 이용하여 사용자가 요청한 목적지로의 경로를 상기 생성된 버드 뷰 영상에 디스플레이하는 네비게이션 제어부(130)를 포함하는 차량용 네비게이션 장치.Displaying the icon of the vehicle O in the environment surrounding the vehicle O synthesized by the image synthesizing unit 170, location information and speed data of the vehicle O received from the GPS antenna 110 and And a navigation controller (130) for displaying a route to a destination requested by a user on the generated bird view image using a terrain database stored in the memory unit (160). 삭제delete 삭제delete 제1항에 있어서,The method of claim 1, 상기 영상 합성부(170)는,The image synthesizer 170, 상기 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)를 통하여 촬영된 각각의 영상영역(A, B, C, D)의 화상 겹침이 발생하는 경우 푸리에 변환을 이용하여 화상 겹침 현상을 제거하여 버드뷰를 제공하는 것을 특징으로 하는 차량용 네비게이션 장치.When the image overlap of each image area (A, B, C, D) photographed through each camera (181, 182, 183, 184) of the camera module 180 occurs, the image overlap using Fourier transform Car navigation apparatus, characterized in that to provide a bird view by removing the phenomenon. 차량용 네비게이션 서비스 제공 방법에 있어서,In the vehicle navigation service providing method, 차량용 네비게이션 장치는 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)로 차량 주위의 환경을 영역별로 촬영하고(S302), 영역별로 촬영된 차량 주위의 교통상황의 영상영역(A, B, C, D)을 합성한(S303)후, 특정 형태의 차량 아이콘을 마킹하여 디스플레이하는 단계(S304);The vehicle navigation apparatus photographs the environment around the vehicle by area with each of the cameras 181, 182, 183, and 184 of the camera module 180 (S302), and an image area (A) of the traffic situation around the vehicle photographed by area. Synthesizing S, B, C, and D (S303), and then marking and displaying a specific type of vehicle icon (S304); 차량용 네비게이션 장치는 GPS 위성으로부터 현재 차량의 위치 및 속도 정보를 수신하는 단계(S306); 및The vehicle navigation apparatus may include receiving location and speed information of a current vehicle from a GPS satellite (S306); And 차량용 네비게이션 장치에 기저장되어 있는 지도 데이터베이스와 차량의 위치 및 속도 정보를 이용하여 사용자가 요청한 목적지로의 경로를 결정하고(S307), 상기 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)에 의해 촬영된 영상영역(A, B, C, D)을 버드 뷰 영상에 반영하여 디스플레이하는 단계(S308)를 포함하는 차량용 네비게이션 서비스 제공 방법.A route to a destination requested by the user is determined using a map database previously stored in the vehicle navigation apparatus and vehicle position and speed information (S307), and each camera 181, 182, 183 of the camera module 180 is determined. And (S308) reflecting and displaying the image areas (A, B, C, D) captured by 184 on the bird view image (S308). 삭제delete 삭제delete 제5항에 있어서,The method of claim 5, 상기 버드뷰 디스플레이 단계(S308)는,The bird view display step (S308), 상기 카메라 모듈(180)의 각각의 카메라(181, 182, 183, 184)를 통하여 촬영된 각각의 영상영역(영역A, 영역B, 영역C, 영역D)의 화상 겹침이 발생하는 경우 푸리에 변환을 이용하여 화상 겹침 현상을 제거하여 버드뷰를 제공하는 것을 특징으로 하는 차량용 네비게이션 서비스 제공방법.Fourier transform is performed when image overlap of each image region (region A, region B, region C, region D) photographed through each camera 181, 182, 183, 184 of the camera module 180 occurs. Method of providing a navigation service for a vehicle, characterized in that to provide a bird view by removing the image overlap phenomenon.
KR1020060137455A 2006-12-29 2006-12-29 Navigation system for providing bird view and method thereof KR100833603B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020060137455A KR100833603B1 (en) 2006-12-29 2006-12-29 Navigation system for providing bird view and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020060137455A KR100833603B1 (en) 2006-12-29 2006-12-29 Navigation system for providing bird view and method thereof

Publications (1)

Publication Number Publication Date
KR100833603B1 true KR100833603B1 (en) 2008-05-30

Family

ID=39665638

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060137455A KR100833603B1 (en) 2006-12-29 2006-12-29 Navigation system for providing bird view and method thereof

Country Status (1)

Country Link
KR (1) KR100833603B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012091476A3 (en) * 2010-12-30 2012-08-23 주식회사 와이즈오토모티브 Apparatus and method for displaying a blind spot
KR101295618B1 (en) 2011-12-09 2013-08-12 주식회사 와이즈오토모티브 Apparatus and method for displaying blind spot
CN106274684A (en) * 2015-06-24 2017-01-04 张烂熳 The automobile panoramic round-looking system that a kind of low-angle photographic head realizes

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050081492A (en) * 2004-02-13 2005-08-19 디브이에스 코리아 주식회사 Car navigation device using forward real video and control method therefor
KR20060036259A (en) * 2004-10-25 2006-04-28 한국전자통신연구원 System and method for real image based navigation

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050081492A (en) * 2004-02-13 2005-08-19 디브이에스 코리아 주식회사 Car navigation device using forward real video and control method therefor
KR20060036259A (en) * 2004-10-25 2006-04-28 한국전자통신연구원 System and method for real image based navigation

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
공개특허공보 공개번호10-2005-0081492호 A
공개특허공보 공개번호10-2006-0036259호 A

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012091476A3 (en) * 2010-12-30 2012-08-23 주식회사 와이즈오토모티브 Apparatus and method for displaying a blind spot
US9418556B2 (en) 2010-12-30 2016-08-16 Wise Automotive Corporation Apparatus and method for displaying a blind spot
KR101295618B1 (en) 2011-12-09 2013-08-12 주식회사 와이즈오토모티브 Apparatus and method for displaying blind spot
CN106274684A (en) * 2015-06-24 2017-01-04 张烂熳 The automobile panoramic round-looking system that a kind of low-angle photographic head realizes

Similar Documents

Publication Publication Date Title
US8880344B2 (en) Method for displaying images on a display device and driver assistance system
JP4207941B2 (en) Image display device and image generation device
JP6311646B2 (en) Image processing apparatus, electronic mirror system, and image processing method
US20050209776A1 (en) Navigation apparatus and intersection guidance method
JP5262976B2 (en) In-vehicle display device
JP4643860B2 (en) VISUAL SUPPORT DEVICE AND SUPPORT METHOD FOR VEHICLE
US11525694B2 (en) Superimposed-image display device and computer program
CN110786004B (en) Display control device, display control method, and storage medium
JP2007292713A (en) Navigation device
JP2010185761A (en) Navigation system, road map display method
US9849835B2 (en) Operating a head-up display of a vehicle and image determining system for the head-up display
JP2004351977A (en) Vehicle outside image display device
JP2019109707A (en) Display control device, display control method and vehicle
JP6186905B2 (en) In-vehicle display device and program
KR100833603B1 (en) Navigation system for providing bird view and method thereof
US10605616B2 (en) Image reproducing device, image reproducing system, and image reproducing method
JP2017040773A (en) Head-mounted display device
JP6221562B2 (en) Vehicle information presentation device
JP5231595B2 (en) Navigation device
JP2014074627A (en) Navigation system for vehicle
JP2013217808A (en) On-vehicle apparatus
JP2009276266A (en) Navigation device
KR20040025150A (en) Route guide method in car navigation system
JP4820334B2 (en) Roadside machine and traffic information providing system using the same
US11430213B2 (en) Information processing device, information processing method, and storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120523

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee