KR20090100188A - 차량용 정보표시시스템 - Google Patents

차량용 정보표시시스템 Download PDF

Info

Publication number
KR20090100188A
KR20090100188A KR1020080037336A KR20080037336A KR20090100188A KR 20090100188 A KR20090100188 A KR 20090100188A KR 1020080037336 A KR1020080037336 A KR 1020080037336A KR 20080037336 A KR20080037336 A KR 20080037336A KR 20090100188 A KR20090100188 A KR 20090100188A
Authority
KR
South Korea
Prior art keywords
image
vehicle
processing unit
image processing
place
Prior art date
Application number
KR1020080037336A
Other languages
English (en)
Other versions
KR100921095B1 (ko
Inventor
토모유키 히로타
슈지 마루야마
토모야카 쿠로주
Original Assignee
현대자동차주식회사
기아자동차주식회사
현대자동차일본기술연구소
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아자동차주식회사, 현대자동차일본기술연구소 filed Critical 현대자동차주식회사
Publication of KR20090100188A publication Critical patent/KR20090100188A/ko
Application granted granted Critical
Publication of KR100921095B1 publication Critical patent/KR100921095B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q11/00—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00
    • B60Q11/005—Arrangement of monitoring devices for devices provided for in groups B60Q1/00 - B60Q9/00 for lighting devices, e.g. indicating if lamps are burning or not
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00—Aspects of the constitution of display devices
    • G09G2300/02—Composition of display devices
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

본 발명은 파노라마 뷰(view) 화상에 차량화상을 겹쳐 표시하는 차량정보표시 시스템에 있어서, 차량주변의 정보나 차량상태나 위험장소의 정보를 운전자에게 이해하기 쉽게 제시한다.
차량의 주변을 촬영하여 취득한 복수의 화상 데이터와, 차량구조물을 나타내는 차량 데이터를 합성하여 합성화상을 작성한다. 합성화상의 좌표계를, 운전자의 시점위치 또는 차폭에 대한 차량중심선상을 가상시점으로 하는 파노라마 뷰 좌표계로 변환하여 파노라마 뷰 화상을 작성한다. 상기 합성화상을 해석하여 차량 주변의 주의해야 할 장소를 식별하고, 화상간의 거리를 계측하며, 표시부에 파노라마 뷰 화상에 겹쳐서 주의해야 할 장소의 화상과 거리를 표시한다.

Description

차량용 정보표시시스템{Information display system for vehicle}
본 발명은 차량용 정보표시 시스템에 관한 것으로서, 보다 자세하게는, 차량의 주변상황을 나타내는 파노라마 뷰(view) 화상에 차량화상을 겹쳐 표시하는 차량 정보표시시스템에 관한 것이다.
차량의 주변을, 차량에 설치된 복수의 카메라로 촬영하고, 취득한 복수의 화상의 화상 데이터를 합성하여 1개의 주변화상으로 변환하며, 차량의 상방을 가상시점으로 하는 합성화상을 작성하여, 상기 합성화상을 차량 내의 표시부에 표시함으로써 운전자에게 제공하는 기술이 제안되어 있다(예를 들면, 특허문헌 1 참조). 그러나, 바로 위에서 보는 화상은, 근거리의 정보밖에 표시할 수 없기 때문에, 주행중의 주변정보를 제공하는 데는 적합하지 않다.
또한, 차량의 주변을 나타내는 복수의 화상을 합성하여 1개의 파노라마 뷰 화상으로 변환하고, 자차(自車)의 외관을 나타내는 화상을 겹쳐 표시하여, 자차의 위치와 자차 주위에 검출된 물체의 자차로부터의 거리가 작을수록 상기 물체가 상 기 차량표시화상 내에 명료하게 표시되는 것을 특징으로 하는 차량주변화상 표시장치가 개시되어 있다(예를 들면, 특허문헌 2 참조). 그러나, 상기 장치는, 예를 들면 자차의 전방의 상황을 표시하는 경우, 가상시점은 자차 후방의 가상지점이며, 표시부에 표시되는 화상은 자차를 후방에서 보는 화상이기 때문에, 시점이 운전자의 시점과 달라, 표시되는 화상이 운전자가 보고 있는 화상과 크게 다르다. 이 때문에 운전자는 화상에 대해 위화감을 느끼게 되며, 화상에 표시된 정보를 재빨리 판단하기가 어렵다는 문제가 있다.
복수의 카메라에 의해 화상을 촬영하고, 대상까지의 거리를 계측하는 입체화상인식법과, 화상렌즈에 따른 왜곡을 보정하는 방법과, 화상을 인식하는 방법이 개시되어 있다(예를 들면, 비특허문헌 1 참조).
[특허문헌 1] 일본 특허공개공보 H11-78692호
[특허문헌 2] 일본 특허공개공보 제2007-158426호
[비특허문헌 1] 「입체화상인식」 [on line], 동경공업대학, 라디오아이소토프 연구소, 사네요시 연구실 홈 페이지, 2008년 2월14일 검색, 인터넷 <ULR:hhpt:// www.ric.titech.ac.jp/saneken//stereocamera.htm>
파노라마 뷰 화상에 차량화상을 겹쳐 표시하는 차량정보 표시시스템에 있어서, 가상시점이 운전자가 보고 있는 시점과 달라 위화감을 느끼게 되며 순간적인 판단이 불가능하다는 문제를 해결하여, 차량주변의 정보나 차량상태나 위험장소의 정보를 운전자에게 알기 쉽게 제시하는 것을 목적으로 한다.
상기 목적을 달성하기 위한 본 발명에 관계된 차량용 정보표시시스템은, 차량(1)에 설치된 복수의 카메라로 촬영하여 취득한 차량 주변의 복수의 화상(103)의 화상데이터를 보관하는 주변화상 기억부(3)와, 복수의 화상(103)의 화상데이터를 처리, 합성하여 1개의 주변화상(104)으로 변환하는 주변화상 처리부(4)와, 차량구조물을 나타내는 차량 데이터와 차량의 주제어부(11)의 차량부품 데이터를 합성하여 차량화상(106)을 작성하는 차량화상 처리부(6)와, 주변화상(104)과 차량화상(106)을 중합하여 합성화상(107)을 작성하는 출력화상 처리부(7)와, 합성화상(107)을 표시하는 표시부(8)와, 표시부(8)의 화면전환 및 화면인증을 수행하는 조작부(9)로 이루어지는 표시시스템에 있어서, 주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 합성화상(107)의 좌표계를, 운전자(16)의 시점위치 또는 차폭에 대한 차량중심선상을 가상시점(18)으로 하는 파노라마 뷰 좌표계로 변환하여, 파노라마 뷰 화상(108)을 작성하고, 주변화상(104), 합성화상(107) 또는 파노라마 뷰 화상(108)(이하, 주변화상(104), 합성화상(107) 또는 파노라마 뷰 화상(108)을 「화상(100)」이라 기재함)을 해석하여 차량(1) 주변의 주의해야 할 장소(12)를 인식, 추출함으로써 주의해야 할 장소의 화상(주의장소화상 ; 112)을 작성하며, 주의장소화상(112)을 파노라마 뷰 화상(108)에 겹쳐서 표시부(8)에 표시하는 것을 특징으로 한다.
또 본 발명의 주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 화상(100)으로부터 주의해야 할 장소(12)를 인식하는 동시에, 주의해야 할 장소(12)와 차량(1)간의 거리를 계측하여 제 1 거리 데이터로 하고, 거리계측센서(5)가 계측한 주의해야 할 장소(12)와 차량(1)간의 거리를 제 2 거리 데이터로 하여 주의해야 할 장소(12)와 차량(1)간의 거리를 계측한다.
더욱이 본 발명의 주의장소화상(112)은, 주변화상 처리부(4) 또는/및 출력화상 처리부(7)가, 주의해야 할 장소(12)를 표시하는 기호(22)를 가지며, 파노라마 뷰 화상(108)의 주의해야 할 장소(12)의 위치에 겹쳐서, 기호(22)의 크기와 밝기와 색 중의 하나 이상을 바꾸거나 또는/및 삽입화면(115)을 이용하여 표시부(8)에 강조표시한다. 더욱이 본 발명에서 차량화상 처리부(6)는, 운전자(16) 시야의 사각부분(17)이 되는 차량구조물을 반투명화상 또는/및 선화로 작성하고, 출력화상 처리부(7)를 통해 파노라마 뷰 화상(108)에 겹쳐서 표시부(8)에 표시한다.
더욱이 본 발명에서 주의해야 할 장소(12)는, 진행방향 전방의 차선폭이 좁아져 있는 지점이며, 주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 차량의 차폭을 나타내는 2개의 수직선(23)에 의해 주의해야 할 장소(12)를 나타내고, 수직 선(23)의 길이에 의해 주의해야 할 장소(12)와 차량(1)간의 거리를 나타내며, 수직선(23)의 색에 의해 차선폭과 차폭간의 관계를 나타내고, 이들 데이터를 파노라마 뷰 화상(108)에 겹쳐서 표시부(8)에 강조표시한다.
더욱이 본 발명에서 주의해야 할 장소(12)는, 운전자에게 있어서 프론트 윈도우(20)에서는 보이지 않는 위치에 있는 신호기(15)이며, 주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 신호기의 화상(116)을 파노라마 뷰 화상(108)에 겹쳐서 표시부(8)에 강조표시한다.
더욱이 본 발명에서 주의해야 할 장소(12)는, 운전자(16)의 사각부분(17)에 존재하는 사람 또는 물체(13)이며, 주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 사람 또는 물체의 화상(114)을 파노라마 뷰 화상(108)에 겹쳐서 표시부(8)에 강조표시한다.
또한, 본 발명에서 주의해야 할 장소(12)는, 차량(1)의 이상부품(21)이며, 차량(1)의 주제어부(11)는 이상부품의 데이터를 차량화상 처리부(6)에 출력하고, 차량화상 처리부(6)는 이상부품(21)의 데이터를 포함하는 차량화상(106)을 작성하며, 출력화상 처리부(7)를 통해 파노라마 뷰 화상(108)에 겹쳐서 표시부(8)에 강조표시한다. 또한, 본 발명에서 이상부품(21)은 점등하지 않게 된 등화기 또는 교환기한이나 유지관리기한이 경과된 부품이다.
파노라마 뷰 화상(108)의 가상시점(18)을, 운전자(16)의 시점위치 또는 차폭에 대한 차량중심선상에 위치시킴으로써, 운전자(16)는, 현재 인식하고 있는 정경 과 일치하거나 내지는 그와 근사한 파노라마 뷰(view) 화상(108)을 볼 수가 있다.
운전자에게 있어서 사각부분(17)이 되는 차량구조물을, 반투명화상 또는 선화로 작성하여 파노라마 뷰 화상(108)에 겹쳐 표시함으로써, 운전자(16)는 파노라마 뷰 화상(108)을 통해 사각부분(17)의 정보를 직관적으로 이해할 수가 있다. 더욱이, 주의해야 할 장소(12)를, 기호(22)에 의해 파노라마 뷰 화상(108)의 주의해야 할 장소(12)의 위치에 겹치고, 기호(22)의 크기와 밝기와 색 중의 하나 이상을 바꾸거나 또는/및 삽입화면(115)을 이용하여 표시부(8)에 강조표시한다.
본 발명의 표시 시스템에 의해, 운전자(16)는, 파노라마 뷰 화상(108)에 위화감을 느끼지 않으면서 파노라마 뷰 화상(108)에 의해 전달된 정보를 직관적으로 이해할 수가 있다. 본 발명의 표시시스템에 따르면, 운전자(16)에게 차량(1) 주변의 정보나 차량상태를 운전자(16)가 이해하기 쉽도록 전달할 수가 있다.
주의해야 할 장소(12)와 차량(1)간의 거리를, 파노라마 뷰 화상(108)의 데이터를 처리하여 계측한 제 1 거리 데이터와, 거리계측센서(5)에 의해 계측한 제 2 거리 데이터를 이용하여 측정함으로써, 주의해야 할 장소(12)와 차량(1)간 거리의 신뢰성을 향상시킬 수가 있다.
차량(1) 주변의 파노라마 뷰 화상(108)으로부터, 진행방향 전방의 차폭이 좁아져 있는 장소를 추출하여, 그 지점과 거리와 차선폭과 차폭간의 관계를 나타내는 차폭주의정보를 제공할 수가 있다.
운전자(16)가 프론트 윈도우(20)에서 볼 수 없는 위치에 있는 신호기(15)나, 사람 또는 물체(13)를 차량(1) 주변의 파노라마 뷰 화상(108)과, 차량화상(106)을 통해 표시부(8)에 표시할 수가 있다.
이로써, 운전자(16)의 운전부담을 경감시키고, 사각부분(17)을 줄일 수가 있다.
등화기의 파손, 엔진의 초기이상, 타이어의 공기압과 같이, 운전자(16)가 이상을 파악하기가 어려운 부품의 이상을, 파노라마 뷰 화상(108) 내에서 차량화상(106)의 부품이 탑재되어 있는 위치에 겹쳐 표시함으로써, 이상부품이 있음을 운전자(16)에게 전달한다.
또한, 교환기한이 있는 부품이나 엔진오일의 교환시기를, 차량(1) 시동시에, 파노라마 뷰 화상(108) 내에서 차량화상(106)의 부품이 탑재되어 있는 위치에 겹쳐 표시함으로써, 부품이나 엔진오일의 교환시기를 운전자에게 전할 수가 있다. 이로써, 차량의 정비불량에 기인하는 사고를 미연에 방지하여, 운전의 안전성 향상에 공헌할 수가 있다.
이하에서는, 도면을 참조하여 본 발명의 실시예를 상세하게 설명하겠으나, 본 실시예의 기재는 본 발명을 상세하게 설명하기 위한 예시이며, 본 발명이 실시예의 기재로 한정되는 것은 아니다. 본 발명은, 본 발명의 기술적 범위를 벗어나지 않는 범위 내에서 다양하게 변경하여 실시할 수가 있다.
(주변화상 기억부)
도 1에 본 발명의 일실시예에 따른 4대의 카메라(2a∼2d)를 이용한 시스템 구성도를 나타낸다. 주변화상 기억부(3)는, 차량(1)의 전방, 후방, 좌우 양 측방의 주변의 화상을 취득하는 주변 카메라(2a∼2d)에 의해 취득한 복수의 화상(103)의 화상 데이터를 보관한다. 여기서 얻은 화상 데이터는 통상의 평면좌표계 데이터이다.
(차량화상 처리부)
운전중인 운전자(16)에게 있어서, 운전중의 시야는 프론트, 사이드 및 리어의 각 윈도우와, 각종 보조미러뿐이고, 운전자(16) 시야의 대부분은 차체(1)의 그림자가 되어 사각(死角)이 된다. 차량화상 처리부(6)는, 운전자(16)측에서 본 차체(1)의 화상 데이터를 보존한다.
차량(1)의 주제어부(11)는, 차량의 각 부에 센서(10)를 배치하여 부품의 상태를 감시하고, 차량부품에서 이상이 검출되었을 경우에는 부품의 이상정보를 차량화상 처리부(6)에 출력한다. 상기 부품으로는 바람직하게는 헤드라이트, 방향지시등(winker), 비상등(hazard light), 전방 및 후방의 안개등과 같은 등화기를 들 수 있다. 운전자는 주위의 상황에 따라서는, 이들 등화기가 꺼져 있음을 알아차리지 못하는 경우가 있다. 또한, 상기 부품의 다른 예로서, 엔진 및 그 주변기기의 초기 트러블이나, 타이어압에 이상이 있는 타이어를 들 수 있다. 이들 부품도 운전자로서는 이상을 알아차리기가 어려워, 이상이 있는 상태 그대로 방치하면 중대한 결과를 초래하게 되는 경우가 있어, 등화기와 동일한 보수관리가 필요하다.
상기 이상부품(21)은 정기적으로 교환할 필요가 있는 부품을 포함한다. 정 기적으로 교환할 필요가 있는 부품으로는, 유지관리기한이 도래한 부품과 엔진오일을 예시할 수 있다. 정기적으로 교환할 필요가 있는 부품의 데이터는 주제어부(11)에 보관되며, 유지관리기한이 도래하였을 경우에는 그 정보를 차량화상 처리부(6)에 출력한다. 또한, 엔진오일의 오염정도를 전회(前回)의 교환시기와 주행거리로 판단하며 교환시기가 도래했을 경우에 차량화상 처리부(6)에 출력한다.
차량화상 처리부(6)는, 운전자(16) 시각의 사각부분(17)을 나타내는 차량(1)의 화상 데이터와, 차량(1)의 주제어부(11)로부터 송출된 이상부품(21)의 데이터를 처리하여 차량화상(106)을 작성한다. 이 때, 사각부분(17)을 반투명화상 또는/및 선화로 표시하는 것이 바람직하다.
(주변화상 처리부/출력화상 처리부)
주변화상 처리부(4)에 있어서, 복수의 화상(103)의 화상 데이터를 변환하여 하나의 화상 데이터로 합성하고, 카메라 렌즈에 따른 화상의 왜곡을 보정하여, 차량(1) 주변의 정보를 갖는 주변화상(104)을 합성한다.
출력화상 처리부(7)는, 주변화상 처리부(4)에서 작성한 주변화상(104)에 차량화상 처리부(6)에서 작성한 차량화상(106)을 겹쳐서 합성화상(107)을 작성한다.
주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 주변화상(104) 또는 합성화상(107)을, 운전자(16)의 시점위치 또는 차폭에 대한 차량중심선상을 가상시점으로 하는 파노라마 뷰 화상(108)으로 변환한다. 본 발명에 있어서, 복수의 화상(103)으로부터 파노라마 뷰 화상(108)으로 변환하는 작업을, 주변화상 처리부에서 할지 출력화상 처리부에서 할지는 임의적이다.
더욱이, 주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 화상(100)을 처리하여 주의해야 할 장소(12)를 인식하고 추출하여, 주의할 장소의 화상(주의장소화상 ; 112)을 작성한다. 화상(100)의 처리를 주변화상 처리부(4)에서 할지 출력화상 처리부(7)에서 할지는 임의이다.
주변화상 처리부(4) 또는/및 출력화상 처리부(7)는, 주의해야 할 장소(12)를 표시하는 기호(22)를 가지며, 파노라마 뷰 화상(108)의 주의해야 할 장소(12)의 위치에 겹쳐서, 주의해야 할 장소(12)를, 기호(22)의 크기와 밝기와 색 중의 하나 이상을 바꾸거나 또는/및 삽입화면을 이용하여 강조표시하거나, 더욱이 필요에 따라서는 기호(22)를 점멸하거나 혹은 경계음을 병용하여 강조표시처리함으로써 표시부(8)에 표시한다.
(파노라마 뷰(view) 화상)
파노라마 뷰 좌표계란, 가상시점(18)을 중심으로 하여 시선방향을 수평하게 연속적으로 광각(廣角) 회전시켜 얻어진 화상이며, 화상은, 가상시점(18)을 중심축에 포함하는 원통의 내측에 투영되는데, 본 발명에서는 상기 원통을 절개하여 평면도로 한 것을 파노라마 뷰 화상(108)이라 한다.
복수의 화상(103)의 화상 데이터를 변환하여 파노라마 뷰 화상(108)을 합성할 경우, 파노라마 뷰 화상(108)의 가상시점을 운전자(16)의 시점 또는 그 근방으로 하면, 파노라마 뷰 화상(108)의 표시와 운전자(16)가 눈으로 보아 인식하고 있는 정경이 일치하므로, 운전자는 파노라마 뷰 화상(108)의 표시를 직관적으로 이해할 수가 있다. 본 발명에 있어서는, 파노라마 뷰 화상(108)의 가상시점(18)으로서 운전자의 시점 또는 차량 차폭방향의 중심선 중에서 어느 하나를 선택한다.
운전자의 시점을 구하는 방법은 다양하게 보고되고 있다. 예를 들어 운전석의 머리받침의 위치를, 위치센서 또는 운전석의 위치 데이터에 의해 검출하여, 머리받침의 위치로부터 운전자의 시점 위치를 구할 수가 있다.
차량 차폭방향의 중심선상이면서, 또한 차실 내의 한 점을 가상시점(18)으로 선택하면, 운전자의 시점에 가까운 점을 가상시점(18)으로 하는 파노라마 뷰 화상(108)을 얻을 수가 있다. 파노라마 뷰 화상(108)의 표시와 운전자(16)가 눈으로 보아 인식하고 있는 정경이 거의 일치하므로, 운전자는 파노라마 뷰 화상(108)의 표시를 거의 직관적으로 이해할 수가 있다. 차량 차폭방향의 중심선상의 가상시점(18)은 고정점이므로, 운전자의 시점을 가상시점(18)으로 했을 경우에 비해, 파노라마 뷰 화상(108)으로의 화상변환에 필요한 변수가 줄고, 데이터 변환의 연산시간을 단축시킬 수 있다는 이점이 있다.
(거리의 측정)
주변화상 처리부(4) 및/또는 출력화상 처리부(7)에서는, 화상(100)으로부터 주의해야 할 장소(12)를 인식하고 추출하며, 화상(100)의 데이터를 입체화상 인식법에 의해 연산하여, 거리정보가 부여된 합성화상(107)을 작성하는 동시에, 주의해야 할 장소(12)와 차량(1)간의 제 1 거리 데이터를 측정한다. 그러나, 입체화상 인식법에 의한 거리의 측정에서는, 복수의 화상(103)의 화상 데이터로부터 추출된 특징점이, 각 화면에서 각각 대응되지 않을 경우에는 불일치(miss match)가 되어 물체까지의 거리를 계산할 수가 없다.
한편, 거리계측센서(5)는, 거리는 측정할 수 있지만 주의해야 할 장소(12)를 인식할 수는 없다. 입체화상 인식법에 의한 주의해야 할 장소(12)의 인식 및 거리측정과, 거리계측센서(5)에 의한 주의해야 할 장소(12)까지의 제 2 거리 데이터를 비교함으로써, 주의해야 할 장소(12)로부터 대상물까지의 거리를 확실하게 측정한다.
입체화상 인식법에 의해 제 1 거리 데이터를 측정할 수 없을 경우, 또는 제 1 거리 데이터와 거리계측센서(5)에 의한 제 2 거리 데이터와의 차이가 소정의 오차범위를 넘을 경우에는, 재측정하여 신뢰성이 있는 측정값을 표시하는 것이 바람직하다.
(표시부)
파노라마 뷰 화상(108)을 표시한다. 도 2는 본 발명의 일실시예에 따른 전방과 좌우 양 측방의 차량(1) 주변의 파노라마 뷰 화상(108)에 운전자(16)의 사각부분(17)이 되는 차량화상(106)을 반투명화상으로 겹치고, 차체의 보닛(27)을 선화로 겹친 표시를 나타낸다.
<조작부>
운전자(16)의 지시에 따라, 조작부(9)에서의 입력에 의해 표시부(8) 뷰(view)의 전환, 확대 및 축소, 이상경보의 인증을 실시한다. 조작부를 조작함으로써, 차량(1) 후방의 화상(도시생략)을 표시할 수도 있다.
(실시예 1)
도 3은, 본 발명의 일실시예에 따른 진행방향 전방의, 차선폭이 좁아져 있는 주의해야 할 장소(12)를 나타낸다. 파노라마 뷰 화상(108)의 데이터를 입체화상 인식법에 의해 연산하여 산출된 제 1 거리 데이터와, 초음파 센서로부터 취득한 제 2 거리 데이터로부터, 골목길의 폭 정보를 구하고, 그 골목길이 주행가능한지 여부를 표시하는 방법을 나타내었다.
골목길의 폭이 좁아져 있는 지점에 차량의 차폭을 나타내는 2개의 수직선(23)을 표시하고, 차선폭이 좁아져 있는 지점까지의 거리 또는 도달시간을 수직선(23)의 길이에 의해 3단계로 나누어 표시하여, 차선폭이 다소 좁아졌을 뿐 주의하면 통과할 수 있는 경우에는 수직선(23)을 청색으로 나타내고, 차선폭이 차폭과 거의 동일하여 통행할 수는 있지만 감속 등 충분한 주의가 필요한 경우에는 수직선(23)을 황색으로 나타내며, 차선폭보다 차폭이 넓어 주행이 불가능한 경우에는 적색으로 나타냈다. 주의장소화상(112)을 작성하고, 파노라마 뷰 화상(108)에 겹쳐서 주의해야 할 장소(12)와 수직선(23)을 표시부(8)에 표시하였다.
(실시예 2)
도 4는 본 발명의 일실시예에 따른, 프론트 윈도우에서 보이지 않는 위치에 신호기(15)가 있는 경우를 나타내었다. 출력화상 처리부(7)는, 합성화상(107)으로부터 신호기(15)를 인식하고, 합성화상(107)의 데이터를 입체화상 인식법에 의해 연산하여 측정한 신호기(15)의 거리와, 초음파 센서로부터 취득한 신호기(15)의 거리로 판단하여 신호기(15)의 삽입화면(115)을 작성하고, 표시부(8)의, 파노라마 뷰 화상(108)의 신호기(15)에 겹쳐서 신호기(15)의 삽입화면(115)을 표시하였다.
(실시예 3)
도 5는 본 발명의 일실시예에 의한, 우측 방향지시등이 나간 경우를 나타낸다. 차량(1)의 주제어장치(1)는 우측 방향지시등의 센서(10)로부터, 우측 방향지시등(24)이 나갔다는 정보를 입수하여, 이상부품정보를 차량화상 처리부(6)로 출력하였다. 차량화상 처리부(6)는 방향지시등(24)이 나갔다는 정보를 포함하는 차량화상(106)을 작성하고, 출력화상 처리부(7)를 통해 표시부(8)의, 파노라마 뷰 화상(108)의 방향지시등(24)의 위치에 겹쳐서 방향지시등(24)을 나타내는 등황색 기호(22)를 삽입화면(115)을 이용하여 표시하였다.
도 1은 본 발명의 일실시예에 따른 차량용 정보표시 시스템의 구성예이다.
도 2는 본 발명의 일실시예에 따른 표시부에 표시된 파노라마 뷰 화상이다.
도 3은 본 발명의 일실시예에 따른 차량 전방의 차선폭이 좁아져 있는 주의해야 할 장소를 나타내는 도면이다.
도 4는 본 발명의 일실시예에 따른 프론트 윈도우로에서는 보이지 않는 위치에 있는 신호기를 나타내는 도면이다.
도 5는 본 발명의 일실시예에 따른 우측 방향지시등이 나간 경우를 나타내는 도면이다.
* 도면의 주요 부분에 대한 부호의 설명 *
1 : 차량 2 : 카메라(2a∼2d)
3 : 주변화상 기억부 4 : 주변화상 처리부
5 : 거리계측센서 6 : 차량화상 처리부
7 : 출력화상 처리부 8 : 표시부
9 : 조작부 10 : 센서
11 : 주제어부 12 : 주의해야 할 장소
13 : 사람 또는 물체 15 : 신호기
16 : 운전자 17 : 사각부분
18 : 가상시점 20 : 프론트 윈도우
21 : 이상부품 22 : 기호
23 : 수직선 24 : 방향지시등
25 : 천정 26 : 사이드 윈도우
27 : 보닛 100 : 화상
103 : 복수의 화상 104 : 주변화상
106 : 차량화상 107 : 합성화상
108 : 파노라마 뷰(view) 화상 112 : 주의장소화상
114 : 사람 또는 물체의 화상 115 : 삽입화면
116 : 신호기의 화상 124 : 방향지시등

Claims (10)

  1. 차량 주변을 촬영한 복수의 화상 데이터를 보관하는 주변화상 기억부와, 상기 복수의 화상 데이터를 1개의 주변화상으로 변환하는 주변화상 처리부와, 차량화상을 작성하는 차량화상 처리부와, 주변화상과 차량화상의 합성화상을 작성하는 출력화상 처리부와, 합성화상을 표시하는 표시부와, 상기 표시부의 화면전환 및 화면인증을 수행하는 조작부로 이루어지는 표시 시스템에 있어서,
    상기 주변화상 처리부 또는/및 출력화상 처리부는 상기 합성화상의 좌표계를 운전자의 시점위치 또는 차폭에 대한 차량중심선상을 가상시점으로 하는 파노라마 뷰(view) 좌표계로 변환하여 파노라마 뷰 화상을 작성하는 한편, 상기 주변화상, 상기 합성화상 또는 상기 파노라마 뷰 화상을 해석하여 상기 차량주변의 주의해야할 장소를 인식 및 추출한 후, 주의해야할 장소의 화상을 작성하고, 이 주의해야할 장소의 화상을 상기 파노라마 뷰 화상에 겹쳐서 상기 표시부에 표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  2. 제 1항에 있어서,
    상기 주변화상 처리부 또는/및 출력화상 처리부는, 상기 주변화상, 상기 합성화상 또는 상기 파노라마 뷰 화상을 통해 상기 주의해야 할 장소를 인식하는 동시에, 상기 주의해야 할 장소와 상기 차량간의 거리를 계측하여 제 1 거리 데이터 로 하고, 거리계측 센서가 계측한 상기 주의해야 할 장소와 차량간의 거리를 제 2 거리 데이터로 하여, 상기 주의해야 할 장소와 차량간의 거리를 계측하는 것을 특징으로 하는 차량용 정보표시 시스템.
  3. 제 1항에 있어서,
    상기 주변화상 처리부 또는/및 출력화상 처리부는, 상기 주의해야 할 장소를 표시하는 기호를 가지며, 상기 파노라마 뷰 화상의 상기 주의해야 할 장소의 위치에 겹쳐서, 상기 기호의 크기와 밝기, 색 중의 하나 이상을 바꾸거나 또는/및 삽입화면을 이용하여 상기 표시부에 강조표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  4. 제 1항에 있어서,
    상기 차량화상 처리부는, 상기 운전자의 시야의 사각(死角)부분이 되는 차량구조물을 반투명 화상 또는/및 선화(線畵)로 작성하고, 상기 출력화상 처리부를 통해, 상기 파노라마 뷰 화상에 겹쳐서 상기 표시부에 표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  5. 제 1항 내지 제 4항 중 어느 한 항에 있어서,
    상기 주의해야 할 장소는, 진행방향 전방의 차선폭이 좁아져 있는 지점이며, 상기 주변화상 처리부 또는/및 출력화상 처리부는, 차량의 차폭을 나타내는 2개의 수직선에 의해 상기 주의해야 할 장소를 나타내고, 상기 수직선의 길이에 의해 상기 주의해야 할 장소와 차량간의 거리를 나타내며, 상기 수직선의 색에 의해 차선폭과 차폭간의 관계를 나타내고, 이들 데이터를, 상기 파노라마 뷰 화상에 겹쳐서 상기 표시부에 강조표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  6. 제 1항 내지 제 4항 중 어느 한 항에 있어서,
    상기 주의해야 할 장소는 상기 운전자에게 있어서 프론트 윈도우에서는 보이지 않는 위치에 있는 신호기이며, 상기 주변화상 처리부 또는/및 출력화상 처리부는, 상기 신호기의 화상을 상기 파노라마 뷰 화상에 겹쳐서 상기 표시부에 강조표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  7. 제 1항 내지 제 4항 중 어느 한 항에 있어서,
    상기 주의해야 할 장소는 운전자의 사각부분에 존재하는 사람 또는 물체이며, 상기 주변화상 처리부 또는/및 출력화상 처리부는, 상기 사람 또는 물체의 화상을, 상기 파노라마 뷰 화상에 겹쳐서 상기 표시부에 강조표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  8. 제 1항 내지 제 4항 중 어느 한 항에 있어서,
    상기 주의해야 할 장소는 차량의 이상부품이며, 차량의 주제어부는 이상부품 의 데이터를 상기 차량화상 처리부에 출력하고, 상기 차량화상 처리부는, 상기 이상부품의 데이터를 포함하여 작성하며, 상기 출력화상 처리부를 통해 상기 파노라마 뷰 화상에 겹쳐서 상기 표시부에 강조표시하는 것을 특징으로 하는 차량용 정보표시 시스템.
  9. 제 8항에 있어서,
    상기 이상부품은 점등하지 않게 된 등화기인 것을 특징으로 하는 차량용 정보표시 시스템.
  10. 제 8항에 있어서,
    상기 이상부품은 교환기한 또는 유지관리기한이 경과한 부품인 것을 특징으로 하는 차량용 정보표시 시스템.
KR1020080037336A 2008-03-18 2008-04-22 차량용 정보표시시스템 KR100921095B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2008-00069998 2008-03-18
JP2008069998A JP2009225322A (ja) 2008-03-18 2008-03-18 車両用情報表示システム

Publications (2)

Publication Number Publication Date
KR20090100188A true KR20090100188A (ko) 2009-09-23
KR100921095B1 KR100921095B1 (ko) 2009-10-08

Family

ID=41088340

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080037336A KR100921095B1 (ko) 2008-03-18 2008-04-22 차량용 정보표시시스템

Country Status (3)

Country Link
US (1) US8493233B2 (ko)
JP (1) JP2009225322A (ko)
KR (1) KR100921095B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101534953B1 (ko) * 2013-12-02 2015-07-08 현대자동차주식회사 차량 위치 확인 시스템 및 방법
US11557030B2 (en) 2018-06-07 2023-01-17 Sony Semiconductor Solutions Corporation Device, method, and system for displaying a combined image representing a position of sensor having defect and a vehicle

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009225322A (ja) * 2008-03-18 2009-10-01 Hyundai Motor Co Ltd 車両用情報表示システム
WO2011070640A1 (ja) * 2009-12-07 2011-06-16 クラリオン株式会社 車両周辺画像表示システム
WO2012091476A2 (ko) * 2010-12-30 2012-07-05 주식회사 와이즈오토모티브 사각 지대 표시 장치 및 방법
JP6307383B2 (ja) * 2014-08-07 2018-04-04 日立オートモティブシステムズ株式会社 行動計画装置
US10931934B2 (en) * 2014-09-02 2021-02-23 FLIR Belgium BVBA Watercraft thermal monitoring systems and methods
US10518702B2 (en) 2017-01-13 2019-12-31 Denso International America, Inc. System and method for image adjustment and stitching for tractor-trailer panoramic displays
JP2018117320A (ja) 2017-01-20 2018-07-26 株式会社東芝 電子ミラーの映像合成装置及び映像合成方法
JP6504529B1 (ja) * 2017-10-10 2019-04-24 マツダ株式会社 車両用表示装置
US10435035B2 (en) * 2017-10-17 2019-10-08 Denso International America, Inc. Screen reduction system for autonomous vehicles
CN109190577B (zh) * 2018-09-13 2021-10-26 长安大学 一种结合头枕和人脸特征的出租车副驾座异常的图像信号检测方法
CN110356328A (zh) * 2019-07-09 2019-10-22 安徽富煌科技股份有限公司 一种车辆外部环境三维环视实景视频显示系统
CN111355966A (zh) * 2020-03-05 2020-06-30 上海乐杉信息技术有限公司 环绕自由视角直播方法及系统
JP2020177242A (ja) * 2020-07-01 2020-10-29 京セラ株式会社 車両用カメラモニタシステム及びその制御方法
US11318887B1 (en) * 2020-10-29 2022-05-03 GM Global Technology Operations LLC Panoramic virtual environment for in-vehicle entertainment
CN113879214A (zh) * 2021-11-17 2022-01-04 阿维塔科技(重庆)有限公司 电子后视镜的显示方法、电子后视镜显示系统及相关设备
JP2023103876A (ja) * 2022-01-14 2023-07-27 コベルコ建機株式会社 遠隔操作支援システム
CN114495777A (zh) * 2022-01-18 2022-05-13 上汽通用五菱汽车股份有限公司 全景影像显示方法、装置及计算机可读存储介质

Family Cites Families (67)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR930004880B1 (ko) * 1989-03-07 1993-06-09 미쓰비시 덴끼 가부시기가이샤 추미식 차간거리 측정장치
JP2508904B2 (ja) * 1990-09-04 1996-06-19 三菱電機株式会社 車間距離検出装置
JPH04331311A (ja) * 1991-01-24 1992-11-19 Mitsubishi Electric Corp 車間距離検出装置
US5283640A (en) * 1992-01-31 1994-02-01 Tilton Homer B Three dimensional television camera system based on a spatial depth signal and receiver system therefor
JP3232724B2 (ja) * 1992-12-08 2001-11-26 株式会社デンソー 車間距離制御装置
US5638116A (en) * 1993-09-08 1997-06-10 Sumitomo Electric Industries, Ltd. Object recognition apparatus and method
JPH08263784A (ja) * 1995-03-23 1996-10-11 Honda Motor Co Ltd 道路状況認識装置
US6067110A (en) * 1995-07-10 2000-05-23 Honda Giken Kogyo Kabushiki Kaisha Object recognizing device
JPH09142236A (ja) * 1995-11-17 1997-06-03 Mitsubishi Electric Corp 車両の周辺監視方法と周辺監視装置及び周辺監視装置の故障判定方法と周辺監視装置の故障判定装置
JPH09254726A (ja) * 1996-03-19 1997-09-30 Fuji Heavy Ind Ltd 車両用運転支援装置
JP3619628B2 (ja) * 1996-12-19 2005-02-09 株式会社日立製作所 走行環境認識装置
JP3511892B2 (ja) * 1998-05-25 2004-03-29 日産自動車株式会社 車両用周囲モニタ装置
US7366595B1 (en) * 1999-06-25 2008-04-29 Seiko Epson Corporation Vehicle drive assist system
JP3298851B2 (ja) * 1999-08-18 2002-07-08 松下電器産業株式会社 多機能車載カメラシステムと多機能車載カメラの画像表示方法
DE19940723A1 (de) * 1999-08-27 2001-03-08 Daimler Chrysler Ag Verfahren zur Anzeige eines perspektivischen Bildes und Anzeigevorrichtung für mindestens einen Insassen eines Fahrzeugs
JP4354085B2 (ja) 2000-05-09 2009-10-28 本田技研工業株式会社 車両用ヘッドアップディスプレイ装置
JP4953498B2 (ja) * 2000-07-12 2012-06-13 富士重工業株式会社 フェールセーフ機能を有する車外監視装置
KR20020033816A (ko) * 2000-07-19 2002-05-07 마츠시타 덴끼 산교 가부시키가이샤 감시시스템
JP2002046502A (ja) * 2000-08-02 2002-02-12 Calsonic Kansei Corp 表示制御装置
JP2002287243A (ja) * 2001-03-23 2002-10-03 Seiko Epson Corp ランプ寿命表示
JP4861574B2 (ja) * 2001-03-28 2012-01-25 パナソニック株式会社 運転支援装置
US6424273B1 (en) * 2001-03-30 2002-07-23 Koninklijke Philips Electronics N.V. System to aid a driver to determine whether to change lanes
JP2002316602A (ja) * 2001-04-24 2002-10-29 Matsushita Electric Ind Co Ltd 車載カメラの撮像画像表示方法及びその装置
JP3297040B1 (ja) * 2001-04-24 2002-07-02 松下電器産業株式会社 車載カメラの画像合成表示方法及びその装置
JP4051990B2 (ja) * 2001-05-18 2008-02-27 松下電器産業株式会社 安全運転支援装置及び画像処理装置
JP4860835B2 (ja) * 2001-06-11 2012-01-25 クラリオン株式会社 パノラマ画像表示方法及びパノラマ画像表示装置
DE60133052T2 (de) * 2001-07-30 2009-04-30 Nippon Seiki Co. Ltd., Nagaoka Fahrzeuganzeigevorrichtung
JP4786076B2 (ja) * 2001-08-09 2011-10-05 パナソニック株式会社 運転支援表示装置
JP2003098424A (ja) * 2001-09-25 2003-04-03 Fujitsu Ten Ltd 画像処理測距装置
JP2003104145A (ja) * 2001-09-28 2003-04-09 Matsushita Electric Ind Co Ltd 運転支援表示装置
JP2003123196A (ja) * 2001-10-10 2003-04-25 Denso Corp 車両の周辺監視装置及びプログラム
US7212653B2 (en) * 2001-12-12 2007-05-01 Kabushikikaisha Equos Research Image processing system for vehicle
JP4042436B2 (ja) * 2002-03-12 2008-02-06 三菱自動車工業株式会社 配光制御装置
JP4134785B2 (ja) * 2003-03-28 2008-08-20 株式会社デンソー 表示装置
US20050040939A1 (en) * 2003-08-21 2005-02-24 Jobes Janard J. Integrated motorcoach management system apparatus and method
JP4239771B2 (ja) * 2003-09-18 2009-03-18 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
JP2005167638A (ja) 2003-12-02 2005-06-23 Sharp Corp 移動体周囲監視装置、移動体および画像変換方法
US7561966B2 (en) * 2003-12-17 2009-07-14 Denso Corporation Vehicle information display system
JP2005196423A (ja) 2004-01-06 2005-07-21 Sumitomo Electric Ind Ltd 画像表示方法、画像表示システム、及び画像処理装置
JP4628683B2 (ja) * 2004-02-13 2011-02-09 富士重工業株式会社 歩行者検出装置、及び、その歩行者検出装置を備えた車両用運転支援装置
US7466338B2 (en) * 2004-02-26 2008-12-16 Yiling Xie Wide-angled image display system for automobiles
US7298247B2 (en) * 2004-04-02 2007-11-20 Denso Corporation Vehicle periphery monitoring system
JP2005326963A (ja) * 2004-05-12 2005-11-24 Fujitsu Ten Ltd 運転支援装置
JP4470041B2 (ja) * 2004-06-22 2010-06-02 株式会社エクォス・リサーチ 障害物検知支援装置
JP4443327B2 (ja) * 2004-07-01 2010-03-31 パイオニア株式会社 情報表示装置
US20070030212A1 (en) * 2004-07-26 2007-02-08 Matsushita Electric Industrial Co., Ltd. Device for displaying image outside vehicle
JP2006072830A (ja) * 2004-09-03 2006-03-16 Aisin Aw Co Ltd 運転支援システム及び運転支援モジュール
JP2006090844A (ja) 2004-09-24 2006-04-06 Denso Corp 注意喚起表示制御装置および注意喚起表示制御プログラム
JP2006127055A (ja) * 2004-10-27 2006-05-18 Denso Corp 車両用情報提示装置
JP4606336B2 (ja) 2005-02-21 2011-01-05 株式会社オートネットワーク技術研究所 車両周辺視認装置
US7782374B2 (en) * 2005-03-03 2010-08-24 Nissan Motor Co., Ltd. Processor and processing method for generating a panoramic image for a vehicle
JP4534922B2 (ja) * 2005-09-16 2010-09-01 株式会社デンソー 仮想先行車画像表示システム
JP4760272B2 (ja) * 2005-09-30 2011-08-31 アイシン精機株式会社 車両周辺監視装置及びセンサユニット
JP4579145B2 (ja) 2005-11-30 2010-11-10 アルパイン株式会社 車両周辺画像表示装置
KR100696392B1 (ko) * 2005-12-07 2007-03-19 주식회사단해 차량 외곽 모니터링 시스템 및 그 방법
JP4752486B2 (ja) * 2005-12-15 2011-08-17 株式会社日立製作所 撮像装置、映像信号の選択装置、運転支援装置、自動車
JP4645452B2 (ja) * 2006-01-10 2011-03-09 株式会社デンソー 車両用表示装置
JP4923647B2 (ja) * 2006-03-17 2012-04-25 株式会社デンソー 運転支援画像表示装置及びプログラム
JP2007300559A (ja) 2006-05-02 2007-11-15 Alpine Electronics Inc 車両周辺画像提供装置及び車両周辺画像における影補正方法
JP4940767B2 (ja) * 2006-06-05 2012-05-30 マツダ株式会社 車両周辺情報報知装置
US20090128630A1 (en) * 2006-07-06 2009-05-21 Nissan Motor Co., Ltd. Vehicle image display system and image display method
JP5159070B2 (ja) * 2006-08-31 2013-03-06 アルパイン株式会社 車両周辺画像表示装置及び表示方法
JP4914233B2 (ja) * 2007-01-31 2012-04-11 富士重工業株式会社 車外監視装置
JP5053776B2 (ja) * 2007-09-14 2012-10-17 株式会社デンソー 車両用視界支援システム、車載装置、及び、情報配信装置
JP4480755B2 (ja) * 2007-12-04 2010-06-16 カルソニックカンセイ株式会社 車両用ヘッドアップディスプレイ装置
JP2009225322A (ja) * 2008-03-18 2009-10-01 Hyundai Motor Co Ltd 車両用情報表示システム
JP5108837B2 (ja) * 2009-07-13 2012-12-26 クラリオン株式会社 車両用死角映像表示システムと車両用死角映像表示方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101534953B1 (ko) * 2013-12-02 2015-07-08 현대자동차주식회사 차량 위치 확인 시스템 및 방법
US11557030B2 (en) 2018-06-07 2023-01-17 Sony Semiconductor Solutions Corporation Device, method, and system for displaying a combined image representing a position of sensor having defect and a vehicle

Also Published As

Publication number Publication date
US20090237268A1 (en) 2009-09-24
JP2009225322A (ja) 2009-10-01
US8493233B2 (en) 2013-07-23
KR100921095B1 (ko) 2009-10-08

Similar Documents

Publication Publication Date Title
KR100921095B1 (ko) 차량용 정보표시시스템
JP6014442B2 (ja) 画像生成装置、画像表示システム、および、画像生成方法
JP5523448B2 (ja) 運転支援システム、情報表示装置、及び情報表示プログラム
JP5099451B2 (ja) 車両周辺確認装置
WO2012169355A1 (ja) 画像生成装置
JP5692403B2 (ja) 障害物警報装置
WO2012073722A1 (ja) 画像合成装置
JP5516998B2 (ja) 画像生成装置
JP2005242606A (ja) 画像生成装置、画像生成プログラム、及び画像生成方法
WO2013065341A1 (ja) 障害物警報装置
CN108698542A (zh) 车辆监控系统
TW201526638A (zh) 車用障礙物偵測顯示系統
TWI552907B (zh) 行車安全輔助系統和方法
JP5861449B2 (ja) 障害物警報装置
JP2011087006A (ja) 車両用表示装置
JP5974476B2 (ja) 障害物警報装置
JP5845909B2 (ja) 障害物警報装置
JP4228246B2 (ja) ノーズビューモニタ装置
KR20150055181A (ko) 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법
WO2013065122A1 (ja) 障害物警報装置
WO2013065121A1 (ja) 障害物警報装置
KR101709009B1 (ko) 어라운드 뷰 왜곡 보정 시스템 및 방법
WO2013065123A1 (ja) 障害物警報装置
JP5765576B2 (ja) 障害物警報装置
JP2005067370A (ja) 車両用表示装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120928

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20130927

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140929

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150930

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee