KR20190079485A - 화상 표시 장치 - Google Patents

화상 표시 장치 Download PDF

Info

Publication number
KR20190079485A
KR20190079485A KR1020180125817A KR20180125817A KR20190079485A KR 20190079485 A KR20190079485 A KR 20190079485A KR 1020180125817 A KR1020180125817 A KR 1020180125817A KR 20180125817 A KR20180125817 A KR 20180125817A KR 20190079485 A KR20190079485 A KR 20190079485A
Authority
KR
South Korea
Prior art keywords
image
rear side
angle
vehicle
view
Prior art date
Application number
KR1020180125817A
Other languages
English (en)
Other versions
KR102151654B1 (ko
Inventor
유카 시도치
고로 아사이
구니히로 스기하라
Original Assignee
도요타지도샤가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 도요타지도샤가부시키가이샤 filed Critical 도요타지도샤가부시키가이샤
Publication of KR20190079485A publication Critical patent/KR20190079485A/ko
Application granted granted Critical
Publication of KR102151654B1 publication Critical patent/KR102151654B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H04N13/395—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume with depth sampling, i.e. the volume being constructed from a stack or sequence of 2D image planes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B60R1/04—Rear-view mirror arrangements mounted inside vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0007—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)

Abstract

차량이 좌우 일방측으로 진행하는 경우에 있어서도, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성하는 것이 가능한 화상 표시 장치를 제공한다.
화상 표시 장치는, 차량(1)의 후방을 촬상 가능한 후방 촬상 수단(11B)에 의해 촬상된 후방 화상(111B)과 좌우 일방측에 있어서의 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단(11BL, 11BR)에 의해 촬상된 제1 후측방 화상(111BL, 111BR)을 합성하여 합성 화상을 생성하는 합성 수단(132)과, 합성 화상을 표시하는 표시 수단(14)을 구비하고, 합성 수단은, 합성 화상을 생성할 때에, 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기(121L, 121R)에 관한 제1 정보에 기초하여, 합성 화상 중에서 후방 화상 및 제1 후측방 화상이 차지하는 영역의 비율을 변경한다.

Description

화상 표시 장치{IMAGE DISPLAY APPARATUS}
본 발명은, 차량에 탑재된 복수의 촬상 수단이 촬상한 화상을 합성하고, 합성한 화상을 표시 가능한 화상 표시 장치의 기술 분야에 관한 것이다.
이와 같은 화상 표시 장치의 일례가 특허문헌 1 내지 특허문헌 2에 기재되어 있다. 구체적으로는, 특허문헌 1에는, 자차량의 후측방 영역을 촬상 가능한 카메라가 촬상한 후측방 화상과 자차량의 후방 영역을 촬상 가능한 카메라가 촬상한 후방 화상을, 가상 시점으로부터 자차량의 주위 후방을 바라본 화상이 되도록 자차량의 주위 후방에 있어서 끊김없이 합성함으로써 합성 화상을 생성하고, 생성한 합성 화상을 차 실내 미러가 갖는 표시 장치에 표시 가능한 화상 표시 장치가 기재되어 있다. 특허문헌 2에는, 자차량의 우측 후측방 영역을 촬상 가능한 카메라가 촬상한 우측 후측방 화상과 자차량의 좌측 후측방 영역을 촬상 가능한 카메라가 촬상한 좌측 후측방 화상을 자차량의 후방을 주행하고 있는 후방 차량까지의 거리에 따라서 트리밍하고, 트리밍한 좌측 후측방 화상 및 우측 후측방 화상을 합성함으로써 합성 화상을 생성하고, 생성한 합성 화상을 표시 가능한 화상 표시 장치가 기재되어 있다.
일본 특허 공개 제2008-230558호 공보 일본 특허 공개 제2006-338566호 공보
특허문헌 1에 기재된 화상 표시 장치는, 자차량의 진행 방향을 고려하지 않고, 후측방 화상과 후방 화상을 합성하고 있다. 따라서, 특허문헌 1에 기재된 화상 표시 장치는, 자차량이 좌우 일방측으로 진행하는(예를 들어, 우회전 혹은 좌회전하거나, 또는, 차선 변경하는) 경우에 있어서, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성할 수 없을 가능성이 있다는 기술적 문제를 갖고 있다.
본 발명은 차량에 탑재된 복수의 촬상 수단이 각각 촬상한 복수의 화상을 합성하여 합성 화상을 생성하는 화상 표시 장치이며, 차량이 좌우 일방측으로 진행하는 경우에 있어서도, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성하는 것이 가능한 화상 표시 장치를 제공하는 것을 과제로 한다.
본 발명의 화상 표시 장치의 제1 양태는, 차량의 후방을 촬상 가능한 후방 촬상 수단에 의해 촬상된 후방 화상과 좌우 일방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단에 의해 촬상된 제1 후측방 화상을 합성하여 합성 화상을 생성하는 합성 수단과, 상기 합성 화상을 표시하는 표시 수단을 구비하고, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기에 관한 제1 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경한다.
본 발명의 화상 표시 장치의 제2 양태는, 차량의 후방을 촬상 가능한 후방 촬상 수단에 의해 촬상된 후방 화상과 좌우 일방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단에 의해 촬상된 제1 후측방 화상을 합성하여 합성 화상을 생성하는 합성 수단과, 상기 합성 화상을 표시하는 표시 수단을 구비하고, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기에 관한 제1 정보에 기초하여, 상기 합성 화상 중 상기 후방 화상에 대응하는 제1 화상 부분 및 상기 제1 후측방 화상에 대응하는 제2 화상 부분 중 적어도 한쪽의 화각을 변경한다.
도 1은 본 실시 형태의 차량의 구성을 도시하는 블록도.
도 2의 (a)는 본 실시 형태의 차량에 있어서의 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 각각의 설치 위치 및 촬상 범위를 도시하는 평면도이며, 도 2의 (b)는 본 실시 형태의 차량에 있어서의 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 각각의 설치 위치 및 촬상 범위를 도시하는 측면도.
도 3은 본 실시 형태의 화상 합성 처리에 의해 생성되는 합성 화상을 도시하는 평면도.
도 4는 본 실시 형태의 화상 표시 동작의 흐름을 나타내는 흐름도.
도 5는 후방 화상 화각을 모식적으로 도시하는 평면도.
도 6의 (a)는 통상 화각에 대응하는 좌측 후측방 화상을 도시하는 평면도이며, 도 6의 (b)는 확대 화각에 대응하는 좌측 후측방 화상을 도시하는 평면도.
도 7의 (a)는 통상 화각에 대응하는 우측 후측방 화상을 도시하는 평면도이며, 도 7의 (b)는 확대 화각에 대응하는 우측 후측방 화상을 도시하는 평면도.
도 8의 (a)는 방향 지시기가 작동하고 있지 않는 경우에 생성되는 합성 화상의 일례를 도시하는 평면도이며, 도 8의 (b)는 우측 지시기가 작동하고 있는 경우에 생성되는 합성 화상의 일례를 도시하는 평면도.
도 9의 (a) 및 도 9의 (b)의 각각은, 조타각과 확대 화각의 관계를 나타내는 그래프.
도 10은 차량이 좌회전하는 경우에 조정된 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 촬상 범위, 차량이 우회전하는 경우에 조정된 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 촬상 범위, 및, 차량이 우회전도 좌회전도 하지 않는 경우에 조정된 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 촬상 범위를 도시하는 평면도.
도 11은 차량이 좌회전하는 경우에 선택된 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 촬상 범위, 차량이 우회전하는 경우에 선택된 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 촬상 범위, 및, 차량이 우회전도 좌회전도 하지 않는 경우에 선택된 후방 카메라, 좌측 후측방 카메라 및 우측 후측방 카메라의 촬상 범위를 도시하는 평면도.
도 12의 (a) 내지 도 12의 (b)의 각각은, 합성 화상의 일례를 도시하는 평면도.
이하, 도면을 참조하면서, 화상 표시 장치의 실시 형태에 대하여 설명한다. 이하에서는, 화상 표시 장치의 실시 형태가 탑재된 차량(1)을 사용하여 설명을 진행한다.
(1) 차량(1)의 구성
처음에, 도 1 및 도 2의 (a) 내지 도 2의 (b)를 참조하면서, 본 실시 형태의 차량(1)의 구성에 대하여 설명한다. 도 1은 본 실시 형태의 차량(1)의 구성을 도시하는 블록도이다. 도 2의 (a)는 본 실시 형태의 차량(1)에 있어서의 후방 카메라(11B), 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)의 설치 위치 및 촬상 범위를 도시하는 평면도이며, 도 2의 (b)는 본 실시 형태의 차량(1)에 있어서의 후방 카메라(11B), 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)의 설치 위치 및 촬상 범위를 도시하는 측면도이다. 또한, 이하의 설명에서는, 우측, 좌측 및 후방은, 특별한 주기가 없는 경우에는, 각각, 차량(1)의 진행 방향에 대한 우측, 좌측 및 후방을 의미하는 것으로 한다. 또한, 이하의 설명에서는, 필요에 따라, 우측이 +Y측에 대응하고, 좌측이 -Y측에 대응하며, 후방측이 -X측에 대응하고, 전방측이 +X측에 대응하며, 상측이 +Z측에 대응하고, 또한, 하측이 -Z측에 대응하는 XYZ 좌표계를 사용하여, 설명을 진행한다.
도 1에 도시한 바와 같이, 차량(1)은 후술하는 부기에 있어서의 「후방 촬상 수단」의 일 구체예인 후방 카메라(11B)와, 후술하는 부기에 있어서의 「제1 및 제2 후측방 촬상 수단 중 어느 한쪽」의 일 구체예인 좌측 후측방 카메라(11BL)와, 후술하는 부기에 있어서의 「제1 및 제2 후측방 촬상 수단 중 어느 다른 쪽」의 일 구체예인 우측 후측방 카메라(11BR)와, 방향 지시기(121)와, 조타각 센서(122)와, ECU(Electrical Control Unit)(13)와, 후술하는 부기에 있어서의 「표시 수단」의 일 구체예인 디스플레이(14)를 구비한다.
후방 카메라(11B)는, 도 2의 (a) 및 도 2의 (b)에 도시한 바와 같이, 차량(1)의 후방(특히, 바로 뒤)에 위치하는 후방 영역을 촬상하는 촬상 기기이다. 후방 영역은, 차량(1)의 차 실내에 백미러가 설치되어 있다고 가정한 경우에 있어서, 당해 백미러에 비쳐 보이는 영역 중 적어도 일부를 포함하는 영역이다. 즉, 본 실시 형태에서는, 후방 카메라(11B)는, 차량(1)의 차 실내에 설치되는 백미러를 대신하는, 소위 전자 미러의 일부를 구성한다. 차량(1)의 후방 영역을 촬상하기 위해, 후방 카메라(11B)의 촬영 중심은, 차량(1)으로부터 곧장 후방에 위치하고 있다. 즉, 후방 카메라(11B)가 구비하는 렌즈 등의 광학계의 광축은, 차량(1)으로부터 곧장 후방을 향하여 연장된다. 그 결과, 후방 카메라(11B)의 촬상 범위(혹은, 화각) IRB는, 후방 영역을 포함하도록 설정된다.
좌측 후측방 카메라(11BL)는, 도 2의 (a) 및 도 2의 (b)에 도시한 바와 같이, 차량(1)의 후방(특히, 좌측방의 후방(즉, 좌측 후측방))에 위치하는 좌측 후측방 영역을 촬상하는 촬상 기기이다. 좌측 후측방 영역은, 차량(1)의 좌측에 있는 좌측 도어에 도어 미러가 설치되어 있다고 가정한 경우에 있어서, 좌측 도어가 폐쇄 상태에 있는 상황 하에서 당해 좌측 도어에 설치된 도어 미러에 비쳐 보이는 영역 중 적어도 일부에 포함되는 영역이다. 즉, 본 실시 형태에서는, 좌측 후측방 카메라(11BL)는, 차량(1)의 좌측 도어에 설치되는 도어 미러를 대신하는, 소위 전자 미러의 일부를 구성한다. 차량(1)의 좌측 후측방 영역을 촬상하기 위해, 좌측 후측방 카메라(11BL)의 촬영 중심은, 차량(1)의 후방으로부터 좌측에 위치하고 있다. 바꿔 말하면, 좌측 후측방 카메라(11BL)의 촬영 중심은, 후방 카메라(11B)의 촬영 중심보다도 좌측에 위치하고 있다. 즉, 좌측 후측방 카메라(11BL)가 구비하는 렌즈 등의 광학계의 광축은, 상술한 후방 카메라(11B)가 구비하는 광학계의 광축보다도 좌측의 공간에 있어서, 후방을 향하여 연장된다. 그 결과, 좌측 후측방 카메라(11BL)의 촬상 범위(혹은, 화각) IRBL은, 좌측 후측방 영역을 포함하도록 설정된다. 또한, 촬상 범위 IRBL은, 촬상 범위 IRB와 부분적으로 중복되어 있어도 된다.
우측 후측방 카메라(11BR)는, 도 2의 (a) 및 도 2의 (b)에 도시한 바와 같이, 차량(1)의 (특히, 우측방의 후방(즉, 우측 후측방))에 위치하는 우측 후측방 영역을 촬상하는 촬상 기기이다. 우측 후측방 영역은, 차량(1)의 우측에 있는 우측 도어에 도어 미러가 설치되어 있다고 가정한 경우에 있어서, 우측 도어가 폐쇄 상태에 있는 상황 하에서 당해 우측 도어에 설치된 도어 미러에 비쳐 보이는 영역 중 적어도 일부에 포함되는 영역이다. 즉, 본 실시 형태에서는, 우측 후측방 카메라(11BR)는, 차량(1)의 우측 도어에 설치되는 도어 미러를 대신하는, 소위 전자 미러의 일부를 구성한다. 차량(1)의 우측 후측방 영역을 촬상하기 위해, 우측 후측방 카메라(11BR)의 촬영 중심은, 차량(1)의 후방으로부터 우측에 위치하고 있다. 바꿔 말하면, 우측 후측방 카메라(11BR)의 촬영 중심은, 후방 카메라(11B)의 촬영 중심보다도 우측에 위치하고 있다. 즉, 우측 후측방 카메라(11BR)가 구비하는 렌즈 등의 광학계의 광축은, 상술한 후방 카메라(11B)가 구비하는 광학계의 광축보다도 우측의 공간에 있어서, 후방을 향하여 연장된다. 그 결과, 우측 후측방 카메라(11BR)의 촬상 범위(혹은, 화각) IRBR은, 우측 후측방 영역을 포함하도록 설정된다. 또한, 촬상 범위 IRBR은, 촬상 범위 IRB와 부분적으로 중복되어 있어도 된다.
방향 지시기(121)는 차량(1)이 좌측 또는 우측으로 진행할[예를 들어, 차량(1)이 우회전, 좌회전 또는 차선 변경할] 때에, 차량(1)의 진행 방향을 차량(1)의 주위에 통지하도록 작동하는 장치이다. 방향 지시기(121)는 차량(1)이 좌측으로 진행하는 경우에 작동하는 좌측 지시기(121L)와, 차량(1)이 우측으로 진행하는 경우에 작동하는 우측 지시기(121R)를 포함한다. 본 실시 형태에서는, 좌측 지시기(121L)는, 차량(1)의 상대적으로 좌측에 설치되는 램프인 것으로 한다. 또한, 우측 지시기(121R)는, 차량(1)의 상대적으로 우측에 설치되는 램프인 것으로 한다. 이 경우, 차량(1)이 우회전하거나 또는 우측으로 차선 변경하는 경우에는, 우측 지시기(121R)가 점멸하는 한편 좌측 지시기(121L)가 소등된다. 한편, 차량(1)이 좌회전하거나 또는 좌측으로 차선 변경하는 경우에는, 좌측 지시기(121L)가 점멸하는 한편 우측 지시기(121R)가 소등된다. 또한, 좌측 지시기(121L)의 작동 상태에 관한 정보는, 좌측 지시기(121L)로부터 ECU(13)에 대하여 출력된다. 마찬가지로, 우측 지시기(121R)의 작동 상태에 관한 정보는, 우측 지시기(121R)로부터 ECU(13)에 대하여 출력된다.
조타각 센서(122)는 스티어링 휠의 회전 각도인 조타각을 검출한다. 스티어링 휠은, 차량(1)의 진행 방향을 제어하기 위해 차량(1)의 탑승인에 의해 조작된다. 탑승인이 스티어링 휠을 조작하면, 차량(1)의 전타륜은, 스티어링 휠의 회전에 맞추어 전타된다. 따라서, 조타각은, 전타륜의 전타각과 등가이다. 조타각 센서(122)의 검출 결과에 관한 정보(즉, 조타각에 관한 정보)는 조타각 센서(122)로부터 ECU(13)에 대하여 출력된다.
ECU(13)는, 차량(1)의 전체 동작을 제어한다. 본 실시 형태에서는 특히, ECU(13)는, 후방 카메라(11B)가 촬상한 화상(즉, 후방 영역의 상황을 나타내는 화상), 좌측 후측방 카메라(11BL)가 촬상한 화상(즉, 좌측 후측방 영역의 상황을 나타내는 화상), 및 우측 후측방 카메라(11BR)가 촬상한 화상(즉, 우측 후측방 영역의 상황을 나타내는 화상)을 디스플레이(14)에 표시하기 위한 화상 표시 동작을 행한다. 이하, 설명의 편의상, 후방 카메라(11B)가 촬상한 화상을, "후방 화상(111B)"이라 칭하고, 좌측 후측방 카메라(11BL)가 촬상한 화상을, "좌측 후측방 화상(111BL)"이라 칭하고, 우측 후측방 카메라(11BR)가 촬상한 화상을, "우측 후측방 화상(111BR)"이라 칭한다. 화상 표시 동작을 행하기 위해, ECU(13)는, ECU(13)의 내부에 논리적으로 실현되는 처리 블록으로서, 화상 취득부(131)와, 후술하는 부기에 있어서의 「합성 수단」의 일 구체예인 화상 합성부(132)를 구비한다.
화상 취득부(131)는 후방 카메라(11B), 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)로부터, 각각, 후방 화상(111B), 좌측 후측방 화상(111BL) 및 우측 후측방 화상(111BR)을 취득한다.
화상 합성부(132)는 후방 화상(111B), 좌측 후측방 화상(111BL) 및 우측 후측방 화상(111BR)을 합성하는 화상 합성 처리를 행함으로써, 합성 화상(111C)을 생성한다. 구체적으로는, 화상 합성부(132)는 후방 화상(111B)을 트리밍함으로써, 후방 화상(111B)으로부터, 후방 화상(111B)의 적어도 일부의 화상 부분에 상당하는 후방 화상(112B)을 추출한다. 또한, 화상 합성부(132)는 좌측 후측방 화상(111BL)을 트리밍함으로써, 좌측 후측방 화상(111BL)으로부터, 좌측 후측방 화상(111BL)의 적어도 일부의 화상 부분에 상당하는 좌측 후측방 화상(112BL)을 추출한다. 또한, 화상 합성부(132)는 우측 후측방 화상(111BR)을 트리밍함으로써, 우측 후측방 화상(111BR)으로부터, 우측 후측방 화상(111BR)의 적어도 일부의 화상 부분에 상당하는 우측 후측방 화상(112BR)을 추출한다. 그 후, 화상 합성부(132)는 후방 영역의 좌측에 좌측 후측방 영역이 위치하고, 또한, 후방 영역의 우측에 우측 후측방 영역이 위치하는 합성 화상(111C)을 생성한다. 즉, 화상 합성부(132)는, 도 3에 도시한 바와 같이, 후방 화상(112B)의 좌측에 좌측 후측방 화상(112BL)이 인접하고, 또한, 후방 화상(112B)의 우측에 우측 후측방 화상(112BR)이 인접하는 합성 화상(111C)을 생성한다.
또한, 화상 합성부(132)는 생성된 합성 화상(111C)을 표시하도록, 디스플레이(14)를 제어한다. 또한, 디스플레이(14)는 차량(1)의 차 실내에 설치되어 있고, 차 실내에 있는 차량(1)의 탑승인에 대하여 합성 화상(111C)을 표시한다.
(2) 화상 표시 동작의 흐름
계속해서, 도 4를 참조하면서, 본 실시 형태의 화상 표시 동작의 흐름에 대하여 보다 상세하게 설명한다. 도 4는 본 실시 형태의 화상 표시 동작의 흐름을 나타내는 흐름도이다.
도 4에 도시한 바와 같이, 화상 합성부(132)는 좌측 지시기(121L)가 작동하고 있는지 여부를 판정한다(스텝 S11). 즉, 화상 합성부(132)는 좌측 지시기(121L)가 점멸하고 있는지 여부를 판정한다(스텝 S11).
스텝 S11의 판정의 결과, 좌측 지시기(121L)가 작동하고 있다(즉, 점멸하고 있다)고 판정된 경우에는(스텝 S11 : "예"), 화상 합성부(132)는, 조타각이, 소정의 역치 TH1보다도 큰지 여부를 판정한다(스텝 S12). 스텝 S12에서 사용되는 조타각은, 중립 상태에 있는 스티어링 휠을 기준으로, 스티어링 휠이 반시계 방향(즉, 전타륜을 좌측으로 전타하는 방향)으로 얼마나 회전되었는지를 나타내는 회전 각도를 의미한다. 역치 TH1은, 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있는 상황과, 탑승인이 차량(1)을 현재 주행하고 있는 주행 차선의 좌측에 인접하는 주행 차선으로 차선 변경할 의도를 갖고 있는 상황을, 조타각으로부터 구별 가능한 적절한 값으로 설정된다. 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있는 경우에는, 탑승인이 차량(1)을 차선 변경시킬 의도를 갖고 있는 경우와 비교하여, 조타각이 커질 가능성이 높다. 이 때문에, 조타각이 역치 TH1보다도 큰 상황은, 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있을 가능성이 상대적으로 높은 상황에 상당한다. 한편, 조타각이 역치 TH1보다도 작은 상황은, 탑승인이 차량(1)을 차선 변경시킬 의도를 갖고 있을 가능성이 상대적으로 높은 상황에 상당한다.
스텝 S12의 판정의 결과, 조타각이 역치 TH1보다도 크다고 판정된 경우에는(스텝 S12 : "예"), 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있다고 추정된다. 이 경우에는, 화상 합성부(132)는 후방 화상(112B)에 관한 파라미터인 후방 화상 화각 θB를, 소정의 통상 화각 θB_N으로 설정한다(스텝 S15). 또한, 화상 합성부(132)는 좌측 후측방 화상(112BL)에 관한 파라미터인 좌측 후방 화상 화각 θBL을, 후술하는 소정의 통상 화각 θBL_N보다도 큰 소정의 확대 화각 θBL_L로 설정한다(스텝 S15). 또한, 화상 합성부(132)는 우측 후측방 화상(112BR)에 관한 파라미터인 우측 후방 화상 화각 θBR을, 제로로 설정한다(스텝 S15).
후방 화상 화각 θB는, 후방 화상(112B)에 찍혀 있는 광경의 범위를, 어떤 가상적인 시점으로부터의 각도로 나타내기 위한 파라미터이다. 후술하는 바와 같이, 후방 화상(112B)이 후방 화상(111B)의 적어도 일부인 것을 고려하면, 후방 화상 화각 θB는, 후방 화상(111B)으로부터의 후방 화상(112B)의 추출 범위를, 어떤 가상적인 시점으로부터의 각도로 나타내기 위한 파라미터라고도 할 수 있다. 구체적으로는, 도 5에 도시한 바와 같이, 후방 화상(112B)은, 후방 화상(111B)의 적어도 일부의 화상 부분에 상당한다. 즉, 후방 화상(112B)은, 후방 화상(111B)의 적어도 일부를 트리밍한 후에 남는 화상 부분에 상당한다. 이 후방 화상(112B)의 추출 범위[즉, 후방 화상(112B)에 찍혀 있는 광경의 범위]는, 가상적인 시점 P로부터 당해 추출 범위의 외측 에지로 연장되는 가상적인 선 또는 면이 이루는 각도로 표현 가능하다. 이 각도가, 후방 화상 화각 θB에 상당한다. 도 5에 도시한 바와 같이, 전형적으로는, 후방 화상 화각 θB는, 가상적인 시점 P로부터 후방 화상(112B)의 추출 범위 중 수직 방향으로 연장되는 한 쌍의 외측 에지로 연장되는 가상적인 선 또는 면이 이루는 각도(즉, 수평 방향의 각도) θBh, 및, 가상적인 시점 P로부터 후방 화상(112B)의 추출 범위 중 수평 방향으로 연장되는 한 쌍의 외측 에지로 연장되는 가상적인 선 또는 면이 이루는 각도(즉, 수직 방향의 각도) θBv를 포함한다. 본 실시 형태에서는, 후방 화상 화각 θB는, 수평 방향의 각도에 상당하는 후방 화상 화각 θBh를 의미하는 것으로 한다. 단, 후방 화상 화각 θB는, 후방 화상 화각 θBh에 더하여 또는 대신에, 수직 방향의 각도에 상당하는 후방 화상 화각 θBv를 의미하고 있어도 된다. 후방 화상 화각 θB가 후방 화상 화각 θBh 및 후방 화상 화각 θBv의 양쪽을 의미하고 있는 경우에는, 스텝 S15에 있어서의 「후방 화상 화각 θB를 통상 화각 θB_N으로 설정하는」 동작은, 후방 화상 화각 θBh를, 수평 방향에 대응하는 통상 화각 θBh_N으로 설정하고, 또한, 후방 화상 화각 θBv를, 수직 방향에 대응하는 통상 화각 θBv_N으로 설정하는 동작을 의미한다.
좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대해서도, 후방 화상 화각 θB와 마찬가지이다. 즉, 좌측 후방 화상 화각 θBL은, 좌측 후측방 화상(111BL)으로부터의 좌측 후측방 화상(112BL)의 추출 범위[바꿔 말하면, 좌측 후측방 화상(112BL)에 찍혀 있는 광경의 범위]를, 어떤 가상적인 시점으로부터의 각도(본 실시 형태에서는, 수평 방향의 각도)로 나타내기 위한 파라미터이다. 마찬가지로, 우측 후방 화상 화각 θBR은, 우측 후측방 화상(111BR)으로부터의 우측 후측방 화상(112BR)의 추출 범위[바꿔 말하면, 우측 후측방 화상(112BR)에 찍혀 있는 광경의 범위]를, 어떤 가상적인 시점으로부터의 각도(본 실시 형태에서는, 수평 방향의 각도)로 나타내기 위한 파라미터이다.
다시 도 4에 있어서, 한편, 스텝 S12의 판정의 결과, 조타각이 역치 TH1 이하라고 판정된 경우에는(스텝 S12 : "아니오"), 탑승인은, 차량(1)을 차선 변경시킬 의도를 갖고 있다고 추정된다. 혹은, 경우에 따라서는, 탑승인이 차량(1)을 좌측으로 진행시킬 의도를 갖고 있지 않음에도 불구하고, 탑승인이 잘못하여 좌측 지시기(121L)를 작동시켜 버렸다고 추정된다. 이 경우에는, 화상 합성부(132)는 후방 화상 화각 θB를, 통상 화각 θB_N으로 설정한다(스텝 S17). 또한, 화상 합성부(132)는 좌측 후방 화상 화각 θBL을, 소정의 통상 화각 θBL_N으로 설정한다(스텝 S17). 또한, 화상 합성부(132)는 우측 후방 화상 화각 θBR을, 소정의 통상 화각 θBR_N으로 설정한다(스텝 S17).
한편, 스텝 S11의 판정의 결과, 좌측 지시기(121L)가 작동하고 있지 않다(즉, 소등되어 있다)고 판정된 경우에는(스텝 S11 : "아니오"), 화상 합성부(132)는 우측 지시기(121R)가 작동하고 있는지 여부를 판정한다(스텝 S13). 즉, 화상 합성부(132)는 우측 지시기(121R)가 점멸하고 있는지 여부를 판정한다(스텝 S13).
스텝 S13의 판정의 결과, 우측 지시기(121R)가 작동하고 있다(즉, 점멸하고 있다)고 판정된 경우에는(스텝 S13 : "예"), 화상 합성부(132)는, 조타각이, 소정의 역치 TH2보다도 큰지 여부를 판정한다(스텝 S14). 스텝 S14에서 사용되는 조타각은, 중립 상태에 있는 스티어링 휠을 기준으로, 스티어링 휠이 시계 방향(즉, 전타륜을 우측으로 전타하는 방향)으로 얼마나 회전되었는지를 나타내는 회전 각도를 의미한다. 역치 TH2는, 탑승인이 차량(1)을 우회전시킬 의도를 갖고 있는 상황과, 탑승인이 차량(1)을 현재 주행하고 있는 주행 차선의 우측에 인접하는 주행 차선으로 차선 변경할 의도를 갖고 있는 상황을, 조타각으로부터 구별 가능한 적절한 값으로 설정된다. 탑승인이 차량(1)을 우회전시킬 의도를 갖고 있는 경우에는, 탑승인이 차량(1)을 차선 변경시킬 의도를 갖고 있는 경우와 비교하여, 조타각이 커질 가능성이 높다. 이 때문에, 조타각이 역치 TH2보다도 큰 상황은, 탑승인이 차량(1)을 우회전시킬 의도를 갖고 있을 가능성이 상대적으로 높은 상황에 상당한다. 한편, 조타각이 역치 TH2보다도 작은 상황은, 탑승인이 차량(1)을 차선 변경시킬 의도를 갖고 있을 가능성이 상대적으로 높은 상황에 상당한다. 이와 같은 역치 TH2는, 통상은 상술한 역치 TH1과 동일하게 된다. 단, 역치 TH2로서, 역치 TH1과는 상이한 값이 사용되어도 된다.
스텝 S14의 판정의 결과, 조타각이 역치 TH2보다도 크다고 판정된 경우에는(스텝 S14 : "예"), 탑승인이 차량(1)을 우회전시킬 의도를 갖고 있다고 추정된다. 이 경우에는, 화상 합성부(132)는 후방 화상 화각 θB를, 통상 화각 θB_N으로 설정한다(스텝 S16). 또한, 화상 합성부(132)는 좌측 후방 화상 화각 θBL을, 제로로 설정한다(스텝 S16). 또한, 화상 합성부(132)는 우측 후방 화상 화각 θBR을, 상술한 통상 화각 θBR_N보다도 큰 소정의 확대 화각 θBR_L로 설정한다(스텝 S16).
한편, 스텝 S14의 판정의 결과, 조타각이 역치 TH2 이하라고 판정된 경우에는(스텝 S14 : "아니오"), 탑승인이 차량(1)을 차선 변경시킬 의도를 갖고 있다고 추정된다. 혹은, 경우에 따라서는, 탑승인이 차량(1)을 우측으로 진행시킬 의도를 갖고 있지 않음에도 불구하고, 탑승인이 잘못하여 우측 지시기(121R)를 작동시켜 버렸다고 추정된다. 이 경우에는, 화상 합성부(132)는 후방 화상 화각 θB, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR을, 각각, 통상 화각 θB_N, 통상 화각 θBL_N 및 통상 화각 θBR_N으로 설정한다(스텝 S17).
한편, 스텝 S13의 판정의 결과, 우측 지시기(121R)가 작동하고 있지 않다(즉, 소등되어 있다)고 판정된 경우에도(스텝 S13 : "아니오"), 화상 합성부(132)는 후방 화상 화각 θB, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR을, 각각, 통상 화각 θB_N, 통상 화각 θBL_N 및 통상 화각 θBR_N으로 설정한다(스텝 S17).
그 후, 화상 합성부(132)는 후방 화상(111B)으로부터, 스텝 S15 내지 S17 중 어느 하나에서 설정된 후방 화상 화각 θB에 대응하는 화상 부분을, 후방 화상(112B)으로서 추출한다(스텝 S21). 또한, 도 4에 도시한 예에서는, 후방 화상 화각 θB는, 통상 화각 θB_N으로 설정되어 있다. 이 때문에, 후방 화상(111B)에서는, 통상 화각 θB_N에 대응하는 화상 부분이, 후방 화상(112B)으로서 추출된다.
또한, 화상 합성부(132)는 좌측 후측방 화상(111BL)으로부터, 스텝 S15 내지 S17 중 어느 하나에서 설정된 좌측 후방 화상 화각 θBL에 대응하는 화상 부분을, 좌측 후측방 화상(112BL)으로서 추출한다(스텝 S21). 예를 들어, 좌측 후방 화상 화각 θBL이 통상 화각 θBL_N으로 설정되어 있는 경우에는, 도 6의 (a)에 도시한 바와 같이, 좌측 후측방 화상(111BL)으로부터, 통상 화각 θBL_N에 대응하는 상대적으로 작은 화상 부분이, 좌측 후측방 화상(112BL)으로서 추출된다. 예를 들어, 좌측 후방 화상 화각 θBL이 확대 화각 θBL_L로 설정되어 있는 경우에는, 도 6의 (b)에 도시한 바와 같이, 좌측 후측방 화상(111BL)으로부터, 확대 화각 θBL_L에 대응하는 상대적으로 큰 화상 부분이, 좌측 후측방 화상(112BL)으로서 추출된다. 예를 들어, 좌측 후방 화상 화각 θBL이 제로로 설정되어 있는 경우에는, 좌측 후측방 화상(111BL)으로부터 좌측 후측방 화상(112BL)이 추출되는 일은 없다.
화상 합성부(132)는, 좌측 후측방 화상(111BL) 중에 있어서, 확대 화각 θBL_L에 대응하는 좌측 후측방 화상(112BL)의 좌측의 변[즉, 후방 화상(112B)과의 경계를 형성하는 우측의 변의 반대측의 변](1121_L)의 위치가, 통상 화각 θBL_N에 대응하는 좌측 후측방 화상(112BL)의 좌측의 변(1121_N)의 위치보다도 좌측에 위치하도록, 좌측 후측방 화상(112BL)을 추출하는 것이 바람직하다. 그 결과, 확대 화각 θBL_L에 대응하는 좌측 후측방 화상(112BL)에는, 통상 화각 θBL_N에 대응하는 좌측 후측방 화상(112BL)에 찍혀 있는 광경보다도 좌측의 광경이 찍힌다. 한편, 화상 합성부(132)는 좌측 후측방 화상(111BL) 중에 있어서, 확대 화각 θBL_L에 대응하는 좌측 후측방 화상(112BL)의 우측의 변[즉, 후방 화상(112B)과의 경계를 형성하는 변](1122_L)의 위치가, 통상 화각 θBL_N에 대응하는 좌측 후측방 화상(112BL)의 우측의 변(1122_N)의 위치와 동일하게 되도록 또는 상이하도록, 좌측 후측방 화상(112BL)을 추출한다.
또한, 화상 합성부(132)는 우측 후측방 화상(111BR)으로부터, 스텝 S15 내지 S17 중 어느 하나에서 설정된 우측 후방 화상 화각 θBR에 대응하는 화상 부분을, 우측 후측방 화상(112BR)으로서 추출한다(스텝 S21). 예를 들어, 우측 후방 화상 화각 θBR이 통상 화각 θBR_N으로 설정되어 있는 경우에는, 도 7의 (a)에 도시한 바와 같이, 우측 후측방 화상(111BR)으로부터, 통상 화각 θBR_N에 대응하는 상대적으로 작은 화상 부분이, 우측 후측방 화상(112BR)으로서 추출된다. 예를 들어, 우측 후방 화상 화각 θBR이 확대 화각 θBR_L로 설정되어 있는 경우에는, 도 7의 (b)에 도시한 바와 같이, 우측 후측방 화상(111BR)으로부터, 확대 화각 θBR_L에 대응하는 상대적으로 큰 화상 부분이, 우측 후측방 화상(112BR)으로서 추출된다. 예를 들어, 우측 후방 화상 화각 θBR이 제로로 설정되어 있는 경우에는, 우측 후측방 화상(111BR)으로부터 우측 후측방 화상(112BR)이 추출되는 일은 없다.
화상 합성부(132)는, 우측 후측방 화상(111BR) 중에 있어서, 확대 화각 θBR_L에 대응하는 우측 후측방 화상(112BR)의 우측의 변[즉, 후방 화상(112B)과의 경계를 형성하는 좌측의 변의 반대측의 변](1123_L)의 위치가, 통상 화각 θBR_N에 대응하는 우측 후측방 화상(112BR)의 우측의 변(1123_N)의 위치보다도 우측에 위치하도록, 우측 후측방 화상(112BR)을 추출하는 것이 바람직하다. 그 결과, 확대 화각 θBR_L에 대응하는 우측 후측방 화상(112BR)에는, 통상 화각 θBR_N에 대응하는 우측 후측방 화상(112BR)에 찍혀 있는 광경보다도 우측의 광경이 찍힌다. 한편, 화상 합성부(132)는 우측 후측방 화상(111BR) 중에 있어서, 확대 화각 θBR_L에 대응하는 우측 후측방 화상(112BR)의 좌측의 변[즉, 후방 화상(112B)과의 경계를 형성하는 변](1124_L)의 위치가, 통상 화각 θBR_N에 대응하는 우측 후측방 화상(112BR)의 좌측의 변(1124_N)의 위치와 동일하게 되거나 또는 상이하도록, 우측 후측방 화상(112BR)을 추출한다.
그 후, 화상 합성부(132)는, 스텝 S21에서 추출한 후방 화상(112B), 좌측 후측방 화상(112BL) 및 우측 후측방 화상(112BR)을 사용하여, 후방 화상(112B)의 좌측에 좌측 후측방 화상(112BL)이 인접하고, 또한, 후방 화상(112B)의 우측에 우측 후측방 화상(112BR)이 인접하는 합성 화상(111C)을 생성한다(스텝 S22). 단, 상술한 바와 같이, 좌측 후방 화상 화각 θBL이 제로로 설정되어 있는 경우에는, 좌측 후측방 화상(112BL)이 추출되지 않는다. 이 경우에는, 화상 합성부(132)는 후방 화상(112B)의 우측에 우측 후측방 화상(112BR)이 인접하는 한편 좌측 후측방 화상(112BL)이 포함되지 않는 합성 화상(111C)을 생성한다. 마찬가지로, 상술한 바와 같이, 우측 후방 화상 화각 θBR이 제로로 설정되어 있는 경우에는, 우측 후측방 화상(112BR)이 추출되지 않는다. 이 경우에는, 화상 합성부(132)는 후방 화상(112B)의 좌측에 좌측 후측방 화상(112BL)이 인접하는 한편 우측 후측방 화상(112BR)이 포함되지 않는 합성 화상(111C)을 생성한다.
합성 화상(111C)을 생성하는 과정에서, 후방 화상(112B), 좌측 후측방 화상(112BL) 및 우측 후측방 화상(112BR)이 합성 화상(111C) 중에서 끊김없이 연결되도록, 화상 합성부(132)는 화상 합성 처리의 일부로서, 시점 변환 처리, 화상 회전 처리, 확대 축소 처리 및 화상 성형 처리 중 적어도 하나를 행해도 된다. 시점 변환 처리는, 후방 화상(111B 및 112B), 좌측 후측방 화상(111BL 및 112BL), 및, 우측 후측방 화상(111BR 및 112BR) 중 적어도 하나의 시점을 변환하는 처리이다. 화상 회전 처리는, 후방 화상(111B 및 112B), 좌측 후측방 화상(111BL 및 112BL), 및, 우측 후측방 화상(111BR 및 112BR) 중 적어도 하나를 회전시키는 처리이다. 확대 축소 처리는, 후방 화상(111B 및 112B), 좌측 후측방 화상(111BL 및 112BL), 및, 우측 후측방 화상(111BR 및 112BR) 중 적어도 하나를 확대 또는 축소하는 처리이다. 화상 성형 처리는, 후방 화상(111B 및 112B), 좌측 후측방 화상(111BL 및 112BL), 및, 우측 후측방 화상(111BR 및 112BR) 중 적어도 하나의 형상을 변환하는 처리이다.
좌측 후방 화상 화각 θBL이 확대 화각 θBL_L로 설정되어 있는 경우에는, 좌측 후방 화상 화각 θBL이 통상 화각 θBL_N으로 설정되어 있는 경우와 비교하여, 좌측 후측방 화상(112BL)이 상대적으로 커진다. 이 때문에, 화상 합성부(132)는 좌측 후방 화상 화각 θBL이 확대 화각 θBL_L로 설정되어 있는 경우에는, 좌측 후방 화상 화각 θBL이 통상 화각 θBL_N으로 설정되어 있는 경우와 비교하여, 합성 화상(111C) 중에서 좌측 후측방 화상(112BL)이 차지하는 영역의 비율이 커지도록, 합성 화상(111C)을 생성한다. 즉, 화상 합성부(132)는 좌측 후방 화상 화각 θBL이 커질수록, 합성 화상(111C) 중에서 좌측 후측방 화상(112BL)이 차지하는 영역의 비율이 커지도록, 합성 화상(111C)을 생성한다. 마찬가지의 이유로부터, 화상 합성부(132)는 우측 후방 화상 화각 θBR이 커질수록, 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율이 커지도록, 합성 화상(111C)을 생성한다. 또한, 도 8의 (a)는 후방 화상 화각 θB, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR이 각각 통상 화각 θB_N, θBL_N 및 θBR_N으로 설정되어 있는 경우에 생성되는 합성 화상(111C)의 일례를 도시한다. 한편, 도 8의 (b)는 후방 화상 화각 θB, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR이 각각 통상 화각 θB_L, 제로 및 확대 화각 θBR_L로 설정되어 있는 경우[즉, 차량(1)이 우회전하는 경우]에 생성되는 합성 화상(111C)을 도시한다.
그 후, 디스플레이(14)는 스텝 S22에서 생성된 합성 화상(111C)을 표시한다(스텝 S23).
또한, 상술한 설명에서는, 스텝 S12의 판정의 결과, 조타각이 역치 TH1과 동일하다고 판정된 경우에는, 조타각이 역치 TH1보다도 작다고 판정된 경우에 행해지는 처리가 행해지고 있지만, 조타각이 역치 TH1보다도 크다고 판정된 경우에 행해지는 처리가 행해져도 된다. 마찬가지로, 상술한 설명에서는, 스텝 S14의 판정의 결과, 조타각이 역치 TH2와 동일하다고 판정된 경우에는, 조타각이 역치 TH2보다도 작다고 판정된 경우에 행해지는 처리가 행해지고 있지만, 조타각이 역치 TH2보다도 크다고 판정된 경우에 행해지는 처리가 행해져도 된다.
(3) 기술적 효과
이상 설명한 바와 같이, 본 실시 형태의 화상 표시 동작에 따르면, 방향 지시기(121)의 작동 상태에 관계없이 후방 화상 화각 θB, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR이 고정되고 또한 합성 화상(111C) 중에서 후방 화상(112B), 좌측 후측방 화상(112BL) 및 우측 후측방 화상(112BR)이 차지하는 영역의 비율이 고정된 비교예의 화상 표시 동작과 비교하여, 차량(1)이 우회전 또는 좌회전하는 경우에 있어서, 차량(1)의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상(111C)을 생성 가능하다.
구체적으로는, 차량이 우회전하는 경우[즉, 탑승인이 차량(1)을 우회전시킬 의도를 갖고 있다고 추정되는 경우이며, 우측 지시기(121R)가 작동하고 또한 조타각이 역치 TH2보다 큰 경우]에는, 탑승인은, 차량의 우측 후측방의 상황에 대하여 보다 많은 주의를 기울이는 것이 바람직하다. 본 실시 형태에서는, 차량(1)이 우회전하는 경우에는, 차량(1)이 우회전하지 않는 경우와 비교하여, 우측 후방 화상 화각 θBR이 커진다. 우측 후방 화상 화각 θBR이 상대적으로 커지면, 도 8의 (b)에 도시한 바와 같이, 우측 후방 화상 화각 θBR에 대응하는 우측 후측방 화상(112BR)에는 보다 넓은 범위의 광경이 찍힌다. 즉, 우측 후측방 화상(112BR)의 사각[즉, 우측 후측방 화상(112BR)에 찍히지 않는 사각]이 상대적으로 작아진다. 그 결과, 우측 후방 화상 화각 θBR이 변경되지 않으면 우측 후측방 화상(112BR)의 사각에 포함되어 버린 물체(예를 들어, 보행자 등)가, 우측 후측방 화상(112BR)에 포함될 가능성이 상대적으로 높아진다. 이 때문에, 탑승인은, 차량(1)의 우측 후측방의 상황을 파악하기 쉬워진다. 즉, 탑승인은, 차량(1)의 우측 후측방의 상황에 보다 많은 주의를 기울일 수 있다. 이 때문에, 차량(1)이 우회전하는 경우에 있어서, 차량(1)의 주위의 상황[특히, 차량(1)의 우측 후측방의 상황]을 탑승인이 적절하게 파악할 수 있는 합성 화상(111C)이 생성 가능해진다.
또한, 차량(1)이 우회전하는 경우에는, 차량(1)이 우회전하지 않는 경우와 비교하여, 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율이 커진다. 즉, 도 8의 (b)에 도시한 바와 같이, 합성 화상(111C) 중에 있어서 우측 후측방 화상(112BR)이 상대적으로 큰 표시 영역에서 표시된다. 우측 후측방 화상(112BR)이 상대적으로 큰 표시 영역에서 표시되면, 탑승인은, 차량(1)의 우측 후측방의 상황에 보다 많은 주의를 기울일 수 있다. 이 때문에, 차량(1)이 우회전하는 경우에 있어서, 차량(1)의 주위의 상황[특히, 차량(1)의 우측 후측방의 상황]을 탑승인이 적절하게 파악할 수 있는 합성 화상(111C)이 생성 가능해진다.
또한, 차량(1)이 좌회전하는 경우[즉, 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있다고 추정되는 경우이며, 좌측 지시기(121L)가 작동하고 또한 조타각이 역치 TH1보다 큰 경우]에 있어서도, 차량(1)이 우회전하는 경우와 마찬가지의 이유로부터, 차량(1)의 주위의 상황[특히, 차량(1)의 좌측 후측방의 상황]을 탑승인이 적절하게 파악할 수 있는 합성 화상(111C)이 생성 가능해진다.
게다가, 본 실시 형태에서는, 합성 화상(111C)의 표시 내용의 의도치 않은 변경(예를 들어, 도 8의 (a)에 도시한 표시 내용으로부터 도 8의 (b)에 도시한 표시 내용으로의 변경)에 대하여 탑승인이 번거로움을 느끼는 것을 적절하게 방지 가능하다. 구체적으로는, 상술한 바와 같이, 좌측 지시기(121L)가 작동하고 있음에도 불구하고 조타각이 역치 TH1 이하인 경우에는, 차량(1)이 차선 변경하거나 또는 탑승인이 잘못하여 좌측 지시기(121L)를 작동시켜 버렸다고 추정된다. 즉, 탑승인은, 차량(1)을 좌회전시킬 의도를 갖고 있지 않다고 추정된다. 이와 같은 경우에 있어서, 좌측 지시기(121L)가 작동하고 있는 것만을 이유로 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있다고 판정하여 좌측 후방 화상 화각 θBL 및 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율이 변경되면, 탑승인이 차량(1)을 좌회전시킬 의도가 없음에도 불구하고, 합성 화상(111C)의 표시 내용이, 차량(1)의 좌측 후측방의 상황을 탑승인이 적절하게 파악할 수 있는 표시 내용으로 전환된다. 이 때문에, 탑승인은, 탑승인의 의도에 반한 합성 화상(111C)의 표시 내용의 변경에 번거로움을 느낄 가능성이 있다. 그런데, 본 실시 형태에서는, 좌측 지시기(121L)가 작동하고 있지만 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있지 않다고 추정되는 경우(즉, 조타각이 역치 TH1 이하로 되는 경우)에는, 좌측 후방 화상 화각 θBL이 통상 화각 θBL_N인 채로 유지되고 또한 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율도, 통상 화각 θBL_N에 대응하는 비율인 채로 유지된다. 이 때문에, 탑승인의 의도에 반하여 합성 화상(111C)의 표시 내용이 변경됨으로써 탑승인이 번거로움을 느끼는 것이 적절하게 방지된다. 또한, 우측 지시기(121R)가 작동하고 있지만 탑승인이 차량(1)을 우회전시킬 의도를 갖고 있지 않디고 추정되는 경우(즉, 조타각이 역치 TH2 이하로 되는 경우)에 있어서도 마찬가지라고 말할 수 있다.
게다가, 본 실시 형태에서는, 차량(1)이 좌회전하는 경우에는, 우측 후측방 화상(112BR)을 포함하지 않는 합성 화상(111C)이 생성된다. 이 때문에, 우측 후측방 화상(112BR)을 포함하는 합성 화상(111C)이 생성되는 경우와 비교하여, 합성 화상(111C) 중에서 좌측 후측방 화상(112BL)이 차지하는 영역의 비율이 보다 커진 합성 화상(111C)이 생성 가능해진다. 즉, 좌측 후측방 화상(112BL)을 보다 한층 더 큰 표시 영역에서 표시 가능해진다. 이 때문에, 차량(1)이 좌회전하는 경우에 있어서, 차량(1)의 주위의 상황[특히, 차량(1)의 좌측 후측방의 상황]을 탑승인이 보다 한층 더 적절하게 파악할 수 있는 합성 화상(111C)이 생성 가능해진다. 또한, 차량(1)이 우회전하는 경우에는, 좌측 후측방 화상(112BL)을 포함하지 않는 합성 화상(111C)이 생성된다. 이 때문에, 차량(1)이 우회전하는 경우에 있어서도, 차량(1)이 좌회전하는 경우와 마찬가지의 이유로부터, 차량(1)의 주위의 상황[특히, 차량(1)의 우측 후측방의 상황]을 탑승인이 보다 한층 더 적절하게 파악할 수 있는 합성 화상(111C)이 생성 가능해진다.
(4) 변형예
계속해서, 화상 표시 동작의 변형예에 대하여 설명한다.
(4-1) 화상 표시 동작의 제1 변형예
화상 합성부(132)는 조타각(특히, 여기에서는, 중립 상태에 있는 스티어링 휠을 기준으로, 스티어링 휠이 반시계 방향으로 얼마나 회전되었는지를 나타내는 회전 각도)에 따라, 확대 화각 θBL_L의 크기를 변경해도 된다. 구체적으로는, 화상 합성부(132)는, 도 9의 (a) 내지 도 9의 (b)에 도시한 바와 같이, 조타각이 커질수록 확대 화각 θBL_L이 커지도록, 확대 화각 θBL_L의 크기를 변경해도 된다. 또한, 도 9의 (a)는 확대 화각 θBL_L이 연속적으로 커지는 예를 도시하고 있고, 도 9의 (b)는 확대 화각 θBL_L이 단계적으로 커지는 예를 도시하고 있다. 이 경우, 차량(1)을 좌회전시키기 위해 스티어링 휠이 반시계 방향으로 회전되면 될수록, 좌측 후방 화상 화각 θBL이 커진다. 이 때문에, 차량(1)의 좌회전이 얼마나 진행되었는지에 맞추어, 적절한 범위의 광경이 찍혀 있는 좌측 후측방 화상(112BL)이 적절한 크기의 표시 영역에 표시 가능해진다.
마찬가지의 이유로부터, 화상 합성부(132)는 조타각(특히, 여기에서는, 중립 상태에 있는 스티어링 휠을 기준으로, 스티어링 휠이 시계 방향으로 얼마나 회전되었는지를 나타내는 회전 각도)에 따라, 확대 화각 θBR_L의 크기를 변경해도 된다.
(4-2) 화상 표시 동작의 제2 변형예
상술한 설명에서는, 화상 합성부(132)는 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)[즉, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 각각 대응하는 좌측 후측방 화상(112BL) 및 우측 후측방 화상(112BR)을 포함하는 합성 화상(111C)]을 생성하기 위해, 좌측 후측방 화상(111BL) 및 우측 후측방 화상(111BR)으로부터의 좌측 후측방 화상(112BL) 및 우측 후측방 화상(112BR)의 추출 범위를 변경하고 있다. 즉, 화상 합성부(132)는 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 기초하는 화상 처리를 좌측 후측방 화상(111BL) 및 우측 후측방 화상(111BR)에 실시함으로써, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)을 생성하고 있다. 그러나, 화상 합성부(132)는 그 밖의 방법을 사용하여, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)을 생성해도 된다. 이하, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)을 생성하기 위한 그 밖의 방법의 일례에 대하여 설명한다.
화상 합성부(132)는 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)를 제어함으로써, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)을 생성해도 된다. 예를 들어, 화상 합성부(132)는 촬상 범위 IRBL 및 IRBR이 변하도록 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)의 광학 파라미터를 제어함으로써, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)을 생성해도 된다. 이 경우, 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)의 광학 파라미터의 변경은, 각각, 좌측 후방 화상 화각 θBL 및 우측 후방 화상 화각 θBR의 변경과 등가이다. 광학 파라미터의 일례로서, 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)의 각각이 구비하는 광학계(예를 들어, 렌즈 등)의 초점 거리를 일례로서 들 수 있다. 이 경우, 화상 합성부(132)는 차량(1)이 좌회전하는 경우에는, 도 10의 좌측 하방에 도시한 바와 같이, 좌측 후측방 카메라(11BL)의 촬상 범위 IRBL이, 확대 화각 θBL_L에 대응하는 상대적으로 큰 촬상 범위 IRBL_L로 되도록, 좌측 후측방 카메라(11BL)를 제어해도 된다. 한편, 화상 합성부(132)는 차량(1)이 우회전하는 경우에는, 도 10의 우측 하방에 도시한 바와 같이, 우측 후측방 카메라(11BR)의 촬상 범위 IRBR이, 확대 화각 θBR_L에 대응하는 상대적으로 큰 촬상 범위 IRBR_L로 되도록, 우측 후측방 카메라(11BR)를 제어해도 된다. 한편, 화상 합성부(132)는 차량(1)이 좌회전도 우회전도 하지 않는 경우에는, 도 10의 상부에 도시한 바와 같이, 좌측 후측방 카메라(11BL)의 촬상 범위 IRBL이, 통상 화각 θBL_N에 대응하는 촬상 범위 IRBL_N으로 되고, 우측 후측방 카메라(11BR)의 촬상 범위 IRBR이, 통상 화각 θBR_N에 대응하는 촬상 범위 IRBR_N으로 되도록, 좌측 후측방 카메라(11BL) 및 우측 후측방 카메라(11BR)를 제어해도 된다. 이 경우, 좌측 후측방 카메라(11BL)가 촬상한 좌측 후측방 화상(111BL)은, 실질적으로는, 좌측 후측방 화상(112BL)과 일치한다. 마찬가지로, 우측 후측방 카메라(11BR)가 촬상한 우측 후측방 화상(111BR)은, 실질적으로는, 우측 후측방 화상(112BR)과 일치한다.
또한, 상술한 설명에서는 후방 화상 화각 θB가 항상 통상 화각 θB_N으로 설정되어 있기 때문에, 도 10에 도시한 예에서는, 후방 카메라(11B)의 촬상 범위 IRB는, 항상 통상 화각 θB_N에 대응하는 촬상 범위 IRB_N으로 설정되어 있다. 그러나, 후술하는 바와 같이 후방 화상 화각 θB가 변경되는 경우에는, 후방 카메라(11B)의 촬상 범위 IRB도 또한 후방 화상 화각 θB에 맞추어 변경되어도 된다.
혹은, 촬상 범위 IRBL이 상이한 복수의 좌측 후측방 카메라(11BL)를 차량(1)이 구비하고 있는 경우에는, 화상 합성부(132)는 방향 지시기(121)의 작동 상태 및 조타각에 기초하여 복수의 좌측 후측방 카메라(11BL)로부터 실제로 좌측 후측방 화상(111BL)을 촬상하는 하나의 좌측 후측방 카메라(11BL)를 선택함으로써, 좌측 후방 화상 화각 θBL에 대응하는 합성 화상(111C)을 생성해도 된다. 이 경우, 사용하는 좌측 후측방 카메라(11BL)의 변경은, 좌측 후방 화상 화각 θBL의 변경과 등가이다. 구체적으로는, 차량(1)은 촬상 범위 IRBL이 통상 화각 θBL_N에 대응하는 촬상 범위 IRBL_N으로 되는 좌측 후측방 카메라(11BL_N)와, 촬상 범위 IRBL이 확대 화각 θBL_L에 대응하는 촬상 범위 IRBL_L로 되는 좌측 후측방 카메라(11BL_L)를 구비하고 있어도 된다. 이 경우, 화상 합성부(132)는 차량(1)이 좌회전하는 경우에는, 도 11의 좌측 하방에 도시한 바와 같이, 좌측 후측방 카메라(11BL_L)가 좌측 후측방 화상(111BL)을 촬상하고, 차량(1)이 좌회전도 우회전도 하지 않는 경우에는, 도 11의 상부에 도시한 바와 같이, 좌측 후측방 카메라(11BL_N)가 좌측 후측방 화상(111BL)을 촬상하도록, 좌측 후측방 카메라(11BL_N) 및 좌측 후측방 카메라(11BL_L)를 제어해도 된다.
마찬가지로, 촬상 범위 IRBR이 상이한 복수의 우측 후측방 카메라(11BR)를 차량(1)이 구비하고 있는 경우에는, 화상 합성부(132)는 방향 지시기(121)의 작동 상태 및 조타각에 기초하여 복수의 우측 후측방 카메라(11BR)로부터 실제로 우측 후측방 화상(111BR)을 촬상하는 하나의 우측 후측방 카메라(11BR)를 선택함으로써, 우측 후방 화상 화각 θBR에 대응하는 합성 화상(111C)을 생성해도 된다. 이 경우, 사용하는 우측 후측방 카메라(11BR)의 변경은, 우측 후방 화상 화각 θBR의 변경과 등가이다. 구체적으로는, 차량(1)은 촬상 범위 IRBR이 통상 화각 θBR_N에 대응하는 촬상 범위 IRBR_N으로 되는 우측 후측방 카메라(11BR_N)와, 촬상 범위 IRBR이 확대 화각 θBR_L에 대응하는 촬상 범위 IRBR_L로 되는 우측 후측방 카메라(11BR_L)를 구비하고 있어도 된다. 이 경우, 화상 합성부(132)는 차량(1)이 우회전하는 경우에는, 도 11의 우측 하방에 도시한 바와 같이, 우측 후측방 카메라(11BR_L)가 우측 후측방 화상(111BR)을 촬상하고, 차량(1)이 좌회전도 우회전도 하지 않는 경우에는, 도 11의 상부에 도시한 바와 같이, 우측 후측방 카메라(11BR_N)가 우측 후측방 화상(111BR_N)을 촬상하도록, 우측 후측방 카메라(11BR_N) 및 우측 후측방 카메라(11BR_L)를 제어해도 된다. 이 경우, 우측 후측방 카메라(11BR)가 촬상한 우측 후측방 화상(111BR)은, 실질적으로는, 우측 후측방 화상(112BR)과 일치한다.
또한, 상술한 설명에서는 후방 화상 화각 θB가 항상 통상 화각 θB_N으로 설정되어 있기 때문에, 도 11에 도시한 예에서는, 촬상 범위 IRB가 통상 화각 θB_N에 대응하는 촬상 범위 IRB_N으로 되는 후방 카메라(11B)가 후방 화상(111B)을 촬상하고 있다. 그러나, 후술하는 바와 같이 후방 화상 화각 θB가 변경되는 경우에는, 차량(1)이 구비하는 복수의 후방 카메라(11B)로부터 실제로 후방 화상(111B)을 촬상하는 하나의 후방 카메라(11B)가 선택되어도 된다.
(4-3) 화상 표시 동작의 제3 변형예
상술한 설명에서는, 차량(1)이 우회전하는 경우에는, 화상 합성부(132)는 우측 후방 화상 화각 θBR을 확대 화각 θBR_L로 설정함과 함께, 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율도 확대하고 있다. 그러나, 차량(1)이 우회전하는 경우에 있어서, 화상 합성부(132)는 우측 후방 화상 화각 θBR을 고정한 채로, 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율을 확대해도 된다. 이 경우에는, 도 12의 (a)에 도시한 바와 같이, 화상 합성부(132)는 우측 후측방 화상(112BR)을 좌우 방향으로 잡아늘인 후에, 잡아늘인 우측 후측방 화상(112BR)을 사용하여, 합성 화상(111C)을 생성해도 된다. 혹은, 차량(1)이 우회전하는 경우에 있어서, 화상 합성부(132)는 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율을 고정한 채로, 우측 후방 화상 화각 θBR을 확대 화각 θBR_L로 설정해도 된다. 이 경우에는, 도 12의 (b)에 도시한 바와 같이, 화상 합성부(132)는 우측 후측방 화상(112BR)을 좌우 방향으로 축소한 후에, 축소한 우측 후측방 화상(112BR)을 사용하여, 합성 화상(111C)을 생성해도 된다. 이 경우에도, 우측 후방 화상 화각 θBR의 변경 또는 합성 화상(111C) 중에서 우측 후측방 화상(112BR)이 차지하는 영역의 비율의 변경에 의해, 상대적으로 넓은 범위의 광경이 찍혀 있는 우측 후측방 화상(112BR)을 포함하는 합성 화상(111C)이나 또는 우측 후측방 화상(112BR)을 상대적으로 큰 영역을 사용하여 표시하는 합성 화상(111C)이 표시된다. 이 때문에, 탑승인이 차량(1)의 우측 후측방의 상황에 보다 많은 주의를 기울일 수 있는 것에는 변함이 없기 때문에, 상술한 효과와 마찬가지의 효과가 상응하게 향수 가능하다. 차량(1)이 좌회전하는 경우의 합성 화상(111C)에 대해서도 마찬가지이다.
(4-4) 그 밖의 변형예
상술한 설명에서는, 화상 합성부(132)는 차량(1)이 좌회전하는 경우에는, 우측 후방 화상 화각 θBR을 제로로 설정하고 있다. 그러나, 화상 합성부(132)는 차량(1)이 좌회전하는 경우에, 우측 후방 화상 화각 θBR을, 제로보다도 큰 값으로 설정해도 된다. 예를 들어, 화상 합성부(132)는 우측 후방 화상 화각 θBR을, 통상 화각 θBR_N보다도 작은 소정의 축소 화각 θBR_S로 설정해도 된다. 마찬가지로, 상술한 설명에서는, 화상 합성부(132)는 차량(1)이 우회전하는 경우에는, 좌측 후방 화상 화각 θBL을 제로로 설정하고 있다. 그러나, 화상 합성부(132)는 차량(1)이 우회전하는 경우에, 좌측 후방 화상 화각 θBL을, 제로보다도 큰 값으로 설정해도 된다. 예를 들어, 화상 합성부(132)는 좌측 후방 화상 화각 θBL을, 통상 화각 θBL_N보다도 작은 소정의 축소 화각 θBL_S로 설정해도 된다.
상술한 설명에서는, 화상 합성부(132)는 차량(1)이 좌회전 또는 우회전하는 경우에는, 후방 화상 화각 θB를 통상 화각 θB_N으로 설정하고 있다. 그러나, 화상 합성부(132)는 차량(1)이 좌회전 또는 우회전하는 경우에, 후방 화상 화각 θB를, 통상 화각 θB_N보다도 큰 소정의 확대 화각 θB_L로 설정해도 되고, 통상 화각 θB_N보다도 작은 소정의 축소 화각 θB_S로 설정해도 된다. 또한, 이 경우에는, 화상 합성부(132)는 후방 화상 화각 θB의 변경에 맞추어 합성 화상(111C) 중에서 후방 화상(112B)이 차지하는 영역의 비율을 변경해도 된다.
상술한 설명에서는, 화상 합성부(132)는 좌측 지시기(121L)가 작동하고 있는 경우라도, 조타각이 역치 TH1 이하인 경우에는, 좌측 후방 화상 화각 θBL을 확대 화각 θBL_L로 설정하지 않는다. 그러나, 화상 합성부(132)는 좌측 지시기(121L)가 작동하고 있는 경우에는, 조타각이 역치 TH1 이하인 경우라도, 좌측 후방 화상 화각 θBL을 확대 화각 θBL_L로 설정해도 된다. 마찬가지로, 상술한 설명에서는, 화상 합성부(132)는 우측 지시기(121R)가 작동하고 있는 경우라도, 조타각이 역치 TH2 이하인 경우에는, 우측 후방 화상 화각 θBR을 확대 화각 θBR_L로 설정하지 않는다. 그러나, 화상 합성부(132)는 우측 지시기(121R)가 작동하고 있는 경우에는, 조타각이 역치 TH2 이하인 경우라도, 우측 후방 화상 화각 θBR을 확대 화각 θBR_L로 설정해도 된다.
상술한 설명에서는, 조타각과 비교되는 역치 TH1은, 탑승인이 차량(1)을 좌회전시킬 의도를 갖고 있는 상황과, 탑승인이 차량(1)을 현재 주행하고 있는 주행 차선의 좌측에 인접하는 주행 차선으로 차선 변경할 의도를 갖고 있는 상황을 구별 가능한 적절한 값으로 설정되어 있다. 그러나, 차량(1)이 현재 주행하고 있는 주행 차선의 좌측에 인접하는 주행 차선으로 차선 변경할 때에도, 탑승인은, 차량의 좌측 후측방의 상황에 대하여 보다 상응하는 주의를 기울이는 것이 바람직한 것에는 변함이 없다. 이 때문에, 역치 TH1은, 탑승인이 차량(1)을 좌측으로 진행시킬[예를 들어, 좌회전시키거나 또는 차량(1)을 현재 주행하고 있는 주행 차선의 좌측에 인접하는 주행 차선으로 차선 변경시킬] 의도를 갖고 있는 상황과, 탑승인이 차량(1)을 좌측으로 진행시킬 의도를 갖고 있지 않은[예를 들어, 차량(1)을 직진시킬 의도를 갖고 있는] 상황을 구별 가능한 적절한 값으로 설정되어 있어도 된다. 그 결과, 차량(1)이 좌회전하는 경우뿐만 아니라, 차량(1)이 차선 변경하는 경우에 있어서도, 차량(1)의 주위의 상황[특히, 차량(1)의 좌측 후측방의 상황]을 탑승인이 적절하게 파악할 수 있는 합성 화상(111C)이 생성 가능해진다. 마찬가지의 이유로부터, 조타각과 비교되는 역치 TH2는, 탑승인이 차량(1)을 우측으로 진행시킬[예를 들어, 우회전시키거나 또는 차량(1)을 현재 주행하고 있는 주행 차선의 우측에 인접하는 주행 차선으로 차선 변경시킬] 의도를 갖고 있는 상황과, 탑승인이 차량(1)을 우측으로 진행시킬 의도를 갖고 있지 않은[예를 들어, 차량(1)을 직진시킬 의도를 갖고 있는] 상황을 구별 가능한 적절한 값으로 설정되어 있어도 된다.
(5) 부기
이상 설명한 실시 형태에 관하여, 이하의 부기를 더 개시한다.
(5-1) 부기 1
부기 1에 기재된 화상 표시 장치는, 차량의 후방을 촬상 가능한 후방 촬상 수단에 의해 촬상된 후방 화상과 좌우 일방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단에 의해 촬상된 제1 후측방 화상을 합성하여 합성 화상을 생성하는 합성 수단과, 상기 합성 화상을 표시하는 표시 수단을 구비하고, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기에 관한 제1 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 화상 표시 장치이다.
제1 방향 지시기는, 차량이 좌우 일방측으로 진행하는(예를 들어, 차량이 우회전 혹은 좌회전하거나, 또는, 차선 변경하는) 경우에 작동한다. 이 때문에, 부기 1에 기재된 화상 표시 장치에 따르면, 제1 정보에 기초하여 합성 화상 중에서 후방 화상 및 제1 후측방 화상이 차지하는 영역의 비율을 변경하지 않는(즉, 고정한 채인) 비교예의 화상 표시 장치와 비교하여, 차량이 좌우 일방측으로 진행하는 경우에 있어서도, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성할 수 있다.
(5-2) 부기 2
부기 2에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 경우에, 상기 제1 방향 지시기가 작동하고 있지 않는 것을 상기 제1 정보가 나타내고 있는 경우와 비교하여, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율이 커지도록, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 부기 1에 기재된 화상 표시 장치이다.
차량이 좌우 일방측으로 진행하는 경우에는, 차량의 탑승인은, 좌우 일방측에 있어서의 차량의 후측방의 상황에 대하여 보다 많은 주의를 기울이는 것이 바람직하다. 부기 2에 기재된 화상 표시 장치에 따르면, 제1 방향 지시기가 작동하고 있는 경우에는, 합성 화상 중에서 제1 후측방 화상이 차지하는 영역의 비율이 상대적으로 커진다. 그 결과, 탑승인은 좌우 일방측에 있어서의 차량의 후측방의 상황에 보다 많은 주의를 기울일 수 있다.
(5-3) 부기 3
부기 3에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 커질수록, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율이 커지도록, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 부기 1 또는 2에 기재된 화상 표시 장치이다.
부기 3에 기재된 화상 표시 장치에 따르면, 차량의 좌우 일방측으로의 진행 상황에 맞추어, 합성 화상 중에서 제1 후측방 화상이 차지하는 영역의 비율이 조정된다. 이 때문에, 합성 화상 중에 있어서, 차량의 좌우 일방측으로의 진행 상황에 맞춘 적절한 크기의 표시 영역에 제1 후측방 화상이 표시된다.
(5-4) 부기 4
부기 4에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 소정의 제1 역치보다 큰 경우에, 상기 제1 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하고, 상기 전타각이 상기 제1 역치보다 작은 경우에, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하지 않는 것을 특징으로 하는 부기 1 내지 3 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 4에 기재된 화상 표시 장치에 따르면, 탑승인의 의도에 반하여 합성 화상의 표시 내용이 변경됨으로써 탑승인이 번거로움을 느끼는 것이 적절하게 방지된다.
(5-5) 부기 5
부기 5에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 후방 화상과, 상기 제1 후측방 화상과, 좌우 타방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제2 후측방 촬상 수단에 의해 촬상된 제2 후측방 화상을 합성하여 상기 합성 화상을 생성하고, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 제1 정보 및 상기 차량이 좌우 타방측으로 진행하는 것을 통지하기 위해 작동 가능한 제2 방향 지시기에 관한 제2 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상, 상기 제1 후측방 화상 및 상기 제2 후측방 화상이 차지하는 영역의 비율을 변경하고, 상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 한편 상기 제2 방향 지시기가 작동하고 있지 않는 것을 상기 제2 정보가 나타내고 있는 경우에, 상기 합성 화상 중에서 상기 제2 후측방 화상이 차지하는 영역의 비율이 제로로 되도록, 상기 합성 화상 중에서 상기 제2 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 부기 1 내지 4 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 5에 기재된 화상 표시 장치에 따르면, 제1 방향 지시기가 작동하고 있는 한편 제2 방향 지시기가 작동하고 있지 않는 경우에는, 합성 화상에 제2 후측방 화상이 포함되지 않는다. 그 결과, 합성 화상 중에서 제2 후측방 화상이 차지하는 영역의 비율이 제로로 되지 않는(즉, 합성 화상에 제2 후측방 화상이 포함되는) 경우와 비교하여, 합성 수단은, 합성 화상 중에서 제1 후측방 화상이 차지하는 영역의 비율을 보다 크게 할 수 있다.
(5-6) 부기 6
부기 6에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 제1 정보에 기초하여, 상기 합성 화상 중 상기 후방 화상에 대응하는 제1 화상 부분 및 상기 제1 후측방 화상에 대응하는 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 부기 1 내지 5 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 6에 기재된 화상 표시 장치에 따르면, 제1 정보에 기초하여 제1 및 제2 화상 부분의 화각이 변경되지 않는(즉, 고정한 채인) 비교예의 화상 표시 장치와 비교하여, 차량이 좌우 일방측으로 진행하는 경우에 있어서도, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성할 수 있다. 또한, 부기에 있어서의 「어떤 화상 부분의 화각」은, 표시 수단에 표시되어 있는 어떤 화상 부분에 찍혀 있는 광경의 범위를 어떤 가상적인 시점으로부터의 각도로 나타내기 위한 지표값을 의미한다.
(5-7) 부기 7
부기 7에 기재된 화상 표시 장치는, 차량의 후방을 촬상 가능한 후방 촬상 수단에 의해 촬상된 후방 화상과 좌우 일방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단에 의해 촬상된 제1 후측방 화상을 합성하여 합성 화상을 생성하는 합성 수단과, 상기 합성 화상을 표시하는 표시 수단을 구비하고, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기에 관한 제1 정보에 기초하여, 상기 합성 화상 중 상기 후방 화상에 대응하는 제1 화상 부분 및 상기 제1 후측방 화상에 대응하는 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치이다.
부기 7에 기재된 화상 표시 장치에 따르면, 제1 정보에 기초하여 제1 및 제2 화상 부분의 화각이 변경되지 않는 비교예의 화상 표시 장치와 비교하여, 차량이 좌우 일방측으로 진행하는 경우에 있어서도, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성할 수 있다.
(5-8) 부기 8
부기 8에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 경우에, 상기 제1 방향 지시기가 작동하고 있지 않는 것을 상기 제1 정보가 나타내고 있는 경우와 비교하여, 상기 제2 화상 부분의 화각이 커지도록, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 부기 6 또는 7에 기재된 화상 표시 장치이다.
부기 8에 기재된 화상 표시 장치에 따르면, 제1 방향 지시기가 작동하고 있는 경우에는, 제2 화상 부분의 화각이 상대적으로 커진다. 제2 화상 부분의 화각이 상대적으로 커지면, 제2 화상 부분에는 보다 넓은 범위의 광경이 찍힌다(즉, 제2 화상 부분의 사각이 상대적으로 작아진다). 그 결과, 좌우 일방측에 있어서의 차량의 후측방의 상황에 보다 많은 주의를 기울일 수 있다. 이 때문에, 화상 표시 장치는, 차량이 좌우 일방측으로 진행하는 경우에 있어서, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성할 수 있다.
(5-9) 부기 9
부기 9에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 커질수록, 상기 제2 화상 부분의 화각이 커지도록, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 8 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 9에 기재된 화상 표시 장치에 따르면, 차량의 좌우 일방측으로의 진행 상황에 맞추어, 제2 화상 부분의 화각이 조정된다. 이 때문에, 합성 화상 중에 있어서, 차량의 좌우 일방측으로의 진행 상황에 맞춘 적절한 화각의 제2 화상 부분이 표시된다.
(5-10) 부기 10
부기 10에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 경우에 생성되는 상기 합성 화상에, 상기 제1 방향 지시기가 작동하고 있지 않는 것을 상기 제1 정보가 나타내고 있는 경우에 생성되는 상기 합성 화상에 포함되는 제1 광경보다도 좌우 일방측의 측방의 제2 광경이 포함되도록, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 9 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 10에 기재된 화상 표시 장치에 따르면, 좌우 일방측에 있어서의 차량의 후측방의 보다 넓은 범위의 상황을 나타내는 제2 화상 부분을 포함한 합성 화상이 생성 가능해진다.
(5-11) 부기 11
부기 11에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 커질수록 상기 제1 광경으로부터 좌우 일방측의 측방으로 보다 많이 이격된 위치의 상기 제2 광경이 상기 합성 화상에 포함되도록, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 10 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 11에 기재된 화상 표시 장치에 따르면, 차량의 좌우 일방측으로의 진행 상황에 맞추어, 제2 화상 부분에 포함되는 광경의 범위가 조정된다. 이 때문에, 합성 화상 중에 있어서, 차량의 좌우 일방측으로의 진행 상황에 맞춘 적절한 화각의 제2 화상 부분이 표시된다.
(5-12) 부기 12
부기 12에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 소정의 제2 역치보다 큰 경우에, 상기 제1 정보에 기초하여, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하고, 상기 전타각이 상기 제2 역치보다 작은 경우에, 상기 제1 및 제2 화상 부분의 화각을 변경하지 않는 것을 특징으로 하는 부기 6 내지 11 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 12에 기재된 화상 표시 장치에 따르면, 탑승인의 의도에 반하여 합성 화상의 표시 내용이 변경됨으로써 탑승인이 번거로움을 느끼는 것이 적절하게 방지된다. 또한, 제2 역치는, 상술한 제1 역치와 동일해도 되고, 상이해도 된다.
(5-13) 부기 13
부기 13에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 후방 화상과, 상기 제1 후측방 화상과, 좌우 타방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제2 후측방 촬상 수단에 의해 촬상된 제2 후측방 화상을 합성하여 상기 합성 화상을 생성하고, 상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 제1 정보 및 상기 차량이 좌우 타방측으로 진행하는 것을 통지하기 위해 작동 가능한 제2 방향 지시기에 관한 제2 정보에 기초하여, 상기 제1 화상 부분, 상기 제2 화상 부분 및 상기 합성 화상 중 상기 제2 후측방 화상에 대응하는 제3 화상 부분 중 적어도 하나의 화각을 변경하고, 상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 한편 상기 제2 방향 지시기가 작동하고 있지 않는 것을 상기 제2 정보가 나타내고 있는 경우에, 상기 제3 화상 부분의 화각이 제로로 되도록, 상기 제3 화상 부분의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 12 중 어느 한 항에 기재된 화상 표시 장치이다.
제1 방향 지시기가 작동하고 있는 한편 제2 방향 지시기가 작동하고 있지 않는 경우에는, 탑승인은, 좌우 타방측에 있어서의 차량의 후측방의 상황보다도 좌우 일방측에 있어서의 차량의 후측방의 상황에 대하여 보다 많은 주의를 기울이는 것이 바람직한 것은 전술한 바와 같다. 부기 13에 기재된 화상 표시 장치에 따르면, 제1 방향 지시기가 작동하고 있는 한편 제2 방향 지시기가 작동하고 있지 않는 경우에는, 제3 화상 부분의 화각이 제로로 된다. 즉, 합성 화상에 제2 후측방 화상이 포함되지 않는다. 그 결과, 제3 화상 부분의 화각이 제로로 되지 않는(즉, 합성 화상에 제2 후측방 화상이 포함되는) 경우와 비교하여, 합성 수단은, 제2 화상 부분의 화각을 보다 크게 할 수 있다. 이 때문에, 화상 표시 장치는, 차량이 좌우회전하는 경우에 있어서, 차량의 주위의 상황을 탑승인이 적절하게 파악할 수 있는 합성 화상을 생성할 수 있다.
(5-14) 기타
부기 14에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 고정한 채로, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 부기 7 내지 13 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 15에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 후방 화상 중 적어도 일부인 상기 제1 화상 부분 및 상기 제1 후측방 화상 중 적어도 일부인 상기 제2 화상 부분을 추출하고, 상기 제1 및 제2 화상 부분을 합성하여 상기 합성 화상을 생성하고, 상기 합성 수단은, 상기 제1 정보에 기초하여, 상기 후방 화상으로부터의 상기 제1 화상 부분의 추출 범위 및 상기 제1 후측방 화상으로부터의 상기 제2 화상 부분의 추출 범위 중 적어도 한쪽을 변경함으로써, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 14 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 16에 기재된 화상 표시 장치는, 상기 합성 수단은, 상기 제1 정보에 기초하여, 상기 후방 촬상 수단 및 상기 제1 후측방 촬상 수단 중 적어도 한쪽의 촬상 범위를 변경하도록 상기 후방 촬상 수단 및 상기 제1 후측방 촬상 수단 중 적어도 한쪽을 제어함으로써, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 15 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 17에 기재된 화상 표시 장치는, 상기 차량은, 촬상 범위가 상이한 복수의 상기 후방 촬상 수단을 구비하고, 상기 합성 수단은, 상기 제1 정보에 기초하여, 상기 복수의 후방 촬상 수단 중 어느 하나를, 상기 합성 화상을 생성하기 위해 사용되는 상기 후방 화상을 촬상하는 하나의 상기 후방 촬상 수단으로서 선택함으로써, 상기 제1 화상 부분의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 16 중 어느 한 항에 기재된 화상 표시 장치이다.
부기 18에 기재된 화상 표시 장치는, 상기 차량은, 촬상 범위가 상이한 복수의 상기 제1 후측방 촬상 수단을 구비하고, 상기 합성 수단은, 상기 제1 정보에 기초하여, 상기 복수의 제1 후측방 촬상 수단 중 어느 하나를, 상기 합성 화상을 생성하기 위해 사용되는 상기 제1 후측방 화상을 촬상하는 하나의 상기 제1 후측방 촬상 수단으로서 선택함으로써, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 부기 6 내지 17 중 어느 한 항에 기재된 화상 표시 장치이다.
본 발명은 청구범위 및 명세서 전체로부터 파악할 수 있는 발명의 요지 또는 사상에 반하지 않는 범위에서 적절히 변경 가능하고, 그와 같은 변경을 수반하는 화상 표시 장치도 또한 본 발명의 기술 사상에 포함된다.
1 : 차량
11B : 후방 카메라
11BL, 11BL_N, 11BL_L : 좌측 후측방 카메라
11BR, 11BR_N, 11BR_L : 우측 후측방 카메라
121 : 방향 지시기
121L : 좌측 지시기
121R : 우측 지시기
122 : 조타각 센서
13 : ECU
131 : 화상 취득부
132 : 화상 합성부
14 : 디스플레이
111B, 112B : 후방 화상
111BL, 112BL : 좌측 후측방 화상
111BR, 112BR : 우측 후측방 화상
111C : 합성 화상
IRB, IRB_N, IRBL, IRBL_N, IRBL_L, IRBR, IRBR_N, IRBR_L : 촬상 범위
θB, θBh, θBh : 후방 화상 화각
θBL : 좌측 후방 화상 화각
θBR : 우측 후방 화상 화각
θB_N, θBL_N, θBR_N : 통상 화각
θBL_L, θBR_L : 확대 화각

Claims (13)

  1. 차량의 후방을 촬상 가능한 후방 촬상 수단에 의해 촬상된 후방 화상과 좌우 일방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단에 의해 촬상된 제1 후측방 화상을 합성하여 합성 화상을 생성하는 합성 수단과,
    상기 합성 화상을 표시하는 표시 수단을 구비하고,
    상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기에 관한 제1 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 화상 표시 장치.
  2. 제1항에 있어서,
    상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 경우에, 상기 제1 방향 지시기가 작동하고 있지 않는 것을 상기 제1 정보가 나타내고 있는 경우와 비교하여, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율이 커지도록, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 화상 표시 장치.
  3. 제1항 또는 제2항에 있어서,
    상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 커질수록, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율이 커지도록, 상기 합성 화상 중에서 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 화상 표시 장치.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 소정의 제1 역치보다 큰 경우에, 상기 제1 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하고, 상기 전타각이 상기 제1 역치보다 작은 경우에, 상기 합성 화상 중에서 상기 후방 화상 및 상기 제1 후측방 화상이 차지하는 영역의 비율을 변경하지 않는 것을 특징으로 하는 화상 표시 장치.
  5. 제1항 내지 제4항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 후방 화상과, 상기 제1 후측방 화상과, 좌우 타방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제2 후측방 촬상 수단에 의해 촬상된 제2 후측방 화상을 합성하여 상기 합성 화상을 생성하고,
    상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 제1 정보 및 상기 차량이 좌우 타방측으로 진행하는 것을 통지하기 위해 작동 가능한 제2 방향 지시기에 관한 제2 정보에 기초하여, 상기 합성 화상 중에서 상기 후방 화상, 상기 제1 후측방 화상 및 상기 제2 후측방 화상이 차지하는 영역의 비율을 변경하고,
    상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 한편 상기 제2 방향 지시기가 작동하고 있지 않는 것을 상기 제2 정보가 나타내고 있는 경우에, 상기 합성 화상 중에서 상기 제2 후측방 화상이 차지하는 영역의 비율이 제로로 되도록, 상기 합성 화상 중에서 상기 제2 후측방 화상이 차지하는 영역의 비율을 변경하는 것을 특징으로 하는 화상 표시 장치.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 제1 정보에 기초하여, 상기 합성 화상 중 상기 후방 화상에 대응하는 제1 화상 부분 및 상기 제1 후측방 화상에 대응하는 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
  7. 차량의 후방을 촬상 가능한 후방 촬상 수단에 의해 촬상된 후방 화상과 좌우 일방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제1 후측방 촬상 수단에 의해 촬상된 제1 후측방 화상을 합성하여 합성 화상을 생성하는 합성 수단과,
    상기 합성 화상을 표시하는 표시 수단을 구비하고,
    상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 차량이 좌우 일방측으로 진행하는 것을 통지하기 위해 작동 가능한 제1 방향 지시기에 관한 제1 정보에 기초하여, 상기 합성 화상 중 상기 후방 화상에 대응하는 제1 화상 부분 및 상기 제1 후측방 화상에 대응하는 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
  8. 제6항 또는 제7항에 있어서,
    상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 경우에, 상기 제1 방향 지시기가 작동하고 있지 않는 것을 상기 제1 정보가 나타내고 있는 경우와 비교하여, 상기 제2 화상 부분의 화각이 커지도록, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
  9. 제6항 내지 제8항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 커질수록, 상기 제2 화상 부분의 화각이 커지도록, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
  10. 제6항 내지 제9항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 경우에 생성되는 상기 합성 화상에, 상기 제1 방향 지시기가 작동하고 있지 않는 것을 상기 제1 정보가 나타내고 있는 경우에 생성되는 상기 합성 화상에 포함되는 제1 광경보다도 좌우 일방측의 측방의 제2 광경이 포함되도록, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
  11. 제10항에 있어서,
    상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 커질수록 상기 제1 광경으로부터 좌우 일방측의 측방으로 보다 많이 이격된 위치의 상기 제2 광경이 상기 합성 화상에 포함되도록, 상기 제2 화상 부분의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
  12. 제6항 내지 제11항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 차량의 전타륜의 좌우 일방측으로의 전타각이 소정의 제2 역치보다 큰 경우에, 상기 제1 정보에 기초하여, 상기 제1 및 제2 화상 부분 중 적어도 한쪽의 화각을 변경하고, 상기 전타각이 상기 제2 역치보다 작은 경우에, 상기 제1 및 제2 화상 부분의 화각을 변경하지 않는 것을 특징으로 하는 화상 표시 장치.
  13. 제6항 내지 제12항 중 어느 한 항에 있어서,
    상기 합성 수단은, 상기 후방 화상과, 상기 제1 후측방 화상과, 좌우 타방측에 있어서의 상기 차량의 후측방을 촬상 가능한 제2 후측방 촬상 수단에 의해 촬상된 제2 후측방 화상을 합성하여 상기 합성 화상을 생성하고,
    상기 합성 수단은, 상기 합성 화상을 생성할 때에, 상기 제1 정보 및 상기 차량이 좌우 타방측으로 진행하는 것을 통지하기 위해 작동 가능한 제2 방향 지시기에 관한 제2 정보에 기초하여, 상기 제1 화상 부분, 상기 제2 화상 부분 및 상기 합성 화상 중 상기 제2 후측방 화상에 대응하는 제3 화상 부분 중 적어도 하나의 화각을 변경하고,
    상기 합성 수단은, 상기 제1 방향 지시기가 작동하고 있는 것을 상기 제1 정보가 나타내고 있는 한편 상기 제2 방향 지시기가 작동하고 있지 않는 것을 상기 제2 정보가 나타내고 있는 경우에, 상기 제3 화상 부분의 화각이 제로로 되도록, 상기 제3 화상 부분의 화각을 변경하는 것을 특징으로 하는 화상 표시 장치.
KR1020180125817A 2017-12-27 2018-10-22 화상 표시 장치 KR102151654B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2017-250901 2017-12-27
JP2017250901A JP7106859B2 (ja) 2017-12-27 2017-12-27 画像表示装置

Publications (2)

Publication Number Publication Date
KR20190079485A true KR20190079485A (ko) 2019-07-05
KR102151654B1 KR102151654B1 (ko) 2020-09-04

Family

ID=64746297

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180125817A KR102151654B1 (ko) 2017-12-27 2018-10-22 화상 표시 장치

Country Status (7)

Country Link
US (2) US11336839B2 (ko)
EP (1) EP3505398B1 (ko)
JP (1) JP7106859B2 (ko)
KR (1) KR102151654B1 (ko)
CN (1) CN110027552B (ko)
BR (1) BR102018077105A2 (ko)
RU (1) RU2707696C1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7106859B2 (ja) * 2017-12-27 2022-07-27 トヨタ自動車株式会社 画像表示装置
JP7159801B2 (ja) 2018-11-15 2022-10-25 トヨタ自動車株式会社 車両用電子ミラーシステム
JP7159802B2 (ja) * 2018-11-15 2022-10-25 トヨタ自動車株式会社 車両用電子ミラーシステム
US10926715B1 (en) * 2019-06-13 2021-02-23 Vidal M. Soler Vehicle camera system
CN110562141B (zh) * 2019-08-27 2021-05-28 中国第一汽车股份有限公司 一种流媒体后视镜及其显示方法
GB2586803B (en) * 2019-09-03 2022-02-16 Jaguar Land Rover Ltd Control system and method
JP7353111B2 (ja) * 2019-09-18 2023-09-29 株式会社Subaru 車外モニタ装置
JP7440235B2 (ja) * 2019-09-26 2024-02-28 フォルシアクラリオン・エレクトロニクス株式会社 表示制御装置、及び表示制御方法
CN111968184B (zh) * 2020-08-24 2024-04-02 北京茵沃汽车科技有限公司 一种在全景环视系统中实现视图随动的方法、装置及介质
JP7314885B2 (ja) * 2020-09-01 2023-07-26 トヨタ自動車株式会社 車両用周辺監視装置
CN112009371B (zh) * 2020-09-08 2022-05-31 恒大新能源汽车投资控股集团有限公司 车内后视镜全视野动态显示方法、存储介质及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0935196A (ja) * 1995-07-17 1997-02-07 Mitsubishi Electric Corp 車両用周辺監視装置及び車両用周辺監視方法
JP2001055100A (ja) * 1999-08-18 2001-02-27 Matsushita Electric Ind Co Ltd 多機能車載カメラシステムと多機能車載カメラの画像表示方法
JP2006338566A (ja) 2005-06-06 2006-12-14 Alpine Electronics Inc 画像合成装置および合成方法
JP2008230558A (ja) 2007-03-23 2008-10-02 Denso Corp 車両周辺監視装置
US20110074916A1 (en) * 2009-09-29 2011-03-31 Toyota Motor Engin. & Manufact. N.A. (TEMA) Electronic control system, electronic control unit and associated methodology of adapting 3d panoramic views of vehicle surroundings by predicting driver intent
WO2017122294A1 (ja) * 2016-01-13 2017-07-20 株式会社ソシオネクスト 周囲監視装置、画像処理方法、及び画像処理プログラム

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06227318A (ja) * 1993-02-08 1994-08-16 Hitachi Ltd 車両の後方モニタ装置及び方法
US5670935A (en) * 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
JPH10257482A (ja) * 1997-03-13 1998-09-25 Nissan Motor Co Ltd 車両周辺状況表示装置
US5956181A (en) * 1997-07-18 1999-09-21 Lin; William Two way mirror with dual functions of rear view mirror and video displayer
US6882917B2 (en) * 1999-07-30 2005-04-19 Oshkosh Truck Corporation Steering control system and method
JP2002036954A (ja) 2000-05-18 2002-02-06 Suekage Sangyo Kk 車両周辺監視装置および車両周辺監視システム
US6882287B2 (en) * 2001-07-31 2005-04-19 Donnelly Corporation Automotive lane change aid
JP4658408B2 (ja) * 2001-08-30 2011-03-23 株式会社東海理化電機製作所 車両用監視装置
JP2003081014A (ja) 2001-09-14 2003-03-19 Auto Network Gijutsu Kenkyusho:Kk 車両周辺監視装置
KR20040033675A (ko) 2002-10-15 2004-04-28 여태순 자동차용 후방 감시 장치
JP4762698B2 (ja) 2005-11-30 2011-08-31 アルパイン株式会社 車両周辺画像表示装置
JP4855158B2 (ja) 2006-07-05 2012-01-18 本田技研工業株式会社 運転支援装置
DE112009001602A5 (de) 2008-04-29 2011-03-31 Magna Electronics Europe Gmbh & Co.Kg Vorrichtung und Verfahren zum Erfassen und Anzeigen des Rückwärtigen und/oder seitlichen Umfeldes eines Kraftfahrzeugs
JP5376223B2 (ja) * 2009-05-18 2013-12-25 アイシン精機株式会社 運転支援装置
JP5035321B2 (ja) 2009-11-02 2012-09-26 株式会社デンソー 車両周辺表示制御装置および車両周辺表示制御装置用のプログラム
RU2432276C1 (ru) * 2010-07-07 2011-10-27 Осман Мирзаевич Мирза Способ наблюдения за дорожной ситуацией с движущегося транспортного средства (варианты)
KR101803973B1 (ko) * 2011-05-09 2017-12-01 엘지이노텍 주식회사 주차용 카메라 시스템과 그의 구동 방법
KR20130071842A (ko) * 2011-12-21 2013-07-01 에스엘 주식회사 차량의 주변 정보 제공 장치 및 방법
KR20130124762A (ko) * 2012-05-07 2013-11-15 현대모비스 주식회사 어라운드 뷰 모니터 시스템 및 모니터링 방법
US20140114534A1 (en) * 2012-10-19 2014-04-24 GM Global Technology Operations LLC Dynamic rearview mirror display features
KR101417383B1 (ko) * 2012-10-31 2014-07-08 현대자동차주식회사 룸미러 영상 제어 장치 및 방법
DE102013002111B4 (de) * 2013-02-08 2021-11-18 Mekra Lang Gmbh & Co. Kg Sichtsystem für Fahrzeuge, insbesondere Nutzfahrzeuge
KR102013331B1 (ko) * 2013-02-23 2019-10-21 삼성전자 주식회사 듀얼 카메라를 구비하는 휴대 단말기의 이미지 합성 장치 및 방법
JP6247450B2 (ja) 2013-03-31 2017-12-13 株式会社村上開明堂 運転支援装置
US10029621B2 (en) * 2013-05-16 2018-07-24 Ford Global Technologies, Llc Rear view camera system using rear view mirror location
US20160280136A1 (en) * 2014-03-05 2016-09-29 Guy M. Besson Active-tracking vehicular-based systems and methods for generating adaptive image
US9552633B2 (en) * 2014-03-07 2017-01-24 Qualcomm Incorporated Depth aware enhancement for stereo video
CN112839169B (zh) * 2014-05-29 2023-05-09 株式会社尼康 驾驶辅助装置及摄像装置
AU2015275735B2 (en) 2014-06-19 2019-05-09 Iveco S.P.A. Back vision system for assisting vehicle driving
KR101622622B1 (ko) * 2014-10-13 2016-05-31 엘지전자 주식회사 차량 하부 이미지 제공 장치 및 이를 구비한 차량
DE102015008042B3 (de) * 2015-06-23 2016-12-15 Mekra Lang Gmbh & Co. Kg Anzeigeeinrichtung für Fahrzeuge, insbesondere Nutzfahrzeuge
JP6641762B2 (ja) 2015-07-31 2020-02-05 市光工業株式会社 車両周辺視認装置
JP2017033402A (ja) * 2015-08-04 2017-02-09 株式会社デンソー 車載表示制御装置、車載表示制御方法
KR101824982B1 (ko) * 2015-10-07 2018-02-02 엘지전자 주식회사 차량 및 그 제어방법
US10347129B2 (en) * 2016-12-07 2019-07-09 Magna Electronics Inc. Vehicle system with truck turn alert
DE102016015363A1 (de) * 2016-12-17 2018-06-21 Wabco Gmbh Verfahren zum Überwachen einer Fahrzeugumgebung eines Fahrzeug-Gespanns, sowie Überwachungssystem
KR102007228B1 (ko) * 2017-11-10 2019-08-05 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
JP7069692B2 (ja) * 2017-12-20 2022-05-18 トヨタ自動車株式会社 画像表示装置
JP7106859B2 (ja) * 2017-12-27 2022-07-27 トヨタ自動車株式会社 画像表示装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0935196A (ja) * 1995-07-17 1997-02-07 Mitsubishi Electric Corp 車両用周辺監視装置及び車両用周辺監視方法
JP2001055100A (ja) * 1999-08-18 2001-02-27 Matsushita Electric Ind Co Ltd 多機能車載カメラシステムと多機能車載カメラの画像表示方法
JP2006338566A (ja) 2005-06-06 2006-12-14 Alpine Electronics Inc 画像合成装置および合成方法
JP2008230558A (ja) 2007-03-23 2008-10-02 Denso Corp 車両周辺監視装置
US20110074916A1 (en) * 2009-09-29 2011-03-31 Toyota Motor Engin. & Manufact. N.A. (TEMA) Electronic control system, electronic control unit and associated methodology of adapting 3d panoramic views of vehicle surroundings by predicting driver intent
WO2017122294A1 (ja) * 2016-01-13 2017-07-20 株式会社ソシオネクスト 周囲監視装置、画像処理方法、及び画像処理プログラム

Also Published As

Publication number Publication date
EP3505398A1 (en) 2019-07-03
BR102018077105A2 (pt) 2019-07-16
EP3505398B1 (en) 2021-07-14
CN110027552B (zh) 2022-05-10
US20220210344A1 (en) 2022-06-30
JP2019118016A (ja) 2019-07-18
CN110027552A (zh) 2019-07-19
US11336839B2 (en) 2022-05-17
RU2707696C1 (ru) 2019-11-28
US20190199940A1 (en) 2019-06-27
JP7106859B2 (ja) 2022-07-27
KR102151654B1 (ko) 2020-09-04

Similar Documents

Publication Publication Date Title
KR20190079485A (ko) 화상 표시 장치
US10029621B2 (en) Rear view camera system using rear view mirror location
JP5271154B2 (ja) 画像生成装置及び画像表示システム
US10166922B2 (en) On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device
JP4254887B2 (ja) 車両用画像表示システム
WO2010137684A1 (ja) 画像生成装置及び画像表示システム
US20110181728A1 (en) Electronic side view display system
CN107298050B (zh) 图像显示装置
JP2010221980A (ja) 車両用周辺監視装置
JP2001055100A (ja) 多機能車載カメラシステムと多機能車載カメラの画像表示方法
JP2011015174A (ja) 画像生成装置及び画像表示システム
JP5251804B2 (ja) 運転支援装置
JP6084048B2 (ja) 物体検出装置、物体検出システム及び物体検出方法
JP6958147B2 (ja) 画像表示装置
US10793069B2 (en) Method for assisting the driver of a motor vehicle in maneuvering the motor vehicle with a trailer, driver assistance system as well as vehicle/trailer combination
JP2019110492A (ja) 画像表示装置
JP2019106596A (ja) 画像表示装置
JP2012001126A (ja) 車両用周辺監視装置
JP6178580B2 (ja) 物体検出装置、物体検出システム及び物体検出方法
JP2016136326A (ja) 情報表示装置および情報表示方法
JP2021111854A (ja) 車両用電子ミラーシステム
JP2012237725A (ja) 車両用表示装置
JP2017213934A (ja) 車両用表示装置
WO2019149499A1 (en) Method for representing an environmental region of a motor vehicle with an image window in an image, computer program product as well as display system
WO2013094345A1 (ja) 撮影領域明示装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)