CN108621937A - 车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质 - Google Patents

车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质 Download PDF

Info

Publication number
CN108621937A
CN108621937A CN201810118670.1A CN201810118670A CN108621937A CN 108621937 A CN108621937 A CN 108621937A CN 201810118670 A CN201810118670 A CN 201810118670A CN 108621937 A CN108621937 A CN 108621937A
Authority
CN
China
Prior art keywords
image
display
display area
vehicle
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810118670.1A
Other languages
English (en)
Other versions
CN108621937B (zh
Inventor
河本昌志
青木隆行
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN108621937A publication Critical patent/CN108621937A/zh
Application granted granted Critical
Publication of CN108621937B publication Critical patent/CN108621937B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformation in the plane of the image
    • G06T3/40—Scaling the whole image or part thereof
    • G06T3/4038—Scaling the whole image or part thereof for image mosaicing, i.e. plane images composed of plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
    • B60R2300/605—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint the adjustment being automatic
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Abstract

一种车载显示设备，包括：显示器，该显示器包括在车厢的前面侧设置在车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示器能够在显示区域中显示画面；以及显示控制器，该显示控制器将由第二图像捕捉部捕捉到的第二图像转换为如同从在第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，该显示控制器将由第一图像捕捉部捕捉到的第一图像与视点转换图像中的不与第一图像重叠的范围内的图像拼接以生成合成图像，并且该显示控制器控制显示器以将合成图像作为画面显示在显示区域中。

Description

车载显示设备、车载显示设备的控制方法以及存储车载显示 设备的控制程序的存储介质
技术领域
本公开涉及一种车载显示设备、一种车载显示设备的控制方法以及车载显示设备的控制程序。
背景技术
已知辅助车辆驾驶的技术(日本专利申请公开(JP-A)No.2014-204132、No.2012-113672、No.2008-1120、No.2003-81014)。例如，JP-A No.2014-204132描述了一种技术，其涉及在车辆内部显示车辆外部的画面的设备。简要地说明，该现有技术使用多种显示模式在仪表板显示器等的多个显示区域中显示由安装在车辆上的多个摄像机捕捉到的画面。显示器例如在驾驶座椅的左斜前方处设置在前乘客座椅前方的范围内。从左侧开始，并排依次显示由设置在前乘客座椅侧的车门处的左侧摄像机所成像的左后方区域的画面，以及由设置在车辆的后端处的后摄像机所成像的后部中央区域的画面。
然而，在上述现有技术中，例如，有时左后方区域的画面与后部中央区域的画面之间的位置关系不直观，在观察容易性方面留有提升空间。
发明内容
考虑上述情况，本公开的目的是获得一种车载显示设备、车载显示设备的控制方法以及车载显示设备的控制程序，它们能够提高对显示的画面的观察的容易性。
第一方面的车载显示设备包括显示部、第一图像捕捉部、第二图像捕捉部以及显示控制器。显示部包括在车厢的前面侧设置在车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示部能够在所述显示区域中显示画面。第一图像捕捉部设置在所述前乘客座椅侧的车辆侧部处，并且该第一图像捕捉部捕捉车辆后方的图像。第二图像捕捉部设置在车辆后端部处，并且在与所述第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。显示控制器将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，并且该显示控制器将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接(或组合)在一起，以生成合成图像。所述显示控制器然后控制所述显示部以将所述合成图像作为画面显示在所述显示区域中。
根据上述配置，显示部能够在车厢的前面侧设置在车辆宽度方向中央位置的前乘客座椅侧的显示区域中显示画面。设置在前乘客座椅侧的车辆侧部处的第一图像捕捉部捕捉车辆后方的图像，并且设置在车辆后端部处的第二图像捕捉部在与第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。
显示控制器将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，并且显示控制器将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起，以生成合成图像。所述显示控制器然后控制所述显示部以将所述合成图像作为画面显示在所述显示区域中。因此，由第二图像捕捉部捕捉的范围具有已经从第一图像捕捉部的安装位置捕捉到的呈现内容，从而提高了观察显示的画面的容易性。
第二方面的车载显示设备包括显示部、第一图像捕捉部、第二图像捕捉部以及显示控制器。显示部包括在车厢的前面侧设置于车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示部能够在所述显示区域中显示画面。显示区域包括第一显示区域和第二显示区域，该第二显示区域设置在第一显示区域的车辆宽度方向内侧，从而与第一显示区域位于一排且之间具有非显示区域。第一图像捕捉部设置在所述前乘客座椅侧的车辆侧部处，并且该第一图像捕捉部捕捉车辆后方的图像。第二图像捕捉部设置在车辆后端部处，并且在与所述第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。显示控制器将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，并且该显示控制器将由所述第一图像捕捉部捕捉的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起以生成合成图像。显示控制器还使合成图像的整个区域与组合了第一显示区域、非显示区域和第二显示区域的区域相关联，并且该显示控制器从合成图像提取与第一显示区域对应的图像区域以生成第一修剪图像，并从合成图像提取与第二显示区域对应的图像区域以生成第二修剪图像。然后显示控制器控制显示部以将第一修剪图像作为画面显示在第一显示区域中，并且该显示控制器控制显示部以将第二修剪图像作为画面显示在第二显示区域中。
根据上述配置，显示部能够在车厢的前面侧设置在车辆宽度方向中央位置的前乘客座椅侧的第一显示区域和第二显示区域二者中显示画面。第二显示区域设置在第一显示区域的车辆宽度方向内侧，以与第一显示区域位于一排且之间具有非显示区域。设置在前乘客座椅侧的车辆侧部处的第一图像捕捉部捕捉车辆后方的图像，并且设置在车辆后端部处的第二图像捕捉部在与第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。
显示控制器将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，并且显示控制器将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起，以生成合成图像。显示控制器然后使合成图像的整个区域与组合了第一显示区域、非显示区域和第二显示区域的区域相关联，并且显示控制器从合成图像提取与第一显示区域对应的图像区域，从而生成第一修剪图像。显示控制器还从合成图像提取与第二显示区域对应的图像区域，以生成第二修剪图像。然后显示控制器控制显示部以将第一修剪图像作为画面显示在第一显示区域中，并且显示控制器控制显示部以将第二修剪图像作为画面显示在第二显示区域中。由第二图像捕捉部捕捉的范围具有已经从第一图像捕捉部的安装位置捕捉到的呈现内容，从而提高了观察显示的画面的容易性。
第三方面的车载显示设备是第一方面或第二方面的配置，其中，所述显示区域被设定为：在车辆俯视图中，经过预期的驾驶员眼睛位置和如下车辆宽度方向位置的假想直线将经过从第一范围的车辆宽度方向内侧端部延伸到第二范围的车辆宽度方向外侧端部这样的范围，其中，所述车辆宽度方向位置对应于在车内顶棚的前端处位于所述前乘客座椅的车辆宽度方向内侧的端部位置，所述第一范围显示基于所述第一图像的画面，所述第二范围显示基于所述第二图像的画面。
注意，在第三方面中，“预期的驾驶员眼睛位置”意指当正在使用本公开的车载显示设备的国家标准体格的驾驶员坐在驾驶座椅上的标准乘坐位置处并且以标准的坐姿来驾驶时，该驾驶员的视点的可以预期的位置。
根据上述配置，假定后视镜设置在车厢顶棚的前端侧的车辆宽度方向中央部的附近，在车辆俯视图中驾驶员在观看显示基于第二图像的画面的第二范围时的视线方向与在车辆的俯视图中驾驶员在观看后视镜时的视线方向基本相同。这从而使得能够无不适地检查基于第二图像显示的画面。
第四方面的车载显示设备是第一方面至第三方面的任意一方面的配置，其中，光控膜放置于所述显示区域的表面上，该光控膜使得所述显示区域中的画面仅从驾驶座椅侧可见。
根据上述配置，由于光控膜放置于显示区域的表面上，所以在显示区域中的画面仅从驾驶座椅侧可见。这从而防止在显示区域中的画面进入前乘客座椅的乘员的视野，使得前乘客座椅的乘员不被显示在显示区域中的画面打扰。
根据第五方面的车载显示设备是第一方面至第四方面的任意一方面的配置，该车载显示设备还包括视线方向检测部。所述视线方向检测部检测车辆的驾驶员的视线方向。而且，所述显示控制器控制所述显示部以在由所述视线方向检测部检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况下，遍及整个所述显示区域地显示画面，并且所述显示控制器控制所述显示部以在与所述视线方向检测部检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况不同的情况下，在所述显示区域的预定的局部区域中以减小的尺寸显示画面。
根据上述配置，利用视线方向检测部检测车辆的驾驶员的视线方向。所述显示控制器控制所述显示部以在由所述视线方向检测部检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况下，遍及整个所述显示区域地显示画面，并且所述显示控制器控制所述显示部以在与所述视线方向检测部检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况不同的情况下，在所述显示区域的预定的局部区域中以减小的尺寸显示画面。这从而使得当驾驶员未看向显示区域中的画面时，显示区域中的画面能够不太突显。
第六方面的车载显示设备控制方法是用于控制包括显示部、第一图像捕捉部和第二图像捕捉部的车载显示设备的控制方法。显示部包括在车厢的前面侧设置于车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示部能够在所述显示区域中显示画面。第一图像捕捉部设置在所述前乘客座椅侧的车辆侧部处，并且该第一图像捕捉部捕捉车辆后方的图像。第二图像捕捉部设置在车辆后端部处，并且在与所述第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。所述控制方法包括：将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察的视点转换图像，以及将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起以生成合成图像。所述控制方法还包括使用显示部将合成图像作为画面显示在显示区域中。与第一方面相似，这从而能够提高观察显示的画面的容易性。
第七方面的车载显示设备控制方法是用于控制包括显示部、第一图像捕捉部和第二图像捕捉部的车载显示设备的控制方法。显示部包括在车厢的前面侧设置于车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示部能够在所述显示区域中显示画面。显示区域包括第一显示区域和第二显示区域，该第二显示区域设置在第一显示区域的车辆宽度方向内侧，从而与第一显示区域位于一排且之间具有非显示区域。第一图像捕捉部设置在所述前乘客座椅侧的车辆侧部处，并且该第一图像捕捉部捕捉车辆后方的图像。第二图像捕捉部设置在车辆后端部处，并且在与所述第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。所述控制方法包括：将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起以生成合成图像，以及使合成图像的整个区域与组合了所述第一显示区域、所述非显示区域和所述第二显示区域的区域相关联。所述控制方法还包括：从合成图像提取与第一显示区域对应的图像区域以生成第一修剪图像，以及从合成图像提取与第二显示区域对应的图像区域以生成第二修剪图像。而且，所述控制方法还包括：使用所述显示部将所述第一修剪图像作为画面显示在所述第一显示区域中，以及使用所述显示部将所述第二修剪图像作为画面显示在所述第二显示区域中。与第二方面相似，这从而能够提高观察显示的画面的容易性。
第八方面的车载显示设备控制程序是用于包括显示部、第一图像捕捉部和第二图像捕捉部的车载显示设备的控制程序。显示部包括在车厢的前面侧设置于车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示部能够在所述显示区域中显示画面。第一图像捕捉部设置在所述前乘客座椅侧的车辆侧部处，并且该第一图像捕捉部捕捉车辆后方的图像。第二图像捕捉部设置在车辆后端部处，并且在与所述第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方的图像。所述控制程序使得计算机执行处理，所述处理包括：将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起以生成合成图像，以及使用所述显示部将所述合成图像作为画面显示在所述显示区域中。因此，计算机执行根据第八方面的车载显示设备控制程序，使得计算机实现第六方面的车载显示设备控制方法。这使得能够提高观察显示的画面的容易性，与第一方面和第六方面相似。
第九方面的车载显示设备控制程序是用于包括显示部、第一图像捕捉部和第二图像捕捉部的车载显示设备的控制程序。显示部包括在车厢的前面侧设置于车辆宽度方向中央位置的前乘客座椅侧的显示区域，并且该显示部能够在所述显示区域中显示画面。显示区域包括第一显示区域和第二显示区域，该第二显示区域设置在第一显示区域的车辆宽度方向内侧，从而与第一显示区域位于一排且之间具有非显示区域。第一图像捕捉部设置在所述前乘客座椅侧的车辆侧部处，并且该第一图像捕捉部捕捉车辆后方的图像。第二图像捕捉部设置在车辆后端部处，并且在与所述第一图像捕捉部的成像范围局部重叠的成像范围内捕捉车辆后方图像。所述控制程序使得计算机执行处理，所述处理包括：将由所述第二图像捕捉部捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，将由所述第一图像捕捉部捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接在一起以生成合成图像，以及将合成图像的整个区域与组合了所述第一显示区域、所述非显示区域和所述第二显示区域的区域相关联。所述处理还包括：从所述合成图像提取与所述第一显示区域对应的图像区域以生成第一修剪图像，以及从所述合成图像提取与所述第二显示区域对应的图像区域以生成第二修剪图像。而且，所述处理还包括：使用所述显示部将所述第一修剪图像作为画面显示在所述第一显示区域中，以及使用所述显示部将所述第二修剪图像作为画面显示在所述第二显示区域中。因此计算机执行根据第九方面的车载显示设备控制程序，使得计算机实现第七方面的车载显示设备控制方法。这从而使得能够提高观察显示的画面的容易性，与第七方面相似。
如上所述，本公开展现了能够提高观察显示的画面的容易性的突出的优势效果。
附图说明
图1是示出根据第一示例性实施例的车载显示设备的示意性配置的实例的方框图。
图2是示出根据第一示例性实施例的车载显示设备中的控制设备以及连接到控制设备的外部设备的示意性配置的方框图。
图3是示出根据第一示例性实施例的车载显示设备中的摄像机、显示器等的安装位置的实例的示意性俯视图。
图4是示出根据第一示例性实施例的车载显示设备的摄像机的成像范围的示意性俯视图。
图5是示出根据第一示例性实施例的车载显示设备的显示器的安装位置的实例的示意性侧视图。
图6是示出由根据第一示例性实施例的车载显示设备的控制设备执行的处理的流程的实例的流程图。
图7A是合成图像的实例的图示。
图7B示出遍及第一显示区域和第二显示区域二者的整体而显示的画面的实例。
图7C示出在第一显示区域和第二显示区域二者的局部区域上以减小的尺寸显示的画面的实例。
图8是示出根据第二示例性实施例的车载显示设备中的控制设备以及连接到控制设备的外部设备的示意性配置的实例的方框图。
图9是示出根据第二示例性实施例的车载显示设备中的显示器等的安装位置的实例的示意性俯视图。
图10是示出由根据第二示例性实施例的车载显示设备的控制设备执行的处理的流程的实例的流程图。
图11A是示出根据第三示例性实施例的车载显示设备中的显示器等的安装位置的实例的示意性俯视图。
图11B是示出根据第四示例性实施例的车载显示设备中的显示器等的安装位置的实例的示意性俯视图。
具体实施方式
第一示例性实施例
下面参考图1至图7C说明根据本公开的第一示例性实施例的车载显示设备、车载显示设备的控制方法以及车载显示设备的控制程序。图1是示出根据本示例性实施例的车载显示设备10的示意性配置的方框图。图3是示出车载显示设备10的构成部分的安装位置的示意性俯视图。注意，在图3中，箭头FR表示车辆前方，并且箭头W表示车辆宽度方向。
车载显示设备10安装在车辆上，并且是这样的设备，其为了辅助驾驶员驾驶车辆而显示基于车辆后方所捕捉到的图像的画面。如图1所示，车载显示设备10被配置为包括第一图像捕捉部12、第二图像捕捉部16、第三图像捕捉部20、视线方向检测部24、显示控制器30以及显示部32。
第一图像捕捉部12包括设置在图3所示的前乘客座椅S2侧的车辆侧部60A处(例如，设置通常的左门镜的位置)的第一摄像机14。第一图像捕捉部12是使用第一摄像机14捕捉车辆后方的图像并且输出捕捉到的图像的功能部。图1所示的第二图像捕捉部16包括设置在图3所示的车辆后端部60B处(例如，在后车牌上方)的第二摄像机18。第二图像捕捉部16是使用第二摄像机18捕捉车辆后方的图像并且输出捕捉到的图像的功能部。图1所示的第三图像捕捉部20包括设置在图3所示的驾驶座椅S1侧的车辆侧部60C处(例如，设置通常的右门镜的位置)的第三摄像机22。第三图像捕捉部20是使用第三摄像机22捕捉车辆后方的图像并且输出捕捉到的图像的功能部。
图4是示出第一摄像机14、第二摄像机18和第三摄像机22的成像范围(换言之，视野)的实例的示意性俯视图。在图4中，用附图标记14A表示第一摄像机14的成像范围，用附图标记18A表示第二摄像机18的成像范围，并且用附图标记22A表示第三摄像机22的成像范围。如图4所示，第二摄像机18(第二图像捕捉部16(见图1))的成像范围18A设定为与第一摄像机14(第一图像捕捉部12(见图1))的成像范围14A部分地重叠。而且，第二摄像机18的成像范围18A设定为与第三摄像机22(第三图像捕捉部20(见图1))的成像范围22A部分地重叠。
图1所示的视线方向检测部24是检测车辆的驾驶员的视线方向的功能部。在本示例性实施例中，作为实例，视线方向检测部24包括眼动仪26(见图2)，该眼动仪26能够基于瞳孔的旋转运动和角膜的反射率的变化来检测驾驶员的视线方向。注意，在本示例性实施例中，作为实例，使用眼动仪26(见图2)检测驾驶员的视线方向。然而，还可以使用图像识别检测驾驶员的视线方向。例如，可以通过使用对车载摄像机捕捉的图像进行的图像识别来检测驾驶员的注视。
第一图像捕捉部12、第二图像捕捉部16、第三图像捕捉部20以及视线方向检测部24连接至显示控制器30。后文将详细描述显示控制器30。显示部32也连接至显示控制器30。
显示部32是能够在图3所示的车厢的前面侧设置的第一显示区域34A、第二显示区域36A和第三显示区域38A中显示画面的功能部。第一显示区域34A设定在第一显示器34中，第二显示区域36A设定在第二显示器36中，并且第三显示区域38A设定在第三显示器38中。第一显示器34、第二显示器36和第三显示器38分别安装在仪表面板54(见图5)中。
第三显示器38的第三显示区域38A设定在车厢的前面侧，位于比车辆宽度方向中央位置更靠近驾驶座椅S1侧处的车辆侧部60C这样的位置处。基于由第三摄像机22(第三图像捕捉部20(见图1))捕捉到的第三图像的画面显示在第三显示区域38A上。而且，彼此相邻的第一显示器34的第一显示区域34A和第二显示器36的第二显示区域36A设定在车厢的前面侧处，相对于车辆宽度方向中央位置更靠近前乘客座椅S2侧。第一显示区域34A(见图7B)设定在靠近前乘客座椅S2侧处的车辆侧部60A的位置，并且显示基于由第一摄像机14(第一图像捕捉部12(见图1))捕捉到的第一图像的画面(后文详细描述)。第二显示区域36A(见图7B)设置在第一显示区域34A的车辆宽度方向内侧，以与第一显示区域34A位于一排并且之间具有非显示区域35A(见图7B)。第二显示区域36A显示基于由第二摄像机18(第二图像捕捉部16(见图1))捕捉到的第二图像的画面(后文详细描述)。注意，第一显示区域34A与第二显示区域36A之间的非显示区域35A的尺寸在图3中是被扩大的，以辅助对附图的理解。
第一显示区域34A和第二显示区域36A被设定为使得在车辆的俯视图中，经过预期的驾驶员眼睛位置62和如下的车辆宽度方向位置64A的假想直线L1将经过从第一显示器34的第一显示区域34A(显示基于第一图像的画面的第一范围)的车辆宽度方向内侧端部延伸到第二显示器36的第二显示区域36A(显示基于第二图像的画面的第二范围)的车辆宽度方向外侧端部的范围，其中，所述车辆宽度方向位置64A对应于车内顶棚的前端64处的前乘客座椅S2的车辆宽度方向内侧的端部位置。注意，在车辆的俯视图中，假想直线L1近似为直线，该直线经过预期的驾驶员眼睛位置62和传统配置的后视镜68(在车内顶棚的前端64侧处设置在车辆宽度方向中央部分附近的反射镜)的车辆宽度方向内侧端部。
图5是示出车载显示设备10的第二显示器36的安装位置的实例的示意性侧视图。注意，在图5中，箭头FR表示车辆前方，并且箭头UP表示车辆上侧。如图5所示，从预期的驾驶员眼球位置62到包括设定在仪表面板54中的第二显示区域36A的显示区域的观察距离(见L1)比从预期的驾驶员眼球位置62到传统配置的后视镜68的观察距离(见L2)长。
注意，用于汽车导航的中央显示器56设置在图3所示的车厢的前面侧处的车辆宽度方向中央位置处。中央显示器56的显示区域56A显示地图图像等。
图1所示的连接至显示部32的显示控制器30是这样的功能部：其使用由计算机构成的控制设备40(见图2)进行与显示部32上的画面显示相关的控制。
图2示出根据本示例性实施例的控制设备40以及连接到控制设备40的外部设备的示意性配置。如图2所示，控制设备40包括通过总线52彼此连接的CPU42、RAM44、ROM46以及输入/输出接口(I/O)50。ROM46是非易失性存储部，并且ROM46存储有显示控制程序48(根据本公开的车载显示设备的控制程序的实例)。I/O50与外部设备通信。I/O50连接至第一摄像机14、第二摄像机18、第三摄像机22、眼动仪26、第一显示器34、第二显示器36、第三显示器38和点火开关28。控制设备40从ROM46读取显示控制程序48，并且将显示控制程序48扩展到RAM44中，并且已经被扩展到RAM44中的显示控制程序48由CPU42执行，使得控制设备40用作显示控制器30(见图1)。
点火开关28是启动车辆并且接通和断开车内设备的通电的开关。来自点火开关28的接通/断开信号输入到控制设备40。
接着，作为本示例性实施例的操作，参考图6所示的流程图说明在安装有图1所示的车载显示设备10的车辆中由显示控制器30(控制设备40(见图2))执行的显示控制处理。在本示例性实施例中，作为实例，当图2所示的点火开关28被切换为接通并且向控制设备40(显示控制器30(见图1))输入信号时，开始执行图6所示的显示控制处理。注意，虽然图1所示的显示控制器30还控制图1所示的显示部32，从而将由第三图像捕捉部20捕捉到的第三图像作为画面显示在图3所示的第三显示器38的第三显示区域38A上，但是在图6和下面的说明中省略该显示控制处理的说明。
在图6所示的显示控制处理的步骤100处，显示控制器30从第一图像捕捉部12和第二图像捕捉部16获取车辆外部的图像(后方捕捉的图像)，并且将由第二图像捕捉部16捕捉到的第二图像转换为如同从第一图像捕捉部12的安装位置处的假想视点观察到的视点转换图像。而且，由第一图像捕捉部12捕捉到的第一图像与视点转换图像中的在不与该第一图像的图像重叠的范围中的图像拼接在一起，以生成合成图像。注意，用于将原始图像转换为如同从与捕捉图像的视点不同的假想视点位置所观察到的视点转换图像的处理(视点转换处理)的各种方法是已知的，并且此处省略它们的说明。
图7A示出在步骤100处生成的合成图像100A的实例。在图7A所示的合成图像100A中，基于第一图像的部分形成在附图标记100L表示的左右方向范围中。视点转换图像的基于在不与第一图像的图像重叠的范围内的图像的部分形成在附图标记100R表示的左右方向范围中。注意，在图7A的右下侧处的由附图标记a表示的矩形部分是没有车辆外部的画面的区域，即，与车辆自身和小的盲点对应的区域。为易于说明，以简化的方式示出该区域。
接着，在图6所示的步骤102处，显示控制器30(见图1)使合成图像100A的整个区域与组合了第一显示区域34A、非显示区域35A和第二显示区域36A的区域相对应。然后，显示控制器30从合成图像100A提取与第一显示区域34A对应的图像区域以生成第一修剪图像，并且从合成图像100A提取与第二显示区域36A对应的图像区域以生成第二修剪图像。
接着，在步骤104处，显示控制器30从视线方向检测部24获取表示驾驶员的视线方向的信息。接着，在步骤106处，显示控制器30判定由视线方向检测部24检测到的车辆的驾驶员的视线方向是否指向第一显示区域34A或第二显示区域36A。步骤106的判定是关于驾驶员的注视与第一显示区域34A和第二显示区域36A所在的平面之间的交点是否位于第一显示区域34A或者第二显示区域36A中的判定。当在步骤106处的判定为肯定时，处理转移到步骤108，并且当在步骤106处的判定为否定时，处理转移到步骤110。
在步骤108处，显示控制器30将显示部32控制为使得显示部32将第一修剪图像显示为遍及整个第一显示区域34A的画面，并且显示部32将第二修剪图像显示为遍及整个第二显示区域36A的画面。图7B图示了在步骤108处在第一显示区域34A中显示的画面108L和在第二显示区域36A中显示的画面108R的实例。如图7B所示，在画面108L、108R中，由第二摄像机18(见图3)捕捉的范围(见第二显示区域36A)具有已经从第一摄像机14(见图3)的安装位置捕捉到的呈现内容，从而提高了观察显示画面的容易性。而且，第一显示区域34A和第二显示区域36A设置成位于一排，从而使得驾驶员能够观察第一显示区域34A中的画面108L和第二显示区域36A中的画面108R，而无需焦距的大的调整。
另一方面，在图6所示的步骤110处，显示控制器30将显示部32控制为使得显示部32将第一修剪图像作为减小了尺寸的画面显示在第一显示区域34A的预定局部区域中，并且显示部32将第二修剪图像作为减小了尺寸的画面显示在第二显示区域36A的预定局部区域中。因此，当驾驶员并未正看向第一显示区域34A或第二显示区域36A中的画面时，如图7C所示，能够使在第一显示区域34A中的画面108S和在第二显示区域36A中的画面108T较不突显，使得例如坐在前乘客座椅中的乘员不被第一显示区域34A中的画面108S和第二显示区域36A中的画面108T过分地打扰。
在图6所示的下一步骤112处，显示控制器30判定车辆的点火开关(IG)28是否已经被断开。当步骤112处的判定为否定时，处理返回到步骤100，并且重复步骤100到步骤112，直到步骤112处的判定为肯定。当步骤112处的判定为肯定时，处理转移到步骤114。
在步骤114处，显示控制器30判定是否从点火开关28断开开始过去了预定时间段。当步骤114处的判定为否定时，处理返回到步骤100，并且重复步骤100到步骤114，直到步骤114处的判定为肯定。因此，如果从断开点火开关28开始过去了少于预定时间段的时间，则为了检查后方而使画面显示在第一显示区域34A和第二显示区域36A中，使得驾驶员能够在离开车辆时通过观看画面来检查后方。另一方面，当步骤114处的判定为肯定时，显示控制器30结束图6所示的显示控制处理，并且关闭画面的显示。
如上所述，本示例性实施例能够提高观察所显示的画面的容易性。由于不需要设置大的显示器，如图3所示，所以本示例性实施例还能够降低成本。
而且，在本示例性实施例中，第一显示区域34A和第二显示区域36A被设定为使得在车辆的俯视图中，经过预期的驾驶员眼睛位置62和下述的车辆宽度方向位置64A的假想直线L1将经过从第一显示器34的第一显示区域34A(显示基于第一图像的画面的第一范围)的车辆宽度方向内侧端部延伸到第二显示器36的第二显示区域36A(显示基于第二图像的画面的第二范围)的车辆宽度方向外侧端部的范围，所述车辆宽度方向位置64A对应于车内顶棚的前端64处的前乘客座椅S2的车辆宽度方向内侧处的端部位置。因此，当驾驶员正在观看第二显示器36的第二显示区域36A时，在车辆的俯视图中的驾驶员的视线方向基本等于车辆俯视图中当驾驶员正在观看后视镜68时驾驶员的视线方向，其中，假定后视镜68设置在车内顶棚的前端64侧的车辆宽度方向中央部附近。从而，这使得能够无不适地检查第二显示器36的第二显示区域36A中的画面。
使用对比结构作为实例来进一步说明，例如，在车辆后方捕捉到的图像作为画面显示在仪表面板54的车辆宽度方向中央部的中央显示器56的位置的构造中，由于观看画面的驾驶员的注视角度θ1是小的，所以画面构成的视频在驾驶的过程中将不断地处于驾驶员的视野中。因此，存在显示的画面会打扰驾驶员的可能性。相比之下，当注视沿着假想直线L1时的注视角度θ2比注视角度θ1大很多，并且第一显示区域34A和第二显示区域36A不位于在驾驶过程中不断地处于驾驶员的视野中的位置。这使得能够抑制第一显示区域34A和第二显示区域36A上显示的画面打扰驾驶员。注意，“注视角度”是指在车辆的俯视图中，驾驶员的注视相对于如下参考线LS的角度，该参考线LS沿着车辆前后方向从驾驶员的眼睛的位置朝向车辆前方延伸。
而且，如图5所示，从预期的驾驶员眼睛位置62到诸如第二显示区域36A这样的设定在仪表面板54中的显示区域的观察距离比从预期的驾驶员眼睛位置62到传统配置的后视镜68的观察距离长。注意，在传统配置的后视镜68是电子后视镜的情况下，当驾驶员从看向车辆前方的状态转换为看向后视镜68(电子后视镜)上的画面时，短的观察距离使得驾驶员难以调整他们的焦点。相比之下，在本示例性实施例的构造中，当驾驶员从看向车辆前方的状态转换为看向诸如第二显示区域36A这样的设定在仪表面板54中的显示区域中的画面时，驾驶员易于调整他们的焦点。
详细说明，与光学反射镜不同，对于电子后视镜，必须聚焦在显示屏幕上，并且因此从驾驶员的眼睛到显示屏幕的短距离使得难以调整焦点。然而，在本示例性实施例中，确保了从眼睛到显示屏幕的较长距离，使得与利用电子后视镜构成后视镜68的情况相比，驾驶员易于调整他们的焦点。
如图3所示，在本示例性实施例中，第二显示器36设置在与车辆宽度方向中央部偏移的位置。这从而使得能够设置中央显示器56和第二显示器36两者，所述中央显示器56设置在车辆宽度方向中央部并且用于汽车导航，并且所述第二显示器36显示车辆后方的中央区域的画面。
如上所述，本示例性实施例使得能够无压力地观察分布在车厢内部周围的电子信息。
第一示例性实施例的修改例
在上述第一示例性实施例中，由图1所示的显示控制器30(控制设备40(见图2))执行的并且由图6所示出的显示控制处理包括步骤104至步骤110。然而，显示控制处理可以被配置为使得执行步骤108而不是执行步骤104至步骤110。
而且，在采用了执行步骤108而不是执行图6所示的显示控制处理的步骤104至步骤110这样的配置的情况下，可以使得配置为：使得第一显示区域34A和第二显示区域36A中的画面仅能够从驾驶座椅S1侧可见的光控膜66被置于图3所示的第一显示区域34A和第二显示区域36A二者的表面上。光控膜66配置有随着朝向车辆后方行进而向着驾驶座椅S1倾斜的多个光漫射限制遮光栅格。在以该方式设置了光控膜66的修改例中，由于光控膜66被置于第一显示区域34A和第二显示区域36A二者的表面上，所以第一显示区域34A和第二显示区域36A中的画面仅能够从驾驶座椅S1侧可见。因此，能够防止第一显示区域34A和第二显示区域36A中的画面进入前乘客座椅S2的乘员的视野，使得前乘客座椅S2的乘员不被显示在第一显示区域34A和第二显示区域36A中的各画面打扰。
在上述第一示例性实施例中，由图1所示的显示控制器30(控制设备40(见图2))执行的并且由图6所示出的显示控制处理包括步骤110。然而，在例如还设置了门镜等的情况下，显示控制处理可以配置为：代替图6所示的步骤110，执行关闭第一修剪图像和第二修剪图像的画面的显示(即，不显示)的步骤。
作为另一修改例，可以设置检测设备以检测驾驶员是否已经离开车辆，并且代替图6中的步骤112和114，可以设置判定驾驶员是否已经离开车辆的离开判定步骤。当在该离开判定步骤处的判定是否定时，处理返回到步骤100，并且重复步骤100至离开判定步骤，直到在离开判定步骤处的判定为肯定为止。当在离开判定步骤处的判定为肯定时，显示控制器(30)结束显示控制处理。
第二示例性实施例
接着，参考图8至图10并且还参考回图1至图7A说明本公开的第二示例性实施例。图8是示出根据第二示例性实施例的车载显示设备70的控制设备80以及连接到控制设备80的外部设备的示意性配置的方框图(与第一示例性实施例的图2对应的图)。图9是示出根据本示例性实施例的车载显示设备70的显示器等的安装位置的示意性俯视图(与第一示例性实施例的图3对应的图)。图10是示出由根据本示例性实施例的车载显示设备70的控制设备80执行的处理的流程的流程图(与第一示例性实施例的图6对应的图)。
与第一示例性实施例的车载显示设备10(见图1等)相似，车载显示设备70安装在车辆上，并且是为了辅助驾驶员驾驶车辆而显示基于车辆后方所捕捉到的图像的画面的设备。参考回图1，在本示例性实施例中，第一图像捕捉部12、第二图像捕捉部16、第三图像捕捉部20以及视线方向检测部24与第一示例性实施例中的相似地配置。而且，在本示例性实施例中，虽然显示控制器30和显示部32的具体配置与第一示例性实施例中的不同，但是由于到其它功能块的连接的配置与图1的相同，所以为了便于说明而使显示控制器30和显示部32分配有与第一示例性实施例中的相同的附图标记。在下文的本示例性实施例的描述中，对显示控制器30和显示部32的引用不仅是指第一示例性实施例的显示控制器30和显示部32，而且是指本示例性实施例的显示控制器30和显示部32。注意，除了下文所述的要点之外，本示例性实施例具有与第一示例性实施例基本相同的配置。从而与第一示例性实施例基本相同的构成部分被分配有相同的附图标记，并且省略其说明。
如图8和图9所示，在本示例性实施例中，设置图8和图9所示的左显示器74来代替图2和图3所示的第一示例性实施例的第一显示器34和第二显示器36。注意，虽然本示例性实施例的右显示器76具有与图2和图3所示的第一示例性实施例的第三显示器38不同的名称和附图标记，但是右显示器76是与第三显示器38相似的构成部分。如图9所示，左显示器74包括左显示区域74A，并且右显示器76包括右显示区域76A。
在本示例性实施例中，显示部32(见图1)包括图8和图9中所示的左显示器74和右显示器76，并且显示部32是能够在图9所示的车厢的前面侧处设定的左显示区域74A和右显示区域76A上显示画面的功能部。
如图9所示，右显示器76的右显示区域76A设定在与图3所示的第一示例性实施例的第三显示器38的第三显示区域38A相似的位置。另一方面，图9所示的左显示器74的左显示区域74A设定在与图3所示的第一示例性实施例的第一显示区域34A、非显示区域35A和第二显示区域36A的组合区域对应的范围内。即，图9所示的左显示器74的左显示区域74A构成了设定在车厢的前面侧处的、比车辆宽度方向中央位置更朝向前乘客座椅S2侧的显示区域。
左显示区域74A被设定为使得在车辆俯视图中，经过预期的驾驶员眼睛位置62和下述车辆宽度方向位置64A的假想直线L1将经过从第一范围74X的车辆宽度方向内侧端部延伸到第二范围74Y的车辆宽度方向外侧端部的范围，其中，所述车辆宽度方向位置64A对应于车内顶棚的前端64处的前乘客座椅S2的车辆宽度方向内侧的端部位置，所述第一范围74X显示基于由第一摄像机14(第一图像捕捉部12(见图1))捕捉到的第一图像的画面，所述第二范围74Y显示基于由第二摄像机18(第二图像捕捉部16(见图1))捕捉到的第二图像的画面。
而且，在本示例性实施例中，显示控制器39(见图1)是使用图8所示的充当计算机的控制设备80来控制显示部32(见图1)的画面显示的功能部。
如图8所示，控制设备80包括存储有显示控制程序78(根据本公开的车载显示设备的控制程序的实例)的ROM47，而不是第一示例性实施例的ROM46(见图2)。注意，ROM47是与第一示例性实施例的ROM46(见图2)相似的非易失性存储部。而且，控制设备80的I/O50连接到第一摄像机14、第二摄像机18、第三摄像机22、眼动仪26、左显示器74、右显示器76以及点火开关28。除了这些点之外，控制设备80在其他方面与第一示例性实施例的控制设备40(见图2)相似。控制设备80从ROM47读取显示控制程序78，并且将显示控制程序78扩展到RAM44中，并且已经被扩展到RAM44中的显示控制程序78由CPU42执行，使得控制设备80用作本示例性实施例的显示控制器30(见图1)。
接着，作为本示例性实施例的操作，参考图10所示的流程图说明在安装有图8等所示的车载显示设备70的车辆中利用显示控制器30(见图1，控制设备80)执行的显示控制处理。在本示例性实施例中，作为实例，当图8所示的点火开关28被接通并且向控制设备80(显示控制器30(见图1))输入信号时，开始执行图10所示的显示控制处理。注意，显示控制器30(见图1，控制设备80)将显示部32(见图1)控制为将由第三图像捕捉部20(见图1)捕捉到的第三图像作为画面显示在图9所示的右显示器76的右显示区域76A中。然而，在图10和下面的说明中省略该显示控制处理的说明。
在图10所示的显示控制处理的步骤200处，显示控制器30从第一图像捕捉部12和第二图像捕捉部16获取车辆外部的图像(后方捕捉到的图像)，并且然后将由第二图像捕捉部16捕捉到的第二图像转换为如同从第一图像捕捉部12的安装位置处的假想视点观察的视点转换图像。而且，由第一图像捕捉部12捕捉到的第一图像与视点转换图像中的在不与该第一图像的图像重叠的范围中的图像被拼接在一起，以生成合成图像100A(见7A)。
接着，在步骤202处，显示控制器30从视线方向检测部24获取表示驾驶员的视线方向的信息。接着，在步骤204处，显示控制器30判定由视线方向检测部24检测到的车辆的驾驶员的视线方向是否指向左显示区域74A。步骤204的判定是关于驾驶员的注视与左显示区域74A所在的平面之间的交点是否处于左显示区域74A中的判定。当在步骤204处的判定为肯定时，处理转移到步骤206，并且当在步骤204处的判定为否定时，处理转移到步骤208。
在步骤206处，显示控制器30将显示部32控制为使得显示部32将合成图像100A(见图7A)显示为遍及整个左显示区域74A的画面。因此，由第二图像捕捉部16成像的范围具有已经从第一图像捕捉部12的安装位置捕捉到的呈现内容，从而提高了对显示的画面的观察的容易性。而且，由第一图像捕捉部12捕捉的范围和由第二图像捕捉部16捕捉的范围彼此连续地显示在左显示区域74A上，从而使得驾驶员能够查看由第一图像捕捉部12捕捉的范围以及由第二图像捕捉部16捕捉的范围的各画面，而无需焦距的很大调整。
另一方面，在步骤208处，显示控制器30将显示部32控制为使得显示部32将合成图像100A(见图7A)作为减小了尺寸的画面显示在左显示区域74A的预定的局部区域中。因此，当驾驶员未看向左显示区域74A中的画面时，能够使得左显示区域74A中的画面较不突显，使得例如坐在前乘客座椅中的乘员不被左显示区域74A中的画面过分打扰。
在下一步骤210处，显示控制器30判定车辆的点火开关(IG)28是否已经被断开。当步骤210处的判定为否定时，处理返回到步骤200，并且重复步骤200到步骤210，直到步骤210处的判定为肯定。当步骤210处的判定为肯定时，处理转移到步骤212。
在步骤212处，显示控制器30判定是否从点火开关28断开开始过去了预定时间段。当步骤212处的判定为否定时，处理返回到步骤200，并且重复步骤200到步骤212，直到步骤212处的判定为肯定。因此，如果从断开点火开关28开始过去了少于预定时间段的时间，则为了检查后方而使画面显示在左显示区域74A中，使得驾驶员能够在离开车辆时通过观看画面来检查后方。另一方面，当步骤212处的判定为肯定时，显示控制器30结束图10所示的显示控制处理，并且关闭画面的显示。
如上所述，本示例性实施例能够提高观察显示的画面的容易性。
而且，如图9所示，在本示例性实施例中，左显示区域74A被设定为使得在车辆的俯视图中，经过预期的驾驶员眼睛位置62和后述车辆宽度方向位置64A的假想直线L1将经过从第一范围74X的车辆宽度方向内侧端部延伸到第二范围74Y的车辆宽度方向外侧端部的范围，其中，所述车辆宽度方向位置64A对应于车内顶棚的前端64处的前乘客座椅S2的车辆宽度方向内侧处的端部位置，所述第一范围74X显示基于第一摄像机14(第一图像捕捉部12(见图1))捕捉到的第一图像的画面，所述第二范围74Y显示基于第二摄像机18(第二图像捕捉部16(见图1))捕捉到的第二图像的画面。因此，在车辆的俯视图中，当驾驶员正看向显示基于左显示器74的左显示区域74A中的第二图像的画面的第二范围74Y时，驾驶员的视线方向与在车辆的俯视图中当驾驶员观看后视镜68时的视线方向基本相同，其中，假定后视镜68设置在车内顶棚的前端64侧的车辆宽度方向中央部附近。从而，这使得能够无不适地检查左显示器74的左显示区域74A的第二范围74Y中显示的画面。
而且，在本示例性实施例中，左显示器74设置在与车辆宽度方向中央部偏移的位置处。这从而使得能够设置中央显示器56和左显示器74二者，所述中央显示器56设置在车辆宽度方向中央部处并且用于汽车导航，所述左显示器74将车辆后方侧的中央区域的画面显示在显示区域的一部分中(具体地，在左显示区域74A的第二范围74Y中)。
第二示例性实施例的修改例
在上述第二示例性实施例中，由显示控制器30(见图1，控制设备80(见图8))执行的并且由图10所示出的显示控制处理包括图10所示的步骤202至步骤208。然而，显示控制处理可以配置为执行步骤206而不是执行步骤202至步骤208。
而且，在采用了执行步骤206而不是执行图10所示的显示控制处理的步骤202至步骤208的这样的配置的情况下，可以使得配置为：使得左显示区域74A中的画面仅能够从驾驶座椅S1侧可见的这样的光控膜82被置于图9所示的左显示区域74A的表面上。光控膜82配置有随着朝向车辆后方行进而向着驾驶座椅S1侧倾斜的多个光散射限制遮光栅格。在以该方式设置了光控膜82的修改例中，由于光控膜82设置在左显示区域74A的表面上，所以左显示区域74A中的画面仅能够从驾驶座椅S1侧可见。因此，能够防止左显示区域74A中的画面进入前乘客座椅S2的乘员的视野，使得前乘客座椅S2的乘员不被显示在左显示区域74A中的画面打扰。
而且，在上述第二示例性实施例中，由显示控制器30(见图1，控制设备80(见图8))执行的并且由图10所示出的显示控制处理包括步骤208。然而，在例如还设置了门镜等的情况下，显示控制处理可以配置为：代替图10所示的步骤208，执行关闭合成图像100A(见图7A)的画面的显示(即，不显示)的步骤。
作为另一修改例，可以设置检测设备以检测驾驶员是否已经离开车辆，并且代替图10中的步骤210、212，可以设置判定驾驶员是否已经离开车辆的离开判定步骤。当在该离开判定步骤处的判定是否定时，处理返回到步骤200，并且重复步骤200到离开判定步骤，直到在离开判定步骤处的判定为肯定为止。当在离开判定步骤处的判定为肯定时，显示控制器(30)结束显示控制处理。
第三示例性实施例
接着，参考图11A说明本公开的第三示例性实施例。图11A是示出根据本示例性实施例的车载显示设备90的显示器92等的安装位置的示意性俯视图。如图11A所示，本示例性实施例与第二示例性实施例的不同之处在于设置了图11A所示的并且合并了左显示器74、中央显示器56和右显示器76的大显示器92，而不是图9所示的左显示器74、中央显示器56和右显示器76。
注意，本示例性实施例具有与第二示例性实施例基本相同的配置，除了下面说明的几点之外。因此，与第二示例性实施例基本相同的构成部分被分配有相同的附图标记，并且省略其说明。
显示器92由彼此相邻地设置的如下部分构成：左显示区域92A，该左显示区域92A与第二示例性实施例的左显示区域74A(见图9)对应；中央显示区域92B，该中央显示区域92B与第二示例性实施例中的中央侧上的显示区域56A(见图9)相对应；以及右显示区域92C，该右显示区域92C与第二示例性实施例的右显示区域76A(见图9)对应。
本示例性实施例的配置能够再次提高观察显示的画面的容易性。
注意，作为第三示例性实施例的修改例，可以使配置为：在换挡范围还未设定到倒挡范围的特定情况下，由第三摄像机22捕捉到的图像作为画面被显示在右显示区域92C上，并且当换挡范围已经被设定为倒挡范围时，由第三摄像机22捕捉到的图像作为画面显示在中央显示区域92B上(例如，以与左显示区域92A相邻)，而不显示汽车导航画面。而且，作为第三示例性实施例的另一修改例，可以使配置为：在换挡范围还未设定为倒挡范围的特定情况下，合成图像100A(见图7A)作为画面显示在左显示区域92A上，并且当换挡范围已经设定到倒挡范围时，合成图像100A(见图7A)例如被减小到适合于中央显示区域92B的尺寸，并且作为画面显示在中央显示区域92B上，而不显示汽车导航画面。
第四示例性实施例
接着，参考图11B说明本公开的第四示例性实施例。图11B是示出根据本示例性实施例的车载显示设备94的显示器等的安装位置的示意性俯视图。如图11B所示，本示例性实施例与第二示例性实施例不同之处在于设置了图11B所示的合并了左显示器74和中央显示器56二者的显示器96，而不是图9所示的左显示器74和中央显示器56。
注意，本示例性实施例具有与第二示例性实施例基本相同的配置，除了下面说明的几点之外。因此，与第二示例性实施例基本相同的构成部分被分配有相同的附图标记，并且省略其说明。
显示器96由彼此相邻地设置的如下部分构成：左显示区域96A，该左显示区域96A与第二示例性实施例的左显示区域74A(见图9)对应；以及中央显示区域96B，该中央显示区域与第二示例性实施例的中央侧的显示区域56A(见图9)对应。
本示例性实施例的配置再次获得了与上述第二示例性实施例相似的作用和优势效果。
注意，作为第四示例性实施例的修改例，可以使配置为：在换挡范围还未设定到倒挡范围的特定情况下，由第三摄像机22捕捉到的图像作为画面被显示在右显示区域76A上，并且当换挡范围已经被设定为倒挡范围时，由第三摄像机22捕捉到的图像作为画面显示在中央显示区域96B上，而不显示汽车导航画面。而且，作为第四示例性实施例的另一修改例，可以使配置为：在换挡范围还未设定为倒挡范围的特定情况下，合成图像100A(见图7A)作为画面显示在左显示区域96A上，并且当换挡范围已经设定到倒挡范围时，合成图像100A(见图7A)例如被减小到适合于中央显示区域96B的尺寸，并且作为画面显示在中央显示区域96B上，而不显示汽车导航画面。
本示例性实施例的配置能够再次提高观察显示的画面的容易性。
示例性实施例的补充说明
注意，作为上述示例性实施例的修改例，显示部例如可以由如下的显示部构成：该显示部能够在与设定于车厢的前面侧的仪表面板54中的显示器的显示区域不同的显示区域中显示画面。例如，显示部可以由平视显示器构成，该平视显示器能够在车厢的前面侧的前挡风玻璃98(见图5)上的显示区域中显示画面。
而且，作为上述示例性实施例的修改例，第一图像捕捉部可以设置在除了通常的门镜在前乘客座椅(S2)的车辆侧部(60A)处的设置位置以外的部位，并且第二图像捕捉部可以设置在除了车辆后端部(60B)的号码板上方的位置以外的部位。
而且，在显示部的显示区域中，显示基于第一图像的画面的第一范围和显示基于第二图像的画面的第二范围的设定位置不限于在第一和第二示例性实施例中描述的实例。
而且，可以使用非暂时性存储介质等储存和分配图2所示的显示控制程序48和图8所示的显示控制程序78。
注意，可以以彼此合适的组合实现上述示例性实施例和上述修改例。
已经给出本公开的实例的说明。然而，本公开不限于以上所述，并且显然可以在不背离本公开的精神的范围内实现各种其它变型。
注意，作为本公开的示例性实施例未提供的参考实例，构成图像捕捉部的摄像机可以设置在车顶的上表面上，从而能够捕捉围绕360°的范围的图像，并且构造可以为，使得显示部将该摄像机捕捉到的图像显示在车厢的前面侧的显示区域中。

Claims (13)

1.一种车载显示设备，包括：
显示器(32)，该显示器包括在车厢的前面侧位于车辆宽度方向中央位置的前乘客座椅(S2)侧的显示区域，并且该显示器能够在所述显示区域中显示画面；
第一图像捕捉部(12)，该第一图像捕捉部设置在所述前乘客座椅(S2)侧的车辆侧部(60A)，并且该第一图像捕捉部捕捉车辆后方的图像；
第二图像捕捉部(16)，该第二图像捕捉部设置在车辆后端(60B)，并且在与所述第一图像捕捉部(12)的成像范围局部重叠的成像范围内捕捉车辆后方的图像；以及
显示控制器(30)，该显示控制器将所述第二图像捕捉部(16)捕捉到的第二图像转换为如同从在所述第一图像捕捉部(12)的安装位置处的假想视点所观察到的视点转换图像，该显示控制器将所述第一图像捕捉部(12)捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接，以生成合成图像(100A)，并且该显示控制器控制所述显示器(32)，以将所述合成图像(100A)作为画面显示在所述显示区域中。
2.一种车载显示设备，包括：
显示器(32)，该显示器包括在车厢的前面侧设定在车辆宽度方向中央位置的前乘客座椅(S2)侧的显示区域，并且该显示器能够在所述显示区域中显示画面，所述显示区域包括第一显示区域(34A)和第二显示区域(36A)，该第二显示区域(36A)设置在所述第一显示区域(34A)的车辆宽度方向内侧，从而与所述第一显示区域(34A)位于一排并且在所述第一显示区域(34A)与所述第二显示区域(36A)之间具有非显示区域(35A)；
第一图像捕捉部(12)，该第一图像捕捉部设置在所述前乘客座椅(S2)的车辆侧部(60A)，并且该第一图像捕捉部捕捉车辆后方的图像；
第二图像捕捉部(16)，该第二图像捕捉部设置在车辆后端(60B)，并且在与所述第一图像捕捉部(12)的成像范围局部重叠的成像范围内捕捉车辆后方的图像；以及
显示控制器(30)，该显示控制器将所述第二图像捕捉部(16)捕捉到的第二图像转换为如同从在所述第一图像捕捉部(12)的安装位置处的假想视点所观察到的视点转换图像，该显示控制器将所述第一图像捕捉部(12)捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接，以生成合成图像(100A)，该显示控制器将所述合成图像(100A)的整个区域与组合了所述第一显示区域(34A)、所述非显示区域(35A)和所述第二显示区域(36A)的区域相关联，该显示控制器从所述合成图像(100A)提取与所述第一显示区域(34A)对应的图像区域以生成第一修剪图像，并且从所述合成图像(100A)提取与所述第二显示区域(36A)对应的图像区域以生成第二修剪图像，并且该显示控制器控制所述显示器(32)，以将所述第一修剪图像作为画面显示在所述第一显示区域(34A)中，并且该显示控制器控制所述显示器(32)，以将所述第二修剪图像作为画面显示在所述第二显示区域(36A)中。
3.根据权利要求1或2所述的车载显示设备，其中，所述显示区域被设定为：在车辆俯视图中，经过预期的驾驶员眼睛位置(62)和如下车辆宽度方向位置的假想直线(L1)经过从第一范围(34A)的车辆宽度方向内侧端部延伸至第二范围(36A)的车辆宽度方向外侧端部的范围，其中，所述车辆宽度方向位置对应于在车内顶棚的前端(64)处位于所述前乘客座椅(S2)的车辆宽度方向内侧的端部位置，所述第一范围(34A)显示基于所述第一图像的画面，所述第二范围(36A)显示基于所述第二图像的画面。
4.根据权利要求1至3的任意一项所述的车载显示设备，其中，光控膜(66)放置于所述显示区域的表面上，该光控膜使得所述显示区域中的画面仅从驾驶座椅(S1)侧可见。
5.根据权利要求1至4的任意一项所述的车载显示设备，还包括：
视线方向检测部(24)，该视线方向检测部检测所述车辆的驾驶员的视线方向，其中，
所述显示控制器(30)控制所述显示器(32)，以在所述视线方向检测部(24)检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况下，所述显示器(32)遍及整个所述显示区域地显示画面，并且所述显示控制器(30)控制所述显示器(32)，以在与所述视线方向检测部(24)检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况不同的情况下，所述显示器(32)在所述显示区域的预定的局部区域中以减小的尺寸显示画面。
6.一种用于车载显示设备的控制方法，所述车载显示设备包括：
显示器(32)，该显示器包括在车厢的前面侧设定在车辆宽度方向中央位置的前乘客座椅(S2)侧的显示区域，并且该显示器能够在所述显示区域中显示画面；
第一图像捕捉部(12)，该第一图像捕捉部设置在所述前乘客座椅(S2)侧的车辆侧部(60A)，并且该第一图像捕捉部捕捉车辆后方的图像；以及
第二图像捕捉部(16)，该第二图像捕捉部设置在车辆后端(60B)，并且在与所述第一图像捕捉部的成像范围(14A)局部重叠的成像范围内捕捉车辆后方的图像，
所述控制方法包括：
将所述第二图像捕捉部(16)捕捉到的第二图像转换为如同从在所述第一图像捕捉部(12)的安装位置处的假想视点所观察到的视点转换图像，将所述第一图像捕捉部(12)捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接，以生成合成图像(100A)，以及使用所述显示器(32)将所述合成图像(100A)作为画面显示在所述显示区域中。
7.一种用于车载显示设备的控制方法，所述车载显示设备包括：
显示器(32)，该显示器包括在车厢的前面侧设定在车辆宽度方向中央位置的前乘客座椅(S2)侧的显示区域，并且该显示器能够在所述显示区域中显示画面，所述显示区域包括第一显示区域(34A)和第二显示区域(36A)，该第二显示区域(36A)设置在所述第一显示区域(34A)的车辆宽度方向内侧，从而与所述第一显示区域(34A)位于一排并且所述第一显示区域(34A)与所述第二显示区域(36A)之间具有非显示区域(35A)；
第一图像捕捉部(12)，该第一图像捕捉部设置在所述前乘客座椅(S2)侧的车辆侧部(60A)，并且该第一图像捕捉部捕捉车辆后方的图像；以及
第二图像捕捉部(16)，该第二图像捕捉部设置在车辆后端(60B)，并且在与所述第一图像捕捉部(12)的成像范围(14A)局部重叠的成像范围内捕捉车辆后方的图像，
所述控制方法包括：
将所述第二图像捕捉部(16)捕捉到的第二图像转换为如同从在所述第一图像捕捉部(12)的安装位置处的假想视点所观察到的视点转换图像，将所述第一图像捕捉部(12)捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接，以生成合成图像(100A)，将所述合成图像(100A)的整个区域与组合了所述第一显示区域(34A)、所述非显示区域(35A)和所述第二显示区域(36A)的区域相关联，从所述合成图像(100A)提取与所述第一显示区域(34A)对应的图像区域以生成第一修剪图像，并且从所述合成图像(100A)提取与所述第二显示区域(36A)对应的图像区域以生成第二修剪图像，以及使用所述显示器(32)将所述第一修剪图像作为画面显示在所述第一显示区域(34A)中，和使用所述显示器(32)将所述第二修剪图像作为画面显示在所述第二显示区域(36A)中。
8.根据权利要求6或7所述的车载显示设备控制方法，其中，所述显示区域被设定为：在车辆俯视图中，经过预期的驾驶员眼睛位置(62)和如下车辆宽度方向位置的假想直线(L1)经过从第一范围(34A)的车辆宽度方向内侧端部延伸到第二范围(36A)的车辆宽度方向外侧端部的范围，其中，所述车辆宽度方向位置对应于在车内顶棚的前端(64)处位于所述前乘客座椅(S2)的车辆宽度方向内侧的端部位置，所述第一范围(34A)显示基于所述第一图像的画面，所述第二范围(36A)显示基于所述第二图像的画面。
9.根据权利要求6至8的任意一项所述的车载显示设备控制方法，还包括：
检测所述车辆的驾驶员的视线方向；以及
控制所述显示器(32)，以在所检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况下，遍及整个所述显示区域地显示画面，并且控制所述显示器(32)，以在与所检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况不同的情况下，在所述显示区域的预定的局部区域中以减小的尺寸显示画面。
10.一种存储用于车载显示设备的控制程序的存储介质，所述车载显示设备包括：
显示器(32)，该显示器包括在车厢的前面侧设定在车辆宽度方向中央位置的前乘客座椅(S2)侧的显示区域，并且该显示器能够在所述显示区域中显示画面；
第一图像捕捉部(12)，该第一图像捕捉部设置在所述前乘客座椅(S2)侧的车辆侧部(60A)，并且该第一图像捕捉部捕捉车辆后方的图像；以及
第二图像捕捉部(16)，该第二图像捕捉部设置在车辆后端(60B)，并且在与所述第一图像捕捉部的成像范围(14A)局部重叠的成像范围内捕捉车辆后方的图像，
所述控制程序能够由所述车载显示设备中所包括的计算机执行，以进行处理，所述处理包括：
将所述第二图像捕捉部(16)捕捉到的第二图像转换为如同从在所述第一图像捕捉部的安装位置处的假想视点所观察到的视点转换图像，将所述第一图像捕捉部(12)捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接，以生成合成图像(100A)，以及使用所述显示器(32)将所述合成图像(100A)作为画面显示在所述显示区域中。
11.一种存储用于车载显示设备的控制程序的存储介质，所述车载显示设备包括：
显示器(32)，该显示器包括在车厢的前面侧设定在车辆宽度方向中央位置的前乘客座椅(S2)侧的显示区域，并且该显示器能够在所述显示区域中显示画面，所述显示区域包括第一显示区域(34A)和第二显示区域(36A)，该第二显示区域(36A)设置在所述第一显示区域(34A)的车辆宽度方向内侧，从而与所述第一显示区域(34A)位于一排并且所述第一显示区域(34A)与所述第二显示区域(36A)之间具有非显示区域(35A)；
第一图像捕捉部(12)，该第一图像捕捉部设置在所述前乘客座椅(S2)侧的车辆侧部(60A)，并且该第一图像捕捉部捕捉车辆后方的图像；以及
第二图像捕捉部(16)，该第二图像捕捉部设置在车辆后端(60B)，并且在与所述第一图像捕捉部(12)的成像范围(14A)局部重叠的成像范围内捕捉车辆后方的图像，
所述控制程序能够由所述车载显示设备中所包括的计算机执行，以进行处理，所述处理包括：
将所述第二图像捕捉部(16)捕捉到的第二图像转换为如同从在所述第一图像捕捉部(12)的安装位置处的假想视点所观察到的视点转换图像，将所述第一图像捕捉部(12)捕捉到的第一图像与所述视点转换图像中的不与所述第一图像重叠的范围内的图像拼接，以生成合成图像(100A)，将所述合成图像(100A)的整个区域与组合了所述第一显示区域(34A)、所述非显示区域(35A)和所述第二显示区域(36A)的区域相关联，从所述合成图像(100A)提取与所述第一显示区域(34A)对应的图像区域以生成第一修剪图像，并且从所述合成图像(100A)提取与所述第二显示区域(36A)对应的图像区域以生成第二修剪图像，以及使用所述显示器(32)将所述第一修剪图像作为画面显示在所述第一显示区域(34A)中，和使用所述显示器(32)将所述第二修剪图像作为画面显示在所述第二显示区域(36A)中。
12.根据权利要求10或11所述的存储介质，其中，所述显示区域被设定为：在车辆俯视图中，经过预期的驾驶员眼睛位置(62)和如下车辆宽度方向位置的假想直线(L1)经过从第一范围(34A)的车辆宽度方向内侧端部延伸到第二范围(36A)的车辆宽度方向外侧端部的范围，其中，所述车辆宽度方向位置对应于在车内顶棚的前端(64)处位于所述前乘客座椅(S2)的车辆宽度方向内侧的端部位置，所述第一范围(34A)显示基于所述第一图像的画面，所述第二范围(36A)显示基于所述第二图像的画面。
13.根据权利要求10至12的任意一项所述的存储介质，其中，所述处理还包括：
检测所述车辆的驾驶员的视线方向；以及
控制所述显示器(32)，以在所检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况下，遍及整个所述显示区域地显示画面，并且控制所述显示器(32)，以在与所检测到的所述车辆的驾驶员的视线方向指向所述显示区域的情况不同的情况下，在所述显示区域的预定的局部区域中以减小的尺寸显示画面。
CN201810118670.1A 2017-03-17 2018-02-06 车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质 Active CN108621937B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-053306 2017-03-17
JP2017053306A JP6665819B2 (ja) 2017-03-17 2017-03-17 車載表示装置

Publications (2)

Publication Number Publication Date
CN108621937A true CN108621937A (zh) 2018-10-09
CN108621937B CN108621937B (zh) 2021-11-26

Family

ID=63372121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810118670.1A Active CN108621937B (zh) 2017-03-17 2018-02-06 车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质

Country Status (4)

Country Link
US (1) US10843628B2 (zh)
JP (1) JP6665819B2 (zh)
CN (1) CN108621937B (zh)
DE (1) DE102018101542B4 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111038391A (zh) * 2018-10-12 2020-04-21 本田技研工业株式会社 后方视觉确认装置
CN111409556A (zh) * 2020-04-13 2020-07-14 京东方科技集团股份有限公司 车辆a柱显示组件的显示方法、系统、设备和存储介质
CN111477100A (zh) * 2020-04-21 2020-07-31 京东方科技集团股份有限公司 光控膜及制作方法、车载显示装置
CN112406727A (zh) * 2019-08-23 2021-02-26 比亚迪股份有限公司 车辆及多屏系统的控制方法、装置
CN113661093A (zh) * 2019-03-12 2021-11-16 捷豹路虎有限公司 驾驶员辅助方法和设备
CN115206197A (zh) * 2022-07-22 2022-10-18 智己汽车科技有限公司 一种车载前排的拼接显示屏组

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10678244B2 (en) 2017-03-23 2020-06-09 Tesla, Inc. Data synthesis for autonomous control systems
US11409692B2 (en) 2017-07-24 2022-08-09 Tesla, Inc. Vector computational unit
US11893393B2 (en) 2017-07-24 2024-02-06 Tesla, Inc. Computational array microprocessor system with hardware arbiter managing memory requests
US10671349B2 (en) 2017-07-24 2020-06-02 Tesla, Inc. Accelerated mathematical engine
US11157441B2 (en) 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system using non-consecutive data formatting
US11561791B2 (en) 2018-02-01 2023-01-24 Tesla, Inc. Vector computational unit receiving data elements in parallel from a last row of a computational array
JP2019154018A (ja) * 2018-03-06 2019-09-12 パナソニックＩｐマネジメント株式会社 車両周辺表示システム、表示制御装置およびコンピュータプログラム
JP6890288B2 (ja) * 2018-03-28 2021-06-18 パナソニックＩｐマネジメント株式会社 画像処理装置、画像表示システムおよび画像処理方法
US11215999B2 (en) 2018-06-20 2022-01-04 Tesla, Inc. Data pipeline and deep learning system for autonomous driving
US11361457B2 (en) 2018-07-20 2022-06-14 Tesla, Inc. Annotation cross-labeling for autonomous control systems
US11636333B2 (en) 2018-07-26 2023-04-25 Tesla, Inc. Optimizing neural network structures for embedded systems
US11562231B2 (en) 2018-09-03 2023-01-24 Tesla, Inc. Neural networks for embedded devices
CA3115784A1 (en) 2018-10-11 2020-04-16 Matthew John COOPER Systems and methods for training machine models with augmented data
US11196678B2 (en) 2018-10-25 2021-12-07 Tesla, Inc. QOS manager for system on a chip communications
JP7338146B2 (ja) * 2018-11-27 2023-09-05 ソニーグループ株式会社 表示制御装置、表示制御方法及び表示制御プログラム
US11816585B2 (en) 2018-12-03 2023-11-14 Tesla, Inc. Machine learning models operating at different frequencies for autonomous vehicles
US11537811B2 (en) 2018-12-04 2022-12-27 Tesla, Inc. Enhanced object detection for autonomous vehicles based on field view
US11610117B2 (en) 2018-12-27 2023-03-21 Tesla, Inc. System and method for adapting a neural network model on a hardware platform
US10997461B2 (en) 2019-02-01 2021-05-04 Tesla, Inc. Generating ground truth for machine learning from time series elements
US11567514B2 (en) 2019-02-11 2023-01-31 Tesla, Inc. Autonomous and user controlled vehicle summon to a target
US10956755B2 (en) 2019-02-19 2021-03-23 Tesla, Inc. Estimating object properties using visual image data
JP2020138553A (ja) * 2019-02-26 2020-09-03 本田技研工業株式会社 車両用表示器の配置構造
JP7005115B2 (ja) * 2019-04-05 2022-01-21 矢崎総業株式会社 車両用表示装置
WO2021002487A1 (ko) * 2019-07-01 2021-01-07 엘지전자 주식회사 차량 제어 장치 및 그것을 포함하는 차량
US11340701B2 (en) * 2019-12-16 2022-05-24 Nvidia Corporation Gaze determination using glare as input
US11617941B2 (en) * 2020-09-01 2023-04-04 GM Global Technology Operations LLC Environment interactive system providing augmented reality for in-vehicle infotainment and entertainment
EP4304897A1 (en) * 2021-03-12 2024-01-17 Stoneridge, Inc. Vehicle camera mirror system with adjustable video feed
DE102021122159A1 (de) 2021-08-26 2023-03-02 Bayerische Motoren Werke Aktiengesellschaft Kompaktes Doppel-Head-up-Display für zwei Insassen in einem Fahrzeug

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020067366A1 (en) * 2000-12-01 2002-06-06 Nissan Motor Co., Ltd. Display apparatus for vehicle
US20030035050A1 (en) * 2001-08-09 2003-02-20 Matsushita Electric Industrial Co., Ltd. Driving assistance display apparatus
CN1922055A (zh) * 2004-02-20 2007-02-28 夏普株式会社 车载显示装置、车载显示系统和车辆
CN104163133A (zh) * 2013-05-16 2014-11-26 福特环球技术公司 使用后视镜位置的后视摄像机系统
US20150234459A1 (en) * 2014-01-24 2015-08-20 Tobii Technology Ab Gaze driven interaction for a vehicle
US20160209647A1 (en) * 2015-01-19 2016-07-21 Magna Electronics Inc. Vehicle vision system with light field monitor
JP2016175586A (ja) * 2015-03-20 2016-10-06 株式会社デンソーアイティーラボラトリ 車両周辺監視装置、車両周辺監視方法、及びプログラム

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04139974A (ja) * 1990-09-29 1992-05-13 Sanyo Electric Co Ltd 多画面表示装置の表示補正方法
US6891563B2 (en) 1996-05-22 2005-05-10 Donnelly Corporation Vehicular vision system
JP2003081014A (ja) 2001-09-14 2003-03-19 Auto Network Gijutsu Kenkyusho:Kk 車両周辺監視装置
US6905219B2 (en) * 2002-05-09 2005-06-14 3M Innovative Properties Company Display device
JP2006106254A (ja) * 2004-10-04 2006-04-20 Denso Corp 車両用ヘッドアップディスプレイ
JP2008001120A (ja) 2006-06-20 2008-01-10 Nissan Motor Co Ltd 車両用表示制御装置
JP5061777B2 (ja) * 2007-08-07 2012-10-31 パナソニック株式会社 プラズマディスプレイ装置およびプラズマディスプレイパネルの駆動方法
US20090256813A1 (en) * 2008-04-09 2009-10-15 Amici Alan J Vehicle moving-image interface
WO2010080610A1 (en) * 2008-12-19 2010-07-15 Delphi Technologies, Inc. Electronic side view display system
JP2011213186A (ja) * 2010-03-31 2011-10-27 Equos Research Co Ltd 電子サイドミラー装置
JP5745827B2 (ja) 2010-11-29 2015-07-08 パイオニア株式会社 車両表示装置
US20120215403A1 (en) * 2011-02-20 2012-08-23 General Motors Llc Method of monitoring a vehicle driver
JP6247450B2 (ja) 2013-03-31 2017-12-13 株式会社村上開明堂 運転支援装置
JP6413207B2 (ja) * 2013-05-20 2018-10-31 日本精機株式会社 車両用表示装置
JP2016055801A (ja) * 2014-09-11 2016-04-21 トヨタ自動車株式会社 車載表示装置
JP2016060411A (ja) * 2014-09-19 2016-04-25 株式会社Ｊｖｃケンウッド 確認支援装置および確認支援システム
JP6319029B2 (ja) * 2014-10-06 2018-05-09 株式会社デンソー 車両用モニタシステム
JP6197814B2 (ja) * 2015-03-18 2017-09-20 マツダ株式会社 車両用表示装置
JP6311646B2 (ja) * 2015-05-20 2018-04-18 株式会社デンソー 画像処理装置、電子ミラーシステム、及び画像処理方法
KR102510395B1 (ko) * 2015-12-01 2023-03-16 삼성디스플레이 주식회사 표시 장치 시스템
US20170347067A1 (en) * 2016-05-24 2017-11-30 Gentex Corporation Vehicle display with selective image data display
KR20170141484A (ko) * 2016-06-15 2017-12-26 엘지전자 주식회사 차량용 제어장치 및 그것의 제어방법

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020067366A1 (en) * 2000-12-01 2002-06-06 Nissan Motor Co., Ltd. Display apparatus for vehicle
US20030035050A1 (en) * 2001-08-09 2003-02-20 Matsushita Electric Industrial Co., Ltd. Driving assistance display apparatus
CN1922055A (zh) * 2004-02-20 2007-02-28 夏普株式会社 车载显示装置、车载显示系统和车辆
CN104163133A (zh) * 2013-05-16 2014-11-26 福特环球技术公司 使用后视镜位置的后视摄像机系统
US20150234459A1 (en) * 2014-01-24 2015-08-20 Tobii Technology Ab Gaze driven interaction for a vehicle
US20160209647A1 (en) * 2015-01-19 2016-07-21 Magna Electronics Inc. Vehicle vision system with light field monitor
JP2016175586A (ja) * 2015-03-20 2016-10-06 株式会社デンソーアイティーラボラトリ 車両周辺監視装置、車両周辺監視方法、及びプログラム

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111038391A (zh) * 2018-10-12 2020-04-21 本田技研工业株式会社 后方视觉确认装置
CN111038391B (zh) * 2018-10-12 2023-01-06 本田技研工业株式会社 后方视觉确认装置
CN113661093A (zh) * 2019-03-12 2021-11-16 捷豹路虎有限公司 驾驶员辅助方法和设备
CN112406727A (zh) * 2019-08-23 2021-02-26 比亚迪股份有限公司 车辆及多屏系统的控制方法、装置
CN111409556A (zh) * 2020-04-13 2020-07-14 京东方科技集团股份有限公司 车辆a柱显示组件的显示方法、系统、设备和存储介质
CN111477100A (zh) * 2020-04-21 2020-07-31 京东方科技集团股份有限公司 光控膜及制作方法、车载显示装置
CN111477100B (zh) * 2020-04-21 2022-08-09 京东方科技集团股份有限公司 光控膜及制作方法、车载显示装置
CN115206197A (zh) * 2022-07-22 2022-10-18 智己汽车科技有限公司 一种车载前排的拼接显示屏组

Also Published As

Publication number Publication date
CN108621937B (zh) 2021-11-26
DE102018101542B4 (de) 2022-12-08
US20180265002A1 (en) 2018-09-20
JP6665819B2 (ja) 2020-03-13
DE102018101542A1 (de) 2018-09-20
US10843628B2 (en) 2020-11-24
JP2018157403A (ja) 2018-10-04

Similar Documents

Publication Publication Date Title
CN108621937A (zh) 车载显示设备、车载显示设备的控制方法以及存储车载显示设备的控制程序的存储介质
US10343607B2 (en) Viewing device for vehicle
US9376059B2 (en) Method for presenting an image in a vehicle
US10737624B2 (en) Viewing device for vehicle
JP5093611B2 (ja) 車両周辺確認装置
US20120069188A1 (en) Image processing apparatus, electronic apparatus, and image processing method
US10752177B2 (en) Vehicular visual recognition device and vehicular visual recognition image display method
JP2015027852A (ja) 運転支援装置
JP2011213186A (ja) 電子サイドミラー装置
JP4798015B2 (ja) 防眩制御装置
JP4849333B2 (ja) 車両用視覚補助装置
JP2019145982A (ja) 車両用視認装置
US20100156782A1 (en) Hand Control Image For Replication
JP2018022958A (ja) 車両用表示制御装置及び車両用モニタシステム
JP4496490B2 (ja) 車両用表示装置
JP2010208359A (ja) 車両用表示装置
JP6118936B2 (ja) 画像処理装置
JP2004356731A (ja) 車載情報提供装置
JP2019009598A (ja) 表示制御装置、表示制御方法、及び、表示制御プログラム
JP7037896B2 (ja) 視認補助装置
CN112532915A (zh) 车外监视装置
JP2005088759A (ja) 幅寄せカメラ
JP2004023472A (ja) 車両前方暗視システム
JP4082245B2 (ja) 車両の後方視界表示装置
JP4285229B2 (ja) 車両用表示装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant