CN105981376A - 驾驶辅助装置 - Google Patents

驾驶辅助装置 Download PDF

Info

Publication number
CN105981376A
CN105981376A CN201480073878.6A CN201480073878A CN105981376A CN 105981376 A CN105981376 A CN 105981376A CN 201480073878 A CN201480073878 A CN 201480073878A CN 105981376 A CN105981376 A CN 105981376A
Authority
CN
China
Prior art keywords
image
unit
generating unit
assistance device
imageing sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480073878.6A
Other languages
English (en)
Other versions
CN105981376B (zh
Inventor
近藤彻
杉江和纪
石黑阳子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN105981376A publication Critical patent/CN105981376A/zh
Application granted granted Critical
Publication of CN105981376B publication Critical patent/CN105981376B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/25—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the sides of the vehicle
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B3/00—Simple or compound lenses
    • G02B3/02—Simple or compound lenses with non-spherical faces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/80—Geometric correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/202—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used displaying a blind spot scene on the vehicle part responsible for the blind spot
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Geometry (AREA)

Abstract

一种视觉信息辅助装置(10)，设置有：CCD摄像机(20)；投影仪(22)，其基于来自CCD摄像机(20)的图像信息将图像投射到屏幕(24)上；和光学校正单元(28)，其配置为使得由CCD摄像机(20)的图像传感器(30)获取的图像信息变为匹配屏幕(24)的匹配图像信息。

Description

驾驶辅助装置
技术领域
本发明涉及一种驾驶辅助装置。
背景技术
已知一种驾驶辅助方法和驾驶辅助装置(例如，参见日本专利申请公开(JP-A)No.2008-265719)：即使当驾驶员通过镜子观看车辆周围时由于立柱而产生盲点，也可以显示在立柱处的盲点区域Ad的图像。该技术构成为：为了抑制在立柱处投影的图像的歪曲，使得由图像处理而校正的图像输出到投影仪。
发明内容
技术问题
然而，图像处理的校正要求计算的时间。因此，相对于实际场景的投影图像的投影时间可能有大的延迟。
本发明的目的是提供一种驾驶辅助装置，利用该装置，将在相对于实际场景的投影表面处投影的图像的投影时间的延迟保持为小的。
解决问题的方案
技术方案
根据第一方面的驾驶辅助装置包括：成像单元；投影单元，其将基于来自所述成像单元的图像信息的图像朝着投影表面投射；以及调整单元，其被配置为将成像单元的图像传感器获取的图像信息形成为为所述投影表面而调整的调整图像信息。
在该驾驶辅助装置中，由成像单元成像的图像利用投影单元投射在投影表面处，并且由投影单元投影的图像投射到投影表面上。由成像单元的图像传感器获取的图像信息为调整图像信息，其已经利用调整单元调整到投影表面(的尺寸、形状、配置和姿态)。从而，可以投射校正在投影表面处的歪曲等的图像，而由投影单元投射的图像不利用图像处理而校正。
因此，利用根据第一方面的驾驶辅助装置，相比于通过图像处理校正图像信息的结构，能够将相对于实际场景在投影表面处投射的图像的投射时间的延迟保持为小的。
以上方面可以是这样的结构：其中，所述调整单元包括光学校正单元，其使得所述图像传感器通过光学校正而获取所述调整图像信息。
利用该驾驶辅助装置，因为在成像单元的图像传感器处获取光学校正的图像信息，所以可以利用简单的结构将相对于实际场景在投影表面处投射的图像的投射时间的延迟保持为小的。
以上方面可以是这样的结构：其中，所述光学校正单元包括传感器配置结构，其中，所述图像传感器被配置为相对于所述成像单元的光轴倾斜，或者所述图像传感器被配置为弯曲的。
在该驾驶辅助装置中，与投影表面的尺寸和形状或者配置(姿态)相对应，图像传感器相对于成像单元的光轴(方向)倾斜或者弯曲。因此，可以利用简单的结构在图像传感器处获取调整图像信息。
以上方面可以是这样的结构：其中，所述光学校正单元包括光学元件，其使图像非对称地相对于所述成像单元的光轴折射或者反射。
在该驾驶辅助装置中，因为利用光学元件使图像非对称地相对于光轴折射或者反射，所以与投影表面非对称地对应的图像汇聚在图像传感器处，并且图像传感器获取调整图像信息。因此，可以利用普通(平坦)的图像传感器在图像传感器处获取调整图像信息。
以上方面可以是这样的结构：其中，所述光学校正单元设置在所述成像单元中。
在该驾驶辅助装置中，因为光学校正单元设置在成像单元的内部(即，光学校正单元构成成像单元)，所以整体结构比用于校正的结构或部件设置在成像单元外部的结构更加小型化。
以上方面可以是这样的结构：所述调整单元包括投影单元配置结构，其将所述投影单元配置为匹配驾驶员的视点。
在该驾驶辅助装置中，投影单元(的发光部)配置为利用投影单元配置结构而与驾驶员的视点匹配。因此，不需要校正由驾驶员的视线与投影单元的偏差而导致的投射图像的歪曲。
以上方面可以是这样的结构：其中，在平面图中，所述成像单元被配置在从驾驶员的视点朝着形成所述投影表面的车辆部件的视线的延长线上，并且所述成像单元将构成由所述车辆部件引起的盲点的车辆外部区域成像。
在该驾驶辅助装置中，作为驾驶员的盲点的车辆外部区域(的至少一部分)由成像单元成像，并且由成像单元成像的图像投射在产生盲点的车辆部件的投影表面处。因为成像单元配置在视线的延长线上，所以可以使作为驾驶员的盲点区域的区域成像。
以上方面可以是这样的结构：其中，在平面图中，所述成像单元的成像方向与从驾驶员的视点朝着形成所述投影表面的车辆部件的视线的方向匹配，并且所述成像单元将构成由所述车辆部件引起的盲点的车辆外部区域成像。
在该驾驶辅助装置中，作为驾驶员的盲点的车辆外部区域(的至少一部分)由成像单元成像，并且由成像单元成像的图像投射在产生盲点的车辆部件的投影表面处。在这种情况下，因为根据成像单元的成像方向与视线方向匹配，所以能够将由驾驶员的视线方向与成像单元的成像方向之间的偏差引起的投影图像的歪曲保持为小的。
发明的有益效果
如上所述根据本发明的驾驶辅助装置提供了如下优良的有益效果：将在相对于实际场景的投影表面处投影的图像的投影时间的延迟保持为小的。
附图说明
图1A是示出示意性结构的示意图，是图示出构成根据第一示例性实施例的视觉信息辅助装置的CCD摄像机和光学校正单元的图。
图1B是调整图像信息的概念图，是图示出构成根据第一示例性实施例的视觉信息辅助装置的CCD摄像机和光学校正单元的图。
图2是图示出根据第一示例性实施例的视觉信息辅助装置的示意性整体结构的平面图。
图3A是图示出根据第一变形例的CCD摄像机和光学校正单元的示意图。
图3B是图示出根据第二变形例的CCD摄像机和光学校正单元的示意图。
图4是图示出根据第二示例性实施例的视觉信息辅助装置的示意性整体结构的平面图。
下面示出在本说明书中使用的参考标号与元件名称之间的对应性。
10 视觉信息辅助装置(驾驶辅助装置的实例)
18 前立柱(车辆部件的实例)
20 CCD摄像机(成像单元的实例)
22 投影仪(投影单元的实例)
24 屏幕(投影表面的实例)
28 光学校正单元(调整单元的实例、光学校正单元的实例、传感器配置结构的实例)
30 图像传感器
36、40 光学校正单元36、40(调整单元的实例和光学校正单元的实例)
38、42 校正透镜(光学元件的实例)
50 视觉信息辅助装置
52 投影仪(投影单元的实例)
54 调整结构(调整单元的实例和投影单元配置结构的实例)
具体实施方式
参考图1A、1B和图2描述充当根据本发明的第一示例性实施例的驾驶辅助装置的实例的视觉信息辅助装置10。图2中标记的箭头FR和箭头LH分别代表采用视觉信息辅助装置10的车辆的前方和当面对前方时的左方。在以下说明中，除非特殊指定，使用前、后、上、下、左和右给出的简单说明代表车辆前后方向上的前和后、车辆上下方向上的上和下、以及当面对前方时的左和右。
＝汽车的一般结构＝
如图2所示，车辆座椅12设置在汽车V的车厢的内部，汽车V充当采用视觉信息辅助装置10的车辆的实例。在该示例性实施例中，车辆座椅12设置在相对于汽车V的车辆宽度方向中心的左侧处。挡风玻璃14设置在车辆座椅12的前方。侧窗玻璃16设置在车辆座椅12的车辆宽度方向外侧的每侧处。
在挡风玻璃14与每侧窗玻璃16之间，设置了充当立柱的实例的前立柱18。前立柱18与顶盖和罩部一起构成窗框，该窗框确保了通过挡风玻璃14的视野。前立柱18与附图中未示出的各个侧门的门框架等一起构成了窗框，该窗框确保了通过侧窗玻璃16的视野。前立柱18可以理解为框架(窗框)部件，其制造(产生)作为驾驶员D的车辆座椅12上就坐的乘客的盲点。
＝视觉信息辅助装置＝
视觉信息辅助装置10配置为使得构成因为前立柱18而产生的对于驾驶员D的盲点的车辆外部区域(后文中，称为“盲点区域Ad”)的视觉信息对驾驶员D可见。在以下说明中，术语“前立柱18”是指夹在挡风玻璃14与侧窗玻璃16之间的框架部件，该术语的意思不包括设置为比挡风玻璃14和侧窗玻璃16低的部分。下面给出具体的说明。
如图2所示，视觉信息辅助装置10包括：CCD摄像机20，其充当成像单元的实例；投影仪22，其充当投影单元的实例；以及屏幕24，其形成显示表面。图2的实例中所示的CCD摄像机、投影仪22和屏幕24用于将根据左侧前立柱18的盲点图像投射到左侧前立柱18上。
-CCD摄像机-
CCD摄像机20构成为将与前立柱18相对应的车辆外部区域(车辆外侧场景)成像，并且将通过成像而获得的图像信息输出到投影仪22。在平面图中，CCD摄像机20设置在从驾驶员D朝着前立柱18的视线SL的延长线SLe上。
视线SL是连接驾驶员D的视点EP与前立柱18(盲点区域Ad)的宽度方向中心的直线。视点EP是例如满足JIS D0021标准的标准视点，其被指定为驾驶员D的双眼之间的中央部。在图2中，盲点区域Ad图示为用于前立柱18的指定截面(屏幕24的截面24A，稍后描述)。
视线SL向车辆外侧，即，在前立柱18的前方延伸的线是视线SL的延长线SLe。前立柱18形成具有闭合截面的框架部件，并且CCD摄像机20设置在该闭合截面内。
在平面图中，CCD摄像机20的成像(光轴)方向与驾驶员D的视线SL的方向匹配。在CCD摄像机20的侧视图中，成像方向是水平方向或者稍微向下的方向。具体地，在侧视图中CCD摄像机20的成像方向是水平防线，其连接驾驶员D的视点EP与前立柱18的(即，盲点区域Ad的)上下方向上的中心。作为实例，CCD摄像机20可以设置在前立柱18的上下方向上的中央部处，并且CCD摄像机20的成像方向可以与驾驶员D的视线SL的延长线SLe一致。CCD摄像机20的成像范围(视野)指定为比盲点区域Ad大。
下面描述构成本发明的调整单元的CCD摄像机20的内部结构。
-投影仪-
投影仪22通过无线或者有线输入来自CCD摄像机20的图像信息，并且基于图像信息朝着屏幕24投射图像，该屏幕24充当投影表面的实例。更具体地，投影仪22配置为将由前立柱18导致的盲点区域Ad的图像朝着屏幕24投射，该图像为由CCD摄像机20成像的图像。
在示例性实施例中，投影仪22设置在顶棚R的前端侧处(在顶棚前衬板中、在顶部控制台中等)。
-屏幕-
屏幕24设置在立柱装饰的表面处(附图中未示出)，该立柱装饰为内部配饰的实例，构成充当车辆部件的实例的前立柱18。或者，屏幕24与立柱装置的表面一体地形成(由立柱装饰的表面本身构成)。由投影仪22投射的图像被投射到屏幕24上，并且屏幕24使得图像对驾驶员D可见。
在该示例性实施例中，屏幕24从前立柱18(立柱装饰)的上端18U附近到达下端18L附近。即，屏幕24形成为使得：由投影仪22投射的图像被投影到大致遍及立柱装饰(前立柱18)的对驾驶员D可见的整个表面的范围。
在本示例性实施例中，屏幕24是大致平面，并且抑制了由于屏幕24的形状(曲率)而产生的图像歪曲。已经校正歪曲的调整图像信息(后文说明)输入到投影仪22，使得校正了由于投影仪22相对于屏幕24的配置(姿态)而引起的图像的歪曲，并且基于该图像信息而投射图像。
-调整单元-
视觉信息辅助装置10装配有光学校正单元28，其充当图像调整单元和光学校正单元的实例。光学校正单元28配置为使得由构成CCD摄像机20的图像传感器(CCD装置组件)30获取的图像信息是调整图像信息，其已经对屏幕24相对于驾驶员D和投影仪22的尺寸、形状和配置进行调整。下面给出具体的说明。
图1A图示出在示意图中CCD摄像机20的示意性结构。如该附图所示，CCD摄像机20包括：外壳32，其容纳图像传感器30；和透镜34，其保持在外壳32内，并且将成像范围的图像聚焦到图像传感器30上。虽然在附图中未示出，但是透镜34配置为多个透镜组合的透镜群组。图像传感器30配置为获取与聚焦的图像相对应的图像信息，并且将图像信息输出到投影仪22。
在这种情况下，光学校正单元28配置为传感器配置结构，其将图像传感器30配置为相对于CCD摄像机20(透镜34)的光轴OAc倾斜。下面指定根据该传感器配置结构的图像传感器30的倾斜角度θ(在本示例性实施例中，相对于与光轴OAc垂直的平面的倾斜角度)。
首先，为了描述假定的结构，从投影仪22到屏幕24(图2中，截面24A)的任意位置A的距离由L1代表，并且从投影仪22到屏幕24的另一个位置C的距离由L2代表。从屏幕24的位置A到视点EP的距离由d1表示，并且从屏幕24的位置C到视点EP的距离由d2表示。另一个位置C是关于投影仪22的光轴OAp与屏幕24之间的交叉点而与位置A点对称的位置。
当校正系数由K代表时，图像传感器30的倾斜角度θ设定为使得获得满足以下数学表达式(1)的校正系数K。
d1/L1＝K×d2/L2 (1)
此外，如图1A、1B所示，在CCD摄像机20处成像的图像(成像区域Ai)的具体位置由a0和c0代表，并且光轴OAc的位置由b0代表。位置a0与投射到屏幕24的位置A上的成像图像的位置相对应，并且位置c0与投射到屏幕24的位置C上的成像图像的位置相对应。因此，位置a0与b0之间的距离和位置b0与c0之间的距离相等，两者都由S表示。
如图1A所示，因为光学校正单元28的配置结构，在位置a0、b0、c0的图像传感器30处的焦点位置是a1、b1和c1，并且由图像传感器30所获取的图像信息在图1B中示出。当由于图像传感器30的倾斜角度θ的上述设定而使位置a1与b1之间的距离为S1，并且b1与c1之间的距离是S2时，则校正系数K由以下表达式表示。
K＝S2/S1
图像传感器30的倾斜角度θ设定为使得校正系数K满足表达式(1)。
根据以上，在光学校正单元28中，图像传感器30配置为利用汇聚在图像传感器30处的光学校正图像来获取调整图像信息。
＝操作＝
现在，描述第一示例性实施例的操作。
采用视觉信息辅助装置10的汽车V的驾驶员D在基于通过挡风玻璃14和侧窗玻璃16可见的视觉信息而检查安全性的同时，驾驶车辆V。
视觉信息辅助装置10将由CCD摄像机20成像的图像从投影仪22投射在屏幕24处，并且图像投射到屏幕24上。投射到屏幕24上的图像能够由驾驶员D看到。即，由前立柱18导致的盲点区域Ad的视觉信息(外部场景)在设置在前立柱18处的屏幕24处显示为图像。从而，驾驶员D可以看到在驾驶员D意在检查的方向上(盲点区域Ad)补偿盲点区域Ad的图像。因此，例如，如果在盲点区域Ad中存在行人等，则驾驶员D可以注意到行人等。
该视觉信息辅助装置10配置为使得由CCD摄像机20的图像传感器30所获取的图像信息是为屏幕24的尺寸、形状和配置而调整的调整图像信息。在本示例性实施例中，图像传感器30利用图像来获取调整图像信息，该图像由光学校正单元28光学校正，同时汇聚在图像传感器30上。
当调整图像信息从CCD摄像机20输出到投影仪22时，投影仪22基于调整图像信息将图像投影在屏幕24处。从而，不被驾驶员看到歪曲或者大幅抑制了歪曲的图像投射到屏幕24上。
因此，视觉信息辅助装置10不需要通过图像处理(计算)生成校正的图像，该图像处理具有设置在CCD摄像机20、投影仪22、外部装置等处的图像处理部(程序)。因此，视觉信息辅助装置10可以将盲点图像从投影仪22投射在屏幕24处，而不要求计算的时间。
从而，在根据第一示例性实施例的视觉信息辅助装置10中，相比于通过图像处理获得调整图像信息的结构，能够将相对于实际场景在屏幕24处投射的图像的投射时间的延迟保持为小的。因此，除了对驾驶员D存在投射的图像本身的小的歪曲，盲点图像可以可视化，其由于时滞(真实场景与投射图像之间的偏差)而产生小的不协调。
在视觉信息辅助装置10中，光学校正单元28由图像传感器30构成，图像传感器30相对于CCD摄像机20的光轴OAc倾斜。从而，可以利用简单的结构在图像传感器30处获取调整图像信息。
此外，因为光学校正单元28设置在CCD摄像机20中(构成CCD摄像机20)，所以相比于用于校正的结构或者部件设置在CCD摄像机20的外部的构造，视觉信息辅助装置10的整个构造小型化。此外，因为视觉信息辅助装置10是这样的配置：其中，在图像传感器30处获取调整图像信息，多个部件是小的，并且相比于例如用于校正的光学元件配置在CCD摄像机20与投影仪22之间的构造，其整体构造小型化。
因为CCD摄像机20设置在驾驶员D的视线SL的延长线SLe上，所以驾驶员D的盲点区域Ad可以由CCD摄像机20成像。因为在平面图中CCD摄像机20的成像方向(光轴OAc)与视线SL的方向匹配，所以能够将由驾驶员D的视线SL的方向与CCD摄像机20的成像方向之间的偏差而导致的投射图像的歪曲保持为小的。因此，可以使得具有对于驾驶员更不协调的盲点图像可见，并且不需要利用可能由这样的成像方向的偏差而导致的图像的歪曲的图像处理进行校正。
＝变形例＝
现在，描述第一示例性实施例的变形例。与根据第一示例性实施例的结构基本相同的结构被分配与根据第一示例性实施例的结构相同的参考标号；可能不描述这些结构，并且可能不在附图中示出。
-第一变形例-
图3A在示意图中图示出在CCD摄像机20(视觉信息辅助装置10)处采用的根据第一变形例的光学校正单元36。如附图中所示，光学校正单元36是这样的构造：其将成像的图像汇聚到图像传感器30上，该图像传感器30利用校正透镜38而与CCD摄像机20的光轴OAc正交地设置。校正透镜38充当光学元件的实例，其将图像非对称地相对于光轴OAc传输(折射)。
虽然在附图中未示出，但是校正透镜38构造为多个透镜组合的透镜群组。至少一个透镜构造为在光轴OAc的一侧和另一侧处具有不同的折射率的透镜。汇聚到图像传感器30上的图像的图像信息形成为满足表达式(1)的调整图像信息，与第一示例性实施例相似。
因此，可以利用设置有根据第一变形例的光学校正单元36来代替光学校正单元28的结构，通过与第一示例性实施例相同的操作来提供相同的效果。
-第二变形例-
图3B在示意图中图示出在CCD摄像机20(视觉信息辅助装置10)处采用的根据第二变形例的光学校正单元40。如附图中所示，光学校正单元40是这样的构造：其利用校正透镜42将成像的图像汇聚图像传感器30上。图像传感器30与CCD摄像机20的光轴OAc成角度地设置。校正透镜42充当光学元件的实例，其将图像非对称地相对于光轴OAc传输(折射)。
虽然在附图中未示出，但是校正透镜42构造为多个透镜组合的透镜群组。至少一个透镜构造为在光轴OAc的一侧和另一侧处具有不同的折射率的透镜。从而，汇聚到图像传感器30上的图像的图像信息为满足表达式(1)的调整图像信息，与第一示例性实施例相似。
因此，可以利用设置有根据第二变形例的光学校正单元40来代替光学校正单元28的结构，通过与第一示例性实施例相同的操作来提供相同的效果。
在上述第一示例性实施例和变形例中，图示出图像传感器30平坦的实例，然而本发明不限于此。例如，在作为投影屏幕的屏幕24的一部分或者所有形成弯曲形状的结构中，能够是这样的结构：其中，图像传感器30的至少一部分与屏幕24的弯曲形状相对应地弯曲(并且具有屏幕的部分与视点EP之间的距离差等)。作为另一个实例，能够是这样的结构：其中，屏幕24的弯曲形状由图像传感器30的曲率光学校正，并且屏幕的部分与视点EP之间的距离差由校正透镜38或42校正。在这些变形例中，关于立柱装饰的形状的灵活性更高。
在上述变形例中，图示了设置校正透镜以充当光学元件的实例，然而本发明不限于此。例如，能够是这样的结构：其中，充当光学元件的实例的反射镜设置在透镜34与图像传感器30之间，并且镜子相对于光轴OAc倾斜，或者弯曲。此外，本发明不限于用于校正的光学元件设置在CCD摄像机20中的结构。例如，能够是这样的结构：将盲点区域Ad的图像引导到CCD摄像机20的镜子相对于光轴OAc倾斜或者弯曲。
＝第二示例性实施例＝
参考图4描述充当根据本发明的第二示例性实施例的驾驶辅助装置的另一个实例的视觉信息辅助装置50。与根据第一示例性实施例的结构基本相同的结构被分配与根据第一示例性实施例的结构相同的参考标号；可能不描述这些结构，并且可能不在附图中示出。
如图4所示，视觉信息辅助装置50设置有投影仪52代替投影仪22。视觉信息辅助装置50也设置有调整结构54，其充当调整单元和投影单元配置结构的实例。调整结构54设置为使投影仪52的位置(投影位置)与驾驶员D的视点EP匹配。
在本示例性实施例中，调整结构54由投影仪52构成，该投影仪52是眼镜式投影仪，驾驶员D佩戴在头部上以使用。因为采用了该校正结构，所以能够消除由驾驶员D的视点EP与投影仪52的投影位置之间的偏差而导致的投射图像的歪曲，或者将其保持为小的。换句话说
d1/L1＝d2/L2＝1
并且从而
K＝1
因此，在本示例性实施例中，可以在图像传感器30处获取到调整图像信息，该图像传感器30设置为与CCD摄像机20的光轴OAc正交，并且成像的图像由透镜34汇聚在图像传感器30上，而不使用光学校正单元28、36或40。
因为在图像传感器30处获取了调整图像信息，所以除了由于使用光学校正单元28、36或40的操作效果之外，根据第二示例性实施例的视觉信息辅助装置50可以通过与视觉信息辅助装置50相同的操作提供相同的效果。在当前的视觉信息辅助装置10中，可以使用具有通常结构的CCD摄像机20(设置为与光轴OAc正交，并且成像的图像由透镜34聚焦到图像传感器30上)，并且可以投射具有小的或者没有歪曲的盲点图像，而不依赖图像处理。
在第二示例性实施例中，图示了不使用光学校正单元的实例，然而本发明不限于此。例如，在将盲点图像投射到至少一部分是弯曲的屏幕24上的结构中，可以采用用于校正该曲率的光学校正单元(诸如透镜等这样的光学元件，使得图像传感器30弯曲的结构，等)。
在上述示例性实施例中，图示出了使用CCD摄像机20作为成像单元的实例，然而本发明不限于此；可以使用任意种类的成像单元。从而，例如，可以使用CMOS摄像机等来代替CCD摄像机20。
在上述示例性实施例中，图示出了将根据左侧前立柱18的盲点图像投射到左侧前立柱18上的结构，然而本发明不限于此。例如，能够是将根据右侧前立柱18的盲点图像投射到右侧前立柱18上的结构。作为另一个实例，能够是将根据左和右前立柱18的盲点图像投射到各自的左和右前立柱18上的结构。
在上述示例性实施例中，图示出了将根据前立柱18的盲点图像投射到前立柱18上的结构，然而本发明不限于此。例如，能够是将盲点图像投射到诸如中央立柱、后立柱等这样的立柱上的结构，其在回转期间产生盲点。在这种情况下，在驾驶员D回头以面朝后方的状态下，参考驾驶员D的视点EP指定各种类型的调整单元(光学校正单元28、36或40，调整结构54等)的具体结构。
在上述示例性实施例中，图示出了盲点图像投射在设置于形成盲点的部件(立柱装饰)处的屏幕24处，然而本发明不限于此。图像投射在投影表面处的结构是足够的。例如，能够是这样的结构：其中，在回转期间在车辆后部处的区域捕捉的图像或者捕捉在后部座椅处的情况的图像投射在仪表板等处。
将清晰的是：本发明可以在不背离本发明的精神的范围内以多种修改实施。
2014年1月24日提交的日本专利申请No.2014-011494通过全文引用而并入本说明书。

Claims (8)

1.一种驾驶辅助装置，包括：
成像单元；
投影单元，该投影单元将基于来自所述成像单元的图像信息的图像朝着投影表面投射；以及
调整单元，该调整单元被构成为使所述成像单元的图像传感器获取的图像信息成为适于所述投影表面的调整图像信息。
2.根据权利要求1所述的驾驶辅助装置，其中，所述调整单元包括光学校正单元，该光学校正单元使所述图像传感器通过光学校正而获取所述调整图像信息。
3.根据权利要求2所述的驾驶辅助装置，其中，所述光学校正单元包括传感器配置结构，其中，所述图像传感器被配置为相对于所述成像单元的光轴倾斜，或者所述图像传感器被配置为弯曲的。
4.根据权利要求2或3所述的驾驶辅助装置，其中，所述光学校正单元包括光学元件，该光学元件使图像非对称地相对于所述成像单元的光轴折射或者反射。
5.根据权利要求2至4的任一项所述的驾驶辅助装置，其中，所述光学校正单元设置在所述成像单元中。
6.根据权利要求1至5的任一项所述的驾驶辅助装置，其中，所述调整单元包括投影单元配置结构，该投影单元配置结构将所述投影单元配置为匹配驾驶员的视点。
7.根据权利要求1至6的任一项所述的驾驶辅助装置，其中，
在俯视图中，所述成像单元被配置在从驾驶员的视点朝着形成所述投影表面的车辆部件的视线的延长线上，并且
所述成像单元将构成由所述车辆部件引起的盲点的车辆外部区域成像。
8.根据权利要求1至7的任一项所述的驾驶辅助装置，其中，
在俯视图中，所述成像单元的成像方向与从驾驶员的视点朝着形成所述投影表面的车辆部件的视线的方向匹配，并且
所述成像单元将构成由所述车辆部件引起的盲点的车辆外部区域成像。
CN201480073878.6A 2014-01-24 2014-12-26 驾驶辅助装置 Active CN105981376B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014-011494 2014-01-24
JP2014011494A JP6032219B2 (ja) 2014-01-24 2014-01-24 運転支援装置
PCT/JP2014/084545 WO2015111362A1 (ja) 2014-01-24 2014-12-26 運転支援装置

Publications (2)

Publication Number Publication Date
CN105981376A true CN105981376A (zh) 2016-09-28
CN105981376B CN105981376B (zh) 2019-03-29

Family

ID=53681178

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480073878.6A Active CN105981376B (zh) 2014-01-24 2014-12-26 驾驶辅助装置

Country Status (5)

Country Link
US (1) US10322673B2 (zh)
EP (1) EP3099064B1 (zh)
JP (1) JP6032219B2 (zh)
CN (1) CN105981376B (zh)
WO (1) WO2015111362A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108621940A (zh) * 2017-03-15 2018-10-09 株式会社斯巴鲁 车辆的显示系统及车辆的显示系统的控制方法
CN110720112A (zh) * 2017-09-22 2020-01-21 康蒂-特米克微电子有限公司 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法
CN111345036A (zh) * 2017-10-26 2020-06-26 京瓷株式会社 图像处理装置、成像装置、驾驶辅助装置、移动体和图像处理方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10486599B2 (en) * 2015-07-17 2019-11-26 Magna Mirrors Of America, Inc. Rearview vision system for vehicle
CN112937222B (zh) 2019-12-10 2024-04-26 住友橡胶工业株式会社 轮胎

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1353810A (zh) * 1999-08-28 2002-06-12 罗伯特·博施有限公司 具有用于汽车大灯或距离传感器的调节器的调节装置
US20080123191A1 (en) * 2006-11-27 2008-05-29 Sony Corporation Zoom lens and imaging apparatus
US20080151054A1 (en) * 2006-12-20 2008-06-26 Aisin Aw Co., Ltd. Driving support method and driving support apparatus
JP2010266528A (ja) * 2009-05-12 2010-11-25 Honda Motor Co Ltd 車両用撮像装置および車両周辺監視装置
CN102481879A (zh) * 2009-07-08 2012-05-30 罗伯特·博世有限公司 视频系统的失真校正

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1081171A (ja) * 1996-09-09 1998-03-31 Yazaki Corp 監視領域拡張部材およびこれを用いた車両周辺監視装置
JP4810953B2 (ja) 2005-10-07 2011-11-09 日産自動車株式会社 車両用死角映像表示装置
BRPI0602678B1 (pt) * 2006-07-14 2015-09-01 Petroleo Brasileiro Sa Aditivo para maximização de glp e propeno adequado a operação da unidade de craqueamento catalítico fluido em baixa severidade e processo de preparo do mesmo
US9126533B2 (en) 2007-02-23 2015-09-08 Aisin Aw Co., Ltd. Driving support method and driving support device
JP4784572B2 (ja) 2007-02-23 2011-10-05 アイシン・エィ・ダブリュ株式会社 運転支援方法及び運転支援装置
EP1974998B1 (en) 2007-03-26 2011-05-25 Aisin AW Co., Ltd. Driving support method and driving support apparatus
JP4412365B2 (ja) 2007-03-26 2010-02-10 アイシン・エィ・ダブリュ株式会社 運転支援方法及び運転支援装置
EP2003019B1 (en) 2007-06-13 2014-04-23 Aisin AW Co., Ltd. Driving assist apparatus for vehicle
JP4496503B2 (ja) 2007-06-13 2010-07-07 アイシン・エィ・ダブリュ株式会社 車両用運転支援装置
JP2009021761A (ja) * 2007-07-11 2009-01-29 Fujifilm Corp 撮像素子ユニット，撮像装置，撮像素子位置決め治具，撮像素子取付方法及び撮像素子
JP4412380B2 (ja) 2007-10-02 2010-02-10 アイシン・エィ・ダブリュ株式会社 運転支援装置、運転支援方法及びコンピュータプログラム
JP2010058742A (ja) * 2008-09-05 2010-03-18 Mazda Motor Corp 車両用運転支援装置
KR101571333B1 (ko) * 2009-01-22 2015-11-24 삼성전자주식회사 디지털 영상 처리 장치
US20120188391A1 (en) * 2011-01-25 2012-07-26 Scott Smith Array camera having lenses with independent fields of view
JP6209308B2 (ja) 2011-04-26 2017-10-04 ソニー株式会社 撮像装置および電子機器
JP6176114B2 (ja) * 2011-09-15 2017-08-09 日本電気株式会社 投影像自動補正システム、投影像自動補正方法およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1353810A (zh) * 1999-08-28 2002-06-12 罗伯特·博施有限公司 具有用于汽车大灯或距离传感器的调节器的调节装置
US20080123191A1 (en) * 2006-11-27 2008-05-29 Sony Corporation Zoom lens and imaging apparatus
US20080151054A1 (en) * 2006-12-20 2008-06-26 Aisin Aw Co., Ltd. Driving support method and driving support apparatus
JP2010266528A (ja) * 2009-05-12 2010-11-25 Honda Motor Co Ltd 車両用撮像装置および車両周辺監視装置
CN102481879A (zh) * 2009-07-08 2012-05-30 罗伯特·博世有限公司 视频系统的失真校正

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108621940A (zh) * 2017-03-15 2018-10-09 株式会社斯巴鲁 车辆的显示系统及车辆的显示系统的控制方法
CN110720112A (zh) * 2017-09-22 2020-01-21 康蒂-特米克微电子有限公司 基于机动车辆显示装置的形状调整匹配图像处理的装置和方法
CN111345036A (zh) * 2017-10-26 2020-06-26 京瓷株式会社 图像处理装置、成像装置、驾驶辅助装置、移动体和图像处理方法

Also Published As

Publication number Publication date
EP3099064A1 (en) 2016-11-30
EP3099064B1 (en) 2018-04-18
US10322673B2 (en) 2019-06-18
JP6032219B2 (ja) 2016-11-24
WO2015111362A1 (ja) 2015-07-30
CN105981376B (zh) 2019-03-29
JP2015139194A (ja) 2015-07-30
US20160339841A1 (en) 2016-11-24
EP3099064A4 (en) 2017-01-04

Similar Documents

Publication Publication Date Title
US10953799B2 (en) Display system, electronic mirror system and movable-body apparatus equipped with the same
CN105981376A (zh) 驾驶辅助装置
JPWO2019097918A1 (ja) ヘッドアップディスプレイ装置およびその表示制御方法
CN106461195B (zh) 平视显示装置及其照明单元
KR20060122714A (ko) 촬상 모듈
JP4414661B2 (ja) ステレオアダプタ及びそれを用いた距離画像入力装置
CN108139584A (zh) 信息显示装置
CN106536254A (zh) 车辆用平视显示装置
JP6706802B2 (ja) 表示システム、電子ミラーシステム及びそれを備える移動体
CN107924053A (zh) 立体视频内窥镜的光学系统
JP7221161B2 (ja) ヘッドアップディスプレイ及びそのキャリブレーション方法
CN107531180B (zh) 用于汽车的监测装置
CN107464263A (zh) 汽车标定系统及其标定方法
JP2020150427A (ja) 撮像装置、撮像光学系及び移動体
JP2006209041A (ja) パノラマレンズ
JP2009204697A (ja) 複数方向撮像装置及びそれを備えた車両
TWM568376U (zh) 多攝像頭系統及多攝像頭模組
CN108931851A (zh) 抬头显示系统及汽车
CN105445936B (zh) 光学成像装置
JP2024535471A (ja) 車載カメラシステム
JP2018202950A (ja) 表示システム、電子ミラーシステム及び移動体
KR100190939B1 (ko) 차량용 카메라
JP7207889B2 (ja) 測距装置および車載カメラシステム
US20180143351A1 (en) Anti-Glare Head-Up Display System
US9575220B2 (en) Device for a motor vehicle including an optical area sensor having an optical semiaxis and an optical system having an aperture angle and use of the device in a vehicle

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant