CN111615639A - 借助于具有全息镜的3d传感器确定机动车辆内信息的设备和方法 - Google Patents

借助于具有全息镜的3d传感器确定机动车辆内信息的设备和方法 Download PDF

Info

Publication number
CN111615639A
CN111615639A CN201880087660.4A CN201880087660A CN111615639A CN 111615639 A CN111615639 A CN 111615639A CN 201880087660 A CN201880087660 A CN 201880087660A CN 111615639 A CN111615639 A CN 111615639A
Authority
CN
China
Prior art keywords
light
hologram
light beam
interior space
partial region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880087660.4A
Other languages
English (en)
Inventor
S·霍克
S·哈尔特曼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of CN111615639A publication Critical patent/CN111615639A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q3/00Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors
    • B60Q3/60Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors characterised by optical aspects
    • B60Q3/68Arrangement of lighting devices for vehicle interiors; Lighting devices specially adapted for vehicle interiors characterised by optical aspects using ultraviolet light
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/015Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting the presence or position of passengers, passenger seats or child seats, and the related safety parameters therefor, e.g. speed or timing of airbag inflation in relation to occupant position or seat belt use
    • B60R21/01512Passenger detection systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • G01S17/8943D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/481Constructional features, e.g. arrangements of optical elements
    • G01S7/4811Constructional features, e.g. arrangements of optical elements common to transmitter and receiver
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143Sensing or illuminating at different wavelengths
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Health & Medical Sciences (AREA)
  • Electromagnetism (AREA)
  • Vascular Medicine (AREA)
  • Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Geophysics And Detection Of Objects (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明涉及一种用于确定机动车辆的内部空间的至少一个部分区域中的信息的设备,其中所述机动车辆具有用于照明所述内部空间的光源,并且该照明借助于由所述光源发射的光束来进行,其中所述光束遵循从所述光源到所述内部空间的待照明部分区域的发射路径,其特征在于,所述机动车辆具有用于信息检测的传感器,并且所述信息检测借助于包含与所述内部空间的所述部分区域有关的数据的光来进行,其中所述光束遵循从所述内部空间的被照明的部分区域到所述传感器的接收路径,并且其中存在用于对所述光束进行衍射的全息图并且所述全息图被定位成,使得所述全息图能够实现所述光束既沿着所述发射路径又沿着所述接收路径的衍射。此外还设置了用于确定所述信息的方法。

Description

借助于具有全息镜的3D传感器确定机动车辆内信息的设备和 方法
技术领域
本发明涉及一种用于确定机动车辆的内部空间的至少一个部分区域中的信息的设备,其中所述机动车辆具有用于照明所述内部空间的光源,并且该照明借助于由所述光源发射的光束来进行,其中所述光束遵循从所述光源到所述内部空间的待照明部分区域的发射路径,其特征在于,所述机动车辆具有用于信息检测的传感器,并且所述信息检测借助于包含与所述内部空间的所述部分区域有关的数据的光束来进行,其中所述光束遵循从所述内部空间的被照明的部分区域到所述传感器的接收路径,并且其中存在用于对所述光束进行衍射的全息图并且所述全息图被定位成,使得所述全息图能够实现所述光束既沿着所述发射路径又沿着所述接收路径的衍射。此外还设置了用于确定所述信息的方法。
背景技术
机动车辆越来越多地配备有辅助系统、安全系统或甚至自主驾驶系统。在这种部分或高度自动驾驶的背景下,车辆内部空间观察变得越来越重要。理想情况下,在此应当检测所有乘员的3D数据。这些数据的检测尤其是与被动安全性(Passive Safety)有关。例如,安全气囊的展开方式应当与要保护的乘员适配。仅当有人实际上坐在相应的座位上时,才能激活安全带提醒装置(Seat Belt Reminder)。安全带的该功能应当与极端身体姿势(脚在仪表盘上,膝盖夹到前排座椅的靠背,躺下……)适配。此外,如果识别出并且已知相应的乘员,则舒适度和信息娱乐功能可以自动地与这些乘员适配。此外,在新的HMI概念的范围内越来越多地使用手势控制,对于所述手势控制,检测高分辨率的3D数据是有利的。检测这样的数据的一种可能性是使用ToF摄像机(飞行时间(Time-of-Flight)摄像机),所述摄像机利用近红外范围内的光,例如波长为850nm或940nm的光工作。
汽车制造商拒绝在车顶内衬中间安装带有鱼眼透镜的光学传感器,因为这样的概念不适用于具有全景车顶的车辆或敞篷车。相反,安装在后视镜位置处的光学传感器由于几何原因无法检测整个后排座椅,更不用说可能的其他成排座椅了,因为前排座椅遮挡了很大的空间区域。然而,例如识别后排座椅上的、必要时在朝后取向的儿童座椅中的儿童是重要的和难以解决的应用情况。
从光学器件中已知全息元件。与常规的光学器件不同,对于被实现为体积全息图的全息光学元件来说,光束偏转不是通过折射预给定,而是通过在体积光栅处的衍射来预给定。所述全息光学元件能够以透射和反射方式制造,并且通过自由选择入射角和出射角或衍射角,所述全息光学元件可以实现新的构造形式。在此,全息衍射光栅被曝光到薄膜中(全息材料6μm-200μm+载体衬底>60μm),在那里形成布拉格光栅,并且理论上达到100%的效率。通过体积衍射,附加地还可以为所述全息光学元件分配特征性的波长和角度选择性或滤光器功能。依据记录条件(波长,角度),仅来自限定方向并具有限定波长的光在该结构处被衍射。
发明内容
有利地,根据本发明的设备使得传感器的记录范围能够扩展到内部空间的多个附加的部分区域。
根据本发明,通过在独立专利权利要求中说明的特征使这成为可能。本发明的其他构型是从属权利要求的主题。
根据本发明的用于确定机动车辆的内部空间的至少一个部分区域中的信息的设备,其中所述机动车辆具有用于照明所述内部空间的光源并且所述照明借助于由所述光源发射的光束来进行,其中所述光束遵循从所述光源到所述内部空间的待照明部分区域的发射路径,其特征在于,所述机动车辆具有用于信息检测的传感器,并且所述信息检测借助于包含与所述内部空间的所述部分区域有关的数据的光束来进行,其中所述光束遵循从所述内部空间的被照明的部分区域到所述传感器的接收路径,并且其中存在用于对所述光束进行衍射的全息图并且所述全息图被定位成,使得所述全息图能够实现所述光束既沿着所述发射路径又沿着所述接收路径的衍射。
这被理解为检测来自所述内部空间的部分区域的数据。在此情况下,这例如可以是关于所述内部空间的一般信息(例如,座位占用)或是对乘员的确定(例如,识别)和/或是对所述乘员的身体姿势、手势、头部取向、面部表情等的观察(监视)。在此,所确定的数据也可以是三维数据。为了确定这些数据例如使用3D摄像机,例如飞行时间摄像机。此外,作为全息图可以使用任何类型的全息光学元件,尤其是反射全息图。全息图也被理解为多个全息图的整个系统(例如多个全息图的层复合体)和/或集成到车辆部件中(例如将全息图涂敷到车顶内衬中的玻璃板上)。此外,对所述全息图的定位与所述摄像机和照明设备的位置协调地进行。同样考虑要观察的部分区域、波和角度选择性以及计划的光波长。定位被理解为既指局部位置又指以特定角度进行的可能安装。考虑到所述内部空间的已知几何关系和元件的位置,可以例如借助于计算机单元从光波中确定期望的信息,例如与乘员在部分区域中的位置有关。除了术语“发射路径”和“接收路径”之外,经常还谈及“发射方向”或“发射通道”,类似的还有接收方向或接收通道。在此,所述发射路径从所述光源延伸到要确定的对象,并且所述接收路径从要确定的对象延伸到所述传感器。发出的光束既可以是用于纯照明所述内部空间的光束,也可以是用于记录所述内部空间的光束。当然,以正确的物理方式,代替光束地也只会谈及术语“光”,为了支持该想法的图像表示使用术语“光束”。
由此,可以有利地创建用于观察所述内部空间的特殊的部分区域的系统。尤其是,由此使得能够利用简单的手段来观察内部空间,所述内部空间由于所述摄像机的位置而不能直接被检测到。此外,灵活使用该系统是可能的,因为所述全息图可以适配于具有不同几何尺寸的车辆。通过所述全息图在两个方向上的作用,所述全息图既可以用于照明沿所述发射路径的部分区域,也可以用于沿所述接收路径返回引导所述光束。该系统使得可以降低成本,因为仅使用一个(或少量的)传感器即可检测所有部分区域或乘员。此外,在要分析的部分区域中不需要额外的光源。通过部件数量减少还得出安装空间减小。由于通过所述系统不仅可以识别前排的乘客,得出了后排座椅上乘员的舒适度的提高——例如通过自动适配信息娱乐和舒适功能。此外,所提出的解决方案的特征在于低的成本结构——除了部件数量减少之外,所使用的全息图也相对便宜。此外,所述全息图的角度和波选择性减少了通过环境光引起的干扰光,从而所确定的数据具有高质量。
在有利的实施方式中,所述设备的特征在于,用于信息检测的所述传感器包括3D摄像机。
这被理解为确定关于所述部分区域的三维数据。为此使用所谓的3D摄像机。例如可以使用飞行时间摄像机。所述飞行时间摄像机具有带特殊像素的特殊成像器,并确定光束在发射和返回之间所需的时间,从中可以确定距离。通过完全地以三维方式检测所有部分区域和乘员,可以进一步提高安全性,例如通过在被动安全性方面的特殊适配。
在一种可能的构型中,所述设备的特征在于,所述全息图定位在车辆顶蓬处。
如已经提到的,术语“定位”应该在广义上理解,例如全息图如何被引入、涂敷、安装、集成等。有利地,通过这种定位——例如借助于安装在后视镜位置处的摄像机,可以在几何上完全检测后排座椅。不会通过前排座椅遮挡光路。有利地,所述全息图即使在具有全景车顶的车辆中也可以定位在所述全景车顶处,因为所述全景车顶对可见光保持透明。
在优选的实施方式中,所述设备的特征在于,由所述光源发射的光束在光学元件处向着所述全息图的方向偏转。
光学元件应被理解为具有特殊形状或特殊材料组合的物镜或其他光学器件,并因此能够实现限定的入射角和出射角。所述光学元件被定位和/或安装到照明设备和/或传感器处或紧邻所述照明设备和/或所述传感器的地方。所述光学元件同样在多个方向上起作用,也就是说,它们使得光波能够沿着所述发射路径和所述接收路径进行传导和偏转。在此情况下,在发射方向上将所述光束向所述全息图的方向偏转。此外,在接收方向上将所述光束基本上向所述传感器的方向偏转。替代地,也可以借助于光学元件向远离发送方的空间上已知的接收方的方向进行偏转。由此可以有利地改善所述系统的功能。由此也得到关于所述传感器和所述光源的定位和取向的扩大的设计余地以及安装空间优点。
在替代的扩展方案中,所述设备的特征在于存在多个全息图,并且尤其是,不同的全息图对不同的光波长进行衍射。
这被理解为可以借助于不同的全息图来照明或观察所述内部空间的不同部分区域。例如,为此可以利用多色光来进行照明。在每个全息图处仅衍射特殊光波长或特殊光波长范围的光波。对应于相应衍射全息图的角度选择性,特殊光波长范围的相应光束以相应的出射角被转发到所述内部空间的特定部分区域中。有利地,通过使用多个全息图可以检测例如在公共汽车中的其他成排座椅,例如第三或其他成排座椅。所述全息图的定位可以例如在车辆中的相同位置处进行。当然,有利地也可以设想将至少一个或多个全息图定位在第二位置和/或其他位置处。
在有利的构型中,所述设备的特征在于,所述全息图被构造为多重全息图或层堆叠-个体全息图,或者被构造为多重全息图和层堆叠-个体全息图的组合。
这被理解为存在多个全息图用于对所述光束进行衍射。在此,每个全息图都有它自己的特征。这些全息图可以在空间上位于同一位置处。该实施方式例如作为个体全息图的层堆叠进行。具有不同特征(例如波选择性)的多个全息图的使用尤其适合于与发射不同光波长或不同光波长范围的光源的多色光的使用相结合。因此,可以有利地将个体全息图的效率与所述系统适配。在多重全息图的情况下,效率随着全息图的数量增加而降低。在层堆叠的情况下,所述层堆叠处的散射效果会出现问题,或者存在不切实际的层堆叠。此外,可以有利地在所述传感器前面使用滤色器。
在一种可能的实施方式中,所述设备的特征在于,为了照明而发射的光束具有不同的光波长。
这被理解为使用具有不同光波长的光束。通过全息图的相应特征,于是导致在所述全息图处以特定的角度衍射特定的光波长。例如,多个全息图可以定位在同一位置处作为堆叠全息图。在此情况下,入射光束(发射路径)具有相同的入射角。限定的光波长在相关联的全息图处被衍射,并以特定的出射角输出。在此,不同的光波具有不同的出射角。被反射的光束(接收路径)的衍射或偏转以类似的方式进行。可以通过使用滤色器以及与滤色器组合来分离传感器处的信息。有利地,通过所述全息图的高度的角度和波选择性可以进行在所述内部空间的不同区域中的信息确定。由此,例如可以观察所述内部空间的不同部分区域。
在优选的扩展方案中,所述设备的特征在于,所述光束被构造为多色光,尤其是使用频谱宽的光源来产生所述多色光,或者使用具有多个限定的光波长的光源来产生所述多色光,或者使用频谱窄带地发射的光源来产生所述多色光,所述光源的光波长可以被调谐。
有利地,通过将多色光与具有不同光波长和角度选择性的多个全息图结合,可以使用仅一个光源和仅一个摄像机来记录和观察所述内部空间的不同部分区域。
在替代的实施方式中,所述设备的特征在于存在多个光源,并且尤其是,存在多个发射具有不同光波长的光的光源。
有利地,通过使用多个例如具有不同光波长的光源,可以单独照明所述内部空间的要记录的每个部分区域。由此可以实现在安装空间和安装体积方面的优点。
在一种可能的扩展方案中,所述设备的特征在于存在滤色器,尤其是存在用于选择限定的光波长的可开关的滤色器。
这被理解为存在并且使用滤色器,以便在传感器前面从具有不同光波长的光束中选择性地提取信息。滤色器尤其是被定位和/或安装在所述传感器处或紧邻所述传感器的地方。例如,也可以存在并且使用多个滤色器。此外,有利地将滤色器分配给所述传感器的限定的像素。替代地,还可以在对所述传感器中接收到的光束进行同步评估的情况下顺序地操控所述光源。
在优选的实施方式中,所述设备的特征在于,存在多个传感器,并且尤其是,存在多个用于检测不同光波长的传感器。
这被理解为存在并且使用一个或多个其他传感器——至少其他成像器,以观察所述内部空间的不同部分区域。这些附加传感器被定位为与原始传感器(成像器)略有位移地布置。此外,有利地,不仅可以使用一个或多个其他传感器,而且也可以为每个摄像机使用相对应的光源。
此外,根据本发明规定了一种用于确定机动车辆的内部空间的至少一个部分区域中的信息的方法,其中所述机动车辆具有用于照明内部空间的光源并且所述光源发射沿着发射路径照明所述内部空间的部分区域的光,在该部分区域中应当确定所述信息。根据本发明,该方法的特征在于所述机动车辆具有用于信息检测的传感器,并且所述传感器接收沿着接收路径传输与所述内部空间的所述部分区域有关的数据的光,并且其中光在全息图处衍射以确定所述部分区域的信息,其中所述全息图被设计为使得所述光既沿着所述发射路径又沿着所述接收路径在所述全息图处衍射。
关于所述方法的进一步解释和优点,参考前面的说明。
在有利的实施方式中,所述方法的特征在于,借助于3D摄像机确定所述内部空间的所述部分区域的三维数据,其中所述3D摄像机在发射方向上以及在接收方向上的光路都在所述全息图处偏转,其中所述全息图尤其是定位在车辆顶蓬处。
这被理解为使用至少一个(或多个)3D摄像机来例如观察所述内部空间的所述部分区域或识别人或人的身体姿势或手势。例如,为此使用飞行时间摄像机。所述全息图定位在车辆顶蓬处,例如,在车柱A-B之间和/或B-C之间和/或C-D之间和/或A-C之间。当然,也可以设想将所述全息图安装到不同区域和/或还跨多个区域地安装。
在可能的构型中,所述方法的特征在于,借助于在所述全息图处衍射的光确定来自所述内部空间的一个部分区域的信息,并且附加地,借助于采取直接路径的光确定来自所述内部空间的另外的部分区域的信息。
这被理解为,借助于全息图来观察部分区域,这些部分区域只能借助于光束的衍射来观察,但不能借助于直接的光束来观察。因此所述方法使得能够借助于在全息图处衍射的光束来确定来自所述内部空间的部分区域的信息,其中不能借助于直接的光束来检测所述部分区域。但是,此外还直接观察其他部分区域。由此,可以有利地显著扩大传感器的记录区域,并且可以节省其他部件。
在优选的实施方式中,所述方法的特征在于,确定来自内部空间的不同部分区域的信息,其中使用多个全息图并且不同的全息图衍射不同波长的光,并且通过具有分别限定的光波长的光为每个部分区域进行信息确定。
这被理解为每个全息图都会衍射特定波长(实际上是小波长范围)的光(波长选择性)。此外,通过所述全息图以特征性的方式衍射所述特定波长的光(角度选择性)。也就是说,例如全息图将特殊波长的光以10°的入射角偏转到30°的出射角。另外的光波长不被衍射或没有被衍射到该出射方向。相反,第二全息图将不同波长的光以10°的入射角衍射到40°的出射角。但是,再次地,所述第二全息图不衍射第一光波长。该特征当然是限定的和已知的。该特征可以通过材料参数(全息层的厚度和折射率调制)与相应的系统/要求相适配。与已知的全息图定位组合,可以非常精确地确定可以使用哪些波长的光来观察所述内部空间的哪个部分区域。
附图说明
应当指出,说明书中单独列出的特征可以以任何技术上有意义的方式相互组合,并且示出了本发明的其他构型。本发明的其他特征和适宜性由基于附图对实施例的描述得到。
在附图中:
图1示出了借助于全息图的信息确定的示意图;和
图2示出了单色光束在全息图处的衍射行为;和
图3示出了多色光束在全息复合体处的衍射行为;和
图4示出了具有由HOE偏转的光束的ToF摄像机的接收路径;和
图5示出了具有多个光束和示例性的光学元件以及滤色器的ToF摄像机的接收路径,所述多个光束分别由HOE复合体适当地偏转;和
图6示出了所述方法的示例性表达的方法步骤。
具体实施方式
图1示出了借助于全息图的信息确定的示意图。在此示出了机动车辆1,在该机动车辆的内部空间3中存在乘员2。在内部空间3的前部部分区域5中例如存在驾驶员,并且在内部空间3的后部部分区域4中存在儿童。还存在驾驶员观察系统。该驾驶员观察系统包括传感器8,例如飞行时间(ToF)摄像机,用于对内部空间3以及乘员2进行三维检测。此外,设置照明设备9,例如在近红外范围中的光源。传感器8以及照明设备9在此大致安装在后视镜的位置处。可以从摄像机的该位置直接观察前部部分区域5中的驾驶员。但是,为了观察在后部部分区域4中的儿童,必须对光路进行偏转。这借助于全息图7完成,该全息图定位在所述机动车辆的车顶内衬6处。光束10对应于其波长和其入射角地在全息图7处衍射并转发。借助于在车辆顶蓬处的这种偏转,也可以由所述摄像机检测在其他情况下被遮挡的空间区域。所述偏转既在用于照明后部部分区域4的光束10的发射路径的方向上又在被引导回所述传感器的光束的接收路径的方向上进行。由于从照明设备9到全息图7(和返回)的路径是已知的,全息图7处的入射角和出射角的关系也是已知的,因此当在全息图7处偏转时深度信息以及方向和位置信息保持不变。
图2示出了单色光束在全息图处的示例性衍射行为。在此以80°-60°偏转器为例示出全息图7的作用方式。在此,从80°出发(相对于所述全息图的法线测量)入射的光束11在全息图7处被衍射到60°(相对于所述全息图的法线测量)的角度。在此,衍射角通过全息光栅预给定,并且可以与相应的车辆几何形状适配。因此,衍射光束12的出射角14取决于入射光束11的入射角13,并且当然一般来说还取决于光束10的波长。由于特征性的波长和角度选择性,全息图7的膜对于选择性曲线之外的所有其他方向和波长都是透明的。
图3还示出了多色光束在全息复合体处的衍射行为。在此,通过用于多个波长的多个全息图成扇形散开多个衍射角(例如用于检测不同的坐姿)。在此,每个波长范围对应于一个衍射角范围。在此,所述系统的分辨率尤其是通过所述全息图的数量限定。在所示的示例中发现入射光束11a,11b,11c,11d,这些入射光束分别具有不同的光波长。这些入射光束全都具有相同的入射角13。这些光束落到由四个全息图7a,7b,7c,7d组成的全息图复合体上。限定的光波长的光束在(并且仅在)相应的全息图处衍射,并以出射角14作为衍射光束12转发。因此,例如光束11a在全息图7a处衍射并且作为光束12a以角度14a转发。以类似的方式,这也适用于其他光束和全息图。
不同的个体全息图可以要么作为所谓的多重全息图存储(即转换)到一层中,作为由个体全息图组成的层堆叠来存储,要么根据这两者的组合来存储(与相应的系统配置相适配)。通过精心选择材料参数,可以适配个体全息图的选择性,使得个体全息图仅衍射相关波长的光。所述全息图或所述层堆叠也可以同时用于返回通道。光束路径是可逆的,并且所述全息图对反射的光束成束并定向地向光源或传感器的方向发送。
图4示出了具有光束的ToF摄像机的经由全息图和光学元件的接收路径。在此示出了两个光束10a和10b的示例性接收路径,这两个光束分别以角度14a和14b入射到全息图7上。这些光束在全息图7处被相应地衍射并分别以角度13a和13b向传感器8的方向转发。在进一步的过程中,必须适当地偏转由传感器8捕获的光,由此传感器8的ToF成像器16的像素17的部分可以用于该路径。这通过物镜15完成。光束10a和10b分别在该物镜15处折射并向传感器8的方向偏转。像素17必须被单独地校准,或在后处理(Postprocessing)的范围内相应地返回计算由像素17检测的信息,以考虑通过全息图7的偏转。如果传感器的检查区域(Field of View,视场,FoV)足够大,则可以省去额外的光学元件。在TOF摄像机的情况下,有利地将发射和接收的光彼此协调。否则无法确定光运行时间等,并且因此也无法确定相关联的距离(深度信息)。
图5示出了具有多个光束的ToF摄像机的沿着全息图和光学元件以及滤色器的接收路径。该实施方式包括使用多色光。在此,既可以使用频谱上宽的光源工作,又可以使用多个限定的波长或虽然以频谱窄带发射但可以调谐其波长的光源工作。对于每个要使用的波长都需要全息图。相应地,在所示的实施方式中多个全息图7a,7b,7c,7d叠加。在此,可以通过用于多个波长的多个全息图监视多个衍射角(例如,用于检测不同的坐姿)。在此,每个波长对应于一个衍射角。所述系统的分辨率在此尤其是通过所述全息图的数量限定。此外,对于技术描述还参考对图3的说明。在探测器侧,可以借助于滤色器18实现波长分离。滤色器18有利地被实现为衍射元件。在此,可以向不同的像素分别分配滤色器。在此,叠加的光束在频谱上成扇形散开,并且向每个像素或像素区域“配给”限定的波长。
图6示出了所述方法的示例性表达的方法步骤。在此,该方法例如在车辆起动时或在辅助功能或监视功能被激活时开始。在第一方法步骤S1中,例如操控多色光源,使得从光源发射多色光。该光在光源和全息图之间的物镜处向全息图的方向偏转。在第二步骤S2中,在所述全息图处与所述全息图的角度和波选择性相对应地来衍射所述光。特定波长的相对应光束以特定角度转发到所述内部空间的限定部分区域中以进行照明。在步骤S3中,进行所述部分区域或乘员及其位置、身体姿势、手势、面部表情等的信息记录。所述光束在物体处反射并向所述全息图的方向返回引导。在步骤S4中,又在所述全息图处与所述全息图的角度和波选择性相对应地进行衍射。返回引导的光束在所述物镜处重新偏转,这次是向图像传感器的方向偏转。所述图像传感器可以例如是具有相应成像器的飞行时间摄像机。在下一步骤S5中,借助于所述图像传感器进行所述光的数据记录。然后该方法以步骤S1继续执行。此外,在步骤S5之后,在步骤S6中例如借助于控制设备来分析数据材料。从所述数据材料中可以推导出相应的信息,所述信息例如用作其他方法步骤的输入。例如,在步骤S7中可以使被动安全系统(例如安全气囊或安全带系统)与乘员的身体姿势相适配。在此,甚至可以考虑关闭被动安全系统,如果这提高乘员的安全性的话。当然,还可以对舒适度和信息娱乐功能进行自动控制和适配。

Claims (15)

1.用于确定机动车辆(1)的内部空间(3)的至少一个部分区域(4)中的信息的设备,其中所述机动车辆(1)具有用于照明所述内部空间(3)的光源(9)并且所述照明借助于由所述光源(9)发射的光束(10)来进行,其中所述光束(10)遵循从所述光源(9)到所述内部空间(3)的待照明部分区域(4)的发射路径,其特征在于,
所述机动车辆(1)具有用于信息检测的传感器(8),并且所述信息检测借助于包含与所述内部空间(3)的所述部分区域(4)有关的数据的光束(10)来进行,其中所述光束(10)遵循从所述内部空间(3)的被照明的部分区域(4)到所述传感器(8)的接收路径,并且其中存在用于对所述光束(10)进行衍射的全息图(7)并且所述全息图(7)被定位成,使得所述全息图(7)能够实现所述光束(10)既沿着所述发射路径又沿着所述接收路径的衍射。
2.根据权利要求1所述的设备,其特征在于,用于信息检测的所述传感器(8)包括3D摄像机。
3.根据前述权利要求中任一项所述的设备,其特征在于,所述全息图(7)定位在车辆顶蓬(6)处。
4.根据前述权利要求中任一项所述的设备,其特征在于,由所述光源(9)发射的光束(10)在光学元件(15)处向着所述全息图(7)的方向偏转。
5.根据前述权利要求中任一项所述的设备,其特征在于,存在多个全息图(7),并且尤其是不同的全息图(7)对不同的光波长进行衍射。
6.根据权利要求5所述的设备,其特征在于,所述全息图(7)被构造为多重全息图或层堆叠-个体全息图,或者被构造为多重全息图和层堆叠-个体全息图的组合。
7.根据前述权利要求中任一项所述的设备,其特征在于,为了照明而发射的光束(10)具有不同的光波长。
8.根据前述权利要求中任一项所述的设备,其特征在于,所述光束(10)被构造为多色光,其中尤其是使用以下类型的光源(9)中的至少一种:
-频谱宽的光源(9)来产生所述多色光,
-具有多个限定的光波长的光源(9)来产生所述多色光,
-频谱窄带地发射的光源(9)来产生所述多色光,所述光源(9)的光波长能够被调谐。
9.根据前述权利要求中任一项所述的设备,其特征在于,存在多个光源(9),并且尤其是存在多个光源(9),其中所述多个光源发射具有不同光波长的光束(10)。
10.根据前述权利要求中任一项所述的设备,其特征在于,存在滤色器(18),尤其是存在用于选择限定的光波长的可开关的滤色器(18)。
11.根据前述权利要求中任一项所述的设备,其特征在于,存在多个传感器(8),并且尤其是存在多个用于检测不同光波长的传感器(8)。
12.用于确定机动车辆(1)的内部空间(3)的至少一个部分区域(4)中的信息的方法,其中所述机动车辆(1)具有用于照明所述内部空间(3)的光源(9)并且所述光源(9)发射沿着发射路径照明所述内部空间(3)的部分区域(4)的光束(10),在该部分区域中应当确定所述信息,其特征在于,所述机动车辆(1)具有用于信息检测的传感器(8),并且所述传感器(8)接收沿着接收路径传输与所述内部空间(3)的所述部分区域(4)有关的数据的光束(10),
并且其中光束(10)在全息图(7)处衍射以确定所述部分区域(4)的信息,其中所述全息图(7)被定位成使得所述光束(10)既沿着所述发射路径又沿着所述接收路径在所述全息图(7)处衍射。
13.根据权利要求12所述的方法,其特征在于,借助于3D摄像机确定所述内部空间(3)的所述部分区域(4)的三维数据,其中所述3D摄像机在发射方向上以及在接收方向上的光路都在所述全息图(7)处偏转,其中所述全息图(7)尤其是定位在车辆顶蓬(6)处。
14.根据权利要求12至13中任一项所述的方法,其特征在于,借助于在所述全息图(7)处衍射的光束(10)确定来自所述内部空间的所述部分区域(4)的信息,并且附加地,借助于直接的光束(10)确定来自所述内部空间(3)的另外的部分区域(5)的信息。
15.根据权利要求12至14中任一项所述的方法,其特征在于,确定来自所述内部空间(3)的不同部分区域(4)的信息,其中使用多个全息图(7)并且不同的全息图(7)衍射不同的光波长,并且通过具有分别限定的光波长的光束(10)为每个部分区域(4)进行信息确定。
CN201880087660.4A 2018-01-26 2018-11-26 借助于具有全息镜的3d传感器确定机动车辆内信息的设备和方法 Pending CN111615639A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102018201201.6A DE102018201201A1 (de) 2018-01-26 2018-01-26 Vorrichtung und Verfahren zur Ermittlung von Informationen mittels Hologramm in einem Kraftfahrzeug
DE102018201201.6 2018-01-26
PCT/EP2018/082515 WO2019145069A1 (de) 2018-01-26 2018-11-26 Vorrichtung und verfahren zur ermittlung von informationen in einem kraftfahrzeug mittel eines 3d sensors mit holographischem spiegel

Publications (1)

Publication Number Publication Date
CN111615639A true CN111615639A (zh) 2020-09-01

Family

ID=64556882

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880087660.4A Pending CN111615639A (zh) 2018-01-26 2018-11-26 借助于具有全息镜的3d传感器确定机动车辆内信息的设备和方法

Country Status (4)

Country Link
EP (1) EP3743737B1 (zh)
CN (1) CN111615639A (zh)
DE (1) DE102018201201A1 (zh)
WO (1) WO2019145069A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020115409A1 (de) 2020-06-10 2021-12-16 HELLA GmbH & Co. KGaA Beleuchtungsvorrichtung für ein Kraftfahrzeug mit einem Panoramadach

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5710671A (en) * 1995-09-05 1998-01-20 Temic Telefunken Microelectronic Gmbh Optical system
DE19644565A1 (de) * 1996-10-26 1998-04-30 Teves Gmbh Alfred Sich bewegende Objekte, feststellende Überwachungseinrichtung, insbesondere für Kraftfahrzeuge
CN101675291A (zh) * 2007-05-01 2010-03-17 皇家飞利浦电子股份有限公司 用于产生光束和全息3d图像的汽车照明单元
US20130182239A1 (en) * 2010-09-17 2013-07-18 Iee International Electronics & Engineering S.A. Lidar Imager
CN103534632A (zh) * 2011-05-16 2014-01-22 罗伯特·博世有限公司 具有全息光学元件的hud
WO2015058892A1 (de) * 2013-10-23 2015-04-30 Robert Bosch Gmbh Entfernungsmessvorrichtung

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5710671A (en) * 1995-09-05 1998-01-20 Temic Telefunken Microelectronic Gmbh Optical system
DE19644565A1 (de) * 1996-10-26 1998-04-30 Teves Gmbh Alfred Sich bewegende Objekte, feststellende Überwachungseinrichtung, insbesondere für Kraftfahrzeuge
CN101675291A (zh) * 2007-05-01 2010-03-17 皇家飞利浦电子股份有限公司 用于产生光束和全息3d图像的汽车照明单元
US20130182239A1 (en) * 2010-09-17 2013-07-18 Iee International Electronics & Engineering S.A. Lidar Imager
CN103534632A (zh) * 2011-05-16 2014-01-22 罗伯特·博世有限公司 具有全息光学元件的hud
WO2015058892A1 (de) * 2013-10-23 2015-04-30 Robert Bosch Gmbh Entfernungsmessvorrichtung

Also Published As

Publication number Publication date
WO2019145069A1 (de) 2019-08-01
DE102018201201A1 (de) 2019-08-01
EP3743737A1 (de) 2020-12-02
EP3743737B1 (de) 2023-04-05

Similar Documents

Publication Publication Date Title
US11447085B2 (en) 3D time of flight active reflecting sensing systems and methods
US7477758B2 (en) System and method for detecting objects in vehicular compartments
US7768380B2 (en) Security system control for monitoring vehicular compartments
US7511833B2 (en) System for obtaining information about vehicular components
US7401807B2 (en) Airbag deployment control based on seat parameters
US7831358B2 (en) Arrangement and method for obtaining information using phase difference of modulated illumination
US7655895B2 (en) Vehicle-mounted monitoring arrangement and method using light-regulation
US7983817B2 (en) Method and arrangement for obtaining information about vehicle occupants
US9290146B2 (en) Optical monitoring of vehicle interiors
US9102220B2 (en) Vehicular crash notification system
US20070025597A1 (en) Security system for monitoring vehicular compartments
US20080048887A1 (en) Vehicle occupant detection system
US20080065291A1 (en) Gesture-Based Control of Vehicular Components
EP3624086A1 (en) Radar sensing system for vehicle
US20070262574A1 (en) Optical Monitoring of Vehicle Interiors
US20070035114A1 (en) Device and Method for Deploying a Vehicular Occupant Protection System
EP1039314A2 (en) Electronic optical target ranging and imaging
US10809362B2 (en) Detector array for a LIDAR system
US20220309759A1 (en) Device for a color-based detection of image contents computing device, and motor vehicle including the device
US20230078512A1 (en) Overhead console accessory system with shared controls, cameras, and lighting
EP2869021B1 (en) Multiple imager vehicle optical sensor system
CN111615639A (zh) 借助于具有全息镜的3d传感器确定机动车辆内信息的设备和方法
US20080074894A1 (en) Occupant-Sensing Imaging System
CN113767396A (zh) 具有用于布置在仪器上的面状载体介质的对象识别系统
US9569677B2 (en) Device and method for directing radiation in the direction of an optical element of an image sensing device of a vehicle

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination