CN111016912B - 用于检测驾驶员的面部的系统及其相关方法 - Google Patents

用于检测驾驶员的面部的系统及其相关方法 Download PDF

Info

Publication number
CN111016912B
CN111016912B CN201910923594.6A CN201910923594A CN111016912B CN 111016912 B CN111016912 B CN 111016912B CN 201910923594 A CN201910923594 A CN 201910923594A CN 111016912 B CN111016912 B CN 111016912B
Authority
CN
China
Prior art keywords
driver
gaze
camera
reflective surface
glass
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910923594.6A
Other languages
English (en)
Other versions
CN111016912A (zh
Inventor
A·鲍隆
L·博赫丹
R·穆哈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aptiv Technologies Ltd
Original Assignee
Aptiv Technologies Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aptiv Technologies Ltd filed Critical Aptiv Technologies Ltd
Publication of CN111016912A publication Critical patent/CN111016912A/zh
Application granted granted Critical
Publication of CN111016912B publication Critical patent/CN111016912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0005—Dashboard
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明涉及用于检测驾驶员的面部的系统及其相关方法。检测车辆(14)的驾驶员(12)的面部的系统(10)包括：用于驾驶员的仪表组(28)，其包括托架(34)和指向驾驶员(12)并由玻璃(24)覆盖的仪表板(26)，该仪表板嵌入在托架中；图像捕获装置(16)，其包括构造成捕获驾驶员的凝视(20)的连续图像的摄像机(18)；和控制器(32)，其构造成分析驾驶员的凝视(20)；仪表组(28)的至少一个固有元件限定反射表面(30)，该反射表面构造成直接反射驾驶员的凝视(20)的连续图像，固有元件例如为光泽塑料、镀铬元件、显示屏或仪表板(26)的玻璃(24)；摄像机包括朝向反射表面(30)定向的视场(22)，以间接捕获驾驶员的凝视(20)的图像。

Description

用于检测驾驶员的面部的系统及其相关方法
技术领域
本发明涉及一种用于检测车辆的驾驶员的面部的系统及其方法。更具体地说，本发明涉及捕获驾驶员的凝视的运动，以便能够分析凝视行为。
背景技术
目前已知的是，监控车辆驾驶员的凝视，以便能够根据凝视行为确定驾驶员在驾驶其车辆时是否保持小心。可以使用布置在车辆中的摄像机来进行驾驶员已经入睡或者已经分心的检测。车辆的乘客车厢中的车载摄像机在设计和制造车辆时带来了式样和组装约束。
因此，重要的是提出一种解决这些问题的新的解决方案。
发明内容
根据本发明，用于检测车辆驾驶员的面部的系统包括：用于驾驶员的仪表组，该仪表组包括托架和朝向驾驶员定向并由玻璃覆盖的仪表板，所述仪表板嵌入在托架中；图像捕获装置，其包括：摄像机，该摄像机被构造成捕获驾驶员的凝视的连续图像；和控制器，其被构造成分析驾驶员的凝视。该仪表组的至少一个固有元件限定反射表面，该反射表面被构造成直接反射驾驶员的凝视的连续图像，所述固有元件例如为光滑塑料、镀铬元件、显示屏或仪表板玻璃。该摄像机包括朝向反射表面定向的视场，以便间接地捕获驾驶员的凝视的图像。
优选地，摄像机可以布置在仪表板的托架中。反射表面可以以凹入方式沿竖直方向延伸，从而将摄像机的视场朝向位于车辆方向盘的辐条之间的光学焦点聚焦，以便使视场被方向盘的阻挡最小化。该凹反射表面可以是仪表板的玻璃的表面。控制器可以被构造成根据凝视的竖直倒置图像(inverted image)来分析驾驶员的凝视。
该检测系统可以包括用于直接照射驾驶员的面部的装置，该装置包括：光源，该光源被构造成照射驾驶员的面部；和半透明元件，该半透明元件布置在光源和驾驶员的面部之间以便将光源从驾驶员的凝视隐藏。光源可以包括红外光源。
根据本发明，包括上述检测系统的用于检测车辆驾驶员的面部的方法包括以下步骤：
定位摄像机，该摄像机包括指向用于驾驶员的仪表组的固有元件的反射表面的视场，该反射表面被构造成直接反射驾驶员的凝视的连续图像；
捕获从反射表面反射的驾驶员的凝视的连续图像；
分析连续图像以确定驾驶员的凝视的行为。
定位摄像机的步骤可以包括将摄像机定位在车辆仪表板托架中的步骤，使得该摄像机的视场朝向仪表板玻璃定向，并且捕获连续图像的步骤可以是捕获由仪表板玻璃反射的连续图像的步骤。
定位摄像机的步骤可以包括如下步骤：提供仪表板的以凹入方式竖直延伸的玻璃；和定位摄像机，使得该摄像机的由仪表板的玻璃的凹表面反射的视场聚焦到位于车辆的方向盘的辐条之间的光学焦点。
捕获连续图像的步骤可以是捕获驾驶员的凝视的竖直倒置的连续图像的步骤。
本发明的其它目的和优点将从下面的描述中变得显而易见。
附图说明
通过阅读以下详细描述，并结合附图，本发明的其它特征、目的和优点将变得显而易见，附图作为非限制性实施方式给出，其中：
图1是根据本发明的一个实施方式的布置在车辆中的用于检测车辆驾驶员的面部的系统的示意性立体图。
图2是图1的面部检测系统的放大图。
图3是根据本发明的一个实施方式的用于检测车辆驾驶员的面部的方法的流程图。
具体实施方式
为了便于描述，以非限制性的方式定义了竖直轴线V。“底部”、“顶部”、“在…上方”、“在…下方”、“较低”和“较高”的定向是沿着该竖直方向定义的。
根据图1和图2，用于检测车辆14的驾驶员12的面部的系统10包括图像捕获装置16，该图像捕获装置16包括被构造成捕获驾驶员12的面部的连续图像的摄像机18。本发明更具体地涉及驾驶员12的凝视20的检测，也就是说涉及瞳孔的运动的捕获，以便能够分析凝视20。凝视分析20以非限制性方式包括确定凝视20的方向、相对于车辆14的路径上的障碍物的凝视20的分心、或驾驶员12的入睡。
根据图1，摄像机18的视场22不是直接朝向驾驶员12的面部定向。摄像机18的视场22朝向车辆14的仪表板26的玻璃24定向。车辆14的仪表板26是指仪表组28通常包括尤其车辆速度表的部分。仪表板26的玻璃24通常朝向车辆14的驾驶员12定向，使得由于玻璃24的物理反射特性，驾驶员14的凝视20的图像被玻璃24的表面30反射。因此，摄像机18被构造成捕获仪表板26的玻璃24上的反射图像。
图像捕获装置16包括控制器32，该控制器32与摄像机18通信并且被构造成分析由摄像机18捕获的图像的序列，以便能够分析驾驶员12的凝视20。
更一般地，根据本发明，摄像机18必须被布置成使得其视场22朝向车辆14的仪表组28的旨在可被驾驶员12接近的部分的固有元件的反射表面定向。通常，仪表组28的旨在供驾驶员12接近的部分以非限制性的方式举例来说包括仪表板26、关于车辆14的状态的信息指示灯(油、电池…)、诸如危险警告灯之类的控制按钮以及布置在仪表组28的中央面板上的附件，也就是说，以非限制性实施例的方式来说，空调系统、导航系统和汽车收音机的控制件。
换句话说，这意味着仪表组28的没有落入驾驶员12的直接视场内但是例如落入车辆12的前排乘客的直接视场内的元件不能被比作为驾驶员的凝视20的反射表面。作为用于驾驶员12的仪表组28的可包括反射表面的元件的非限制性实施例，将特别地提及朝向驾驶员12定向的光泽塑料元件、朝向驾驶员12定向的镀铬元件、用于驾驶员12的信息显示屏或车辆14的仪表板26的玻璃24。
本发明的优点尤其是在间接检测系统中，不需要仅专用于驾驶员12的图像的反射的只有镜子的元件。此外，通常这种镜子对车辆12的乘客车厢的外观带来附加约束。
为了隐藏摄像机，根据本发明，摄像机18布置在仪表组28的托架34中，更具体地说，布置在托架34的位于车辆12的仪表板26的外围边界处的部分中。摄像机18布置成足够靠近玻璃24，使得摄像机18的视场22通常仅覆盖仪表板26的相对驾驶员12的凝视20的部分。
根据特定实施方式，仪表板26的玻璃24以弯曲的方式沿竖直轴线V延伸，使得玻璃24的朝向驾驶员12定向的部分具有凹反射表面30。由于反射表面30的凹入形状，摄像机18的反射视场36聚焦在光学焦点38处。摄像机18被布置成远离玻璃24，使得光学焦点38位于车辆12的方向盘40的辐条之间，以便最小化反射视场36被方向盘40的阻挡。反射视场36聚焦在焦点或光学焦点38处的效果是驾驶员12在反射表面30上的凝视20的反射图像沿着竖直轴线V倒置。换句话说，驾驶员12的面部在仪表板26的玻璃24上的反射是驾驶员12的面部的竖直倒置反射。因此，根据该特定实施方式，控制器32被构造成根据凝视的竖直倒置图像来分析驾驶员12的凝视20。
以通常的方式，驾驶员的仪表组28的固有元件的凹反射表面引起摄像机18的反射视场36聚焦在光学焦点38处，使得当该光学焦点38位于驾驶员12的面部和反射表面之间时，反射图像被倒置。
根据特定实施方式，面部检测系统32包括用于照明驾驶员12的面部的照明装置42。照明装置42包括至少一个光源44。如图所示，照明可以是直接照明，根据该直接照明，照射驾驶员的面部的光从光源44传播到面部，而没有中间元件使来自光源44的光束46偏转。或者，照明可以是间接照明，也就是说，通过一表面将装置的光朝向驾驶员12的面部反射。
同样，为了不给车辆12的乘客车厢的外观增加附加约束，光源44对于驾驶员12是不可见的。为此，光源44被布置在光源44和驾驶员12之间的半透明元件48隐藏。优选地，光源44是红外光源类型的，以便不使车辆14的驾驶员12目眩。
根据图3，包括图1所述的检测系统10的用于检测驾驶员12的面部的方法100包括步骤110：定位摄像机18，使得其视场22指向用于驾驶员12的仪表组28的固有元件的反射表面30。为了捕获驾驶员12的凝视20的图像的反射，反射表面30必须朝向驾驶员12的凝视20定向。因此，反射表面30被构造成直接反射驾驶员12的凝视20的连续图像。
因此，另一步骤包括从反射表面30捕获120驾驶员12的凝视20的反射连续图像，以便执行分析驾驶员12的凝视20的连续图像的步骤130，以便确定驾驶员12的凝视20的行为。
更特别地，在车辆14的仪表板26的托架34中执行摄像机18的定位，使得摄像机18的视场22朝向仪表板26的玻璃24定向。为此，捕获连续图像的步骤是捕获由仪表板26的玻璃24反射的连续图像的步骤。
考虑到方向盘40存在于仪表板26和驾驶员12的凝视20之间，该方法包括提供105仪表板26的以凹入方式竖直地延伸的玻璃24，使得玻璃24的反射表面30是凹表面。为此，摄像机18被布置107成使其被仪表板26的玻璃24的凹反射表面30反射的视场36聚焦到车辆14的方向盘40的辐条之间的光学焦点38。在反射视场36的点处也就是说在光学焦点38处的这种聚焦，允许减小方向盘40的辐条之间的反射视场36，以便最小化反射视场36被方向盘40的辐条阻挡的风险。朝向驾驶员12的凝视20延伸超过光学焦点38的反射视场36沿着竖直轴线V将倒置反射图像返回到摄像机18。捕获连续图像的步骤是捕获驾驶员12的凝视20的竖直倒置连续图像的步骤。

Claims (10)

1.一种用于检测车辆(14)的驾驶员(12)的面部的检测系统(10)，所述检测系统(10)包括：
用于所述驾驶员(12)的仪表组(28)，所述仪表组(28)包括托架(34)和朝向所述驾驶员(12)定向并由玻璃(24)覆盖的仪表板(26)，所述仪表板(26)嵌入在所述托架(34)中；和
图像捕获装置(16)，所述图像捕获装置(16)包括：摄像机(18)，所述摄像机(18)被构造成捕获所述驾驶员(12)的凝视(20)的连续图像；以及控制器(32)，所述控制器(32)被构造成分析所述驾驶员(12)的凝视(20)；
其特征在于，
所述仪表组(28)的至少一个固有元件限定反射表面(30)，所述反射表面(30)被构造成直接反射所述驾驶员(12)的凝视(20)的所述连续图像，所述反射表面(30)以凹入方式沿竖直方向延伸，从而将所述摄像机(18)的反射视场(36)朝向位于所述车辆(14)的方向盘(40)的辐条之间的光学焦点(38)聚焦，以便使所述反射视场(36)被所述方向盘(40)的阻挡最小化，并且使所述驾驶员(12)的凝视(20)在所述反射表面(30)上的反射图像沿着竖直方向倒置；
所述摄像机(18)包括朝向所述反射表面(30)定向的视场(22)，以便间接地捕获所述驾驶员(12)的凝视(20)的图像。
2.根据权利要求1所述的检测系统(10)，其特征在于，所述摄像机(18)布置在所述仪表板(26)的所述托架(34)中。
3.根据权利要求1所述的检测系统(10)，其特征在于，所述至少一个固有元件为光泽塑料、镀铬元件、显示屏或所述仪表板(26)的玻璃(24)。
4.根据权利要求3所述的检测系统(10)，其特征在于，所述反射表面(30)是所述仪表板(26)的玻璃(24)的凹反射表面。
5.根据权利要求3或4所述的检测系统(10)，其特征在于，所述控制器(32)被构造成根据所述凝视(20)的竖直倒置图像来分析所述驾驶员(12)的所述凝视(20)。
6.根据权利要求1至4中任一项所述的检测系统(10)，其特征在于，所述检测系统(10)包括用于直接照射所述驾驶员(12)的面部的装置(42)，所述装置(42)包括：光源(44)，该光源(44)被构造成照射所述驾驶员(12)的面部；和半透明元件(48)，该半透明元件(48)布置在所述光源(44)和所述驾驶员(12)的面部之间，以便将所述光源(44)从所述驾驶员(12)的凝视(20)隐藏。
7.根据权利要求6所述的检测系统(10)，其特征在于，所述光源(44)包括红外光源。
8.一种用于检测车辆(14)的驾驶员(12)的面部的方法(100)，所述方法(100)包括权利要求1至7中任一项所述的检测系统(10)，其特征在于，所述方法包括以下步骤：
定位(110)所述摄像机(18)，所述摄像机(18)包括指向用于所述驾驶员(12)的所述仪表组(28)的固有元件的反射表面(30)的视场(22)，所述反射表面(30)被构造成直接反射所述驾驶员(12)的凝视(20)的连续图像；
捕获(120)从所述反射表面(30)反射的所述驾驶员(12)的凝视(20)的连续图像；
分析(130)所述连续图像以确定所述驾驶员(12)的凝视(20)的行为。
9.根据权利要求8所述的方法(100)，其特征在于，定位所述摄像机(18)的步骤(110)包括将所述摄像机(18)定位在所述车辆(14)的仪表板(26)的托架(34)中的步骤，使得该摄像机(18)的视场(22)朝向所述仪表板(26)的玻璃(24)定向；
捕获所述连续图像的步骤(120)是捕获由所述仪表板(26)的玻璃(24)反射的连续图像的步骤。
10.根据权利要求9所述的方法(100)，其特征在于，定位所述摄像机(18)的步骤(110)包括以下步骤：
提供(105)所述仪表板(26)的以凹入方式竖直延伸的玻璃(24)；
定位(107)所述摄像机(18)，使得该摄像机(18)的由所述仪表板(26)的玻璃(24)的凹反射表面(30)反射的视场(36)聚焦到位于所述车辆(14)的所述方向盘(40)的辐条之间的光学焦点(38)；
捕获所述连续图像的步骤(120)是捕获所述驾驶员(12)的凝视(20)的竖直倒置的连续图像的步骤。
CN201910923594.6A 2018-10-08 2019-09-27 用于检测驾驶员的面部的系统及其相关方法 Active CN111016912B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FRFR1871141 2018-10-08
FR1871141A FR3087029B1 (fr) 2018-10-08 2018-10-08 Systeme de detection faciale d’un conducteur et methode associee

Publications (2)

Publication Number Publication Date
CN111016912A CN111016912A (zh) 2020-04-17
CN111016912B true CN111016912B (zh) 2023-04-07

Family

ID=66166091

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910923594.6A Active CN111016912B (zh) 2018-10-08 2019-09-27 用于检测驾驶员的面部的系统及其相关方法

Country Status (4)

Country Link
US (1) US11308721B2 (zh)
EP (1) EP3637314B1 (zh)
CN (1) CN111016912B (zh)
FR (1) FR3087029B1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6652544B2 (ja) * 2017-11-27 2020-02-26 矢崎総業株式会社 メータ装置及びそれを備えたメータユニット
US11582425B2 (en) 2020-06-10 2023-02-14 Magna Electronics Inc. Driver monitoring system using camera with adjustable mirror
WO2022021204A1 (zh) * 2020-07-30 2022-02-03 欧菲光集团股份有限公司 载具部件及汽车
CN117496573A (zh) * 2023-11-13 2024-02-02 以萨技术股份有限公司 一种关联搜索信息的扩充方法、存储介质及电子设备

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8604932B2 (en) * 1992-05-05 2013-12-10 American Vehicular Sciences, LLC Driver fatigue monitoring system and method
JPH06189306A (ja) * 1992-12-16 1994-07-08 Mitsubishi Electric Corp 運転者撮影装置
US5461361A (en) * 1994-03-11 1995-10-24 Chrysler Corporation Automotive instrument panel apparatus
US9129505B2 (en) * 1995-06-07 2015-09-08 American Vehicular Sciences Llc Driver fatigue monitoring system and method
US6927674B2 (en) 2002-03-21 2005-08-09 Delphi Technologies, Inc. Vehicle instrument cluster having integrated imaging system
JP2004058799A (ja) * 2002-07-26 2004-02-26 Murakami Corp 車載用乗員撮影装置
US20070115099A1 (en) * 2003-08-20 2007-05-24 Nobutaka Hamada Image processing system for identifying car thieves
US7091867B2 (en) * 2004-02-20 2006-08-15 Agilent Technologies, Inc. Wavelength selectivity enabling subject monitoring outside the subject's field of view
US7777778B2 (en) * 2004-10-27 2010-08-17 Delphi Technologies, Inc. Illumination and imaging system and method
JP2006252138A (ja) * 2005-03-10 2006-09-21 Omron Corp 運転者撮影装置および運転者監視装置
US7689008B2 (en) 2005-06-10 2010-03-30 Delphi Technologies, Inc. System and method for detecting an eye
JP2009136551A (ja) * 2007-12-07 2009-06-25 Denso Corp 車両用顔特徴量検出装置及び顔特徴量検出方法
US20110025836A1 (en) * 2008-03-18 2011-02-03 Satoshi Tamaki Driver monitoring apparatus, driver monitoring method, and vehicle
EP2237237B1 (en) * 2009-03-30 2013-03-20 Tobii Technology AB Eye closure detection using structured illumination
US20120002028A1 (en) * 2010-07-05 2012-01-05 Honda Motor Co., Ltd. Face image pick-up apparatus for vehicle
EP2648618B1 (en) * 2010-12-10 2021-07-14 Joyson Safety Systems Acquisition LLC System for monitoring a vehicle driver
IL219907A (en) * 2012-05-21 2017-08-31 Lumus Ltd Integrated head display system with eye tracking
US9612656B2 (en) * 2012-11-27 2017-04-04 Facebook, Inc. Systems and methods of eye tracking control on mobile device
US9967522B2 (en) * 2013-02-27 2018-05-08 GM Global Technology Operations LLC Driver monitoring camera system
US10277837B2 (en) * 2013-11-05 2019-04-30 Visteon Global Technologies, Inc. System and method for monitoring a driver of a vehicle
US20150294169A1 (en) * 2014-04-10 2015-10-15 Magna Electronics Inc. Vehicle vision system with driver monitoring
US20170026553A1 (en) 2015-07-24 2017-01-26 Apple Inc. Displays With Camera Window Openings
CN107924668B (zh) * 2015-08-26 2021-02-19 富士胶片株式会社 投影型显示装置
JP2017207607A (ja) * 2016-05-18 2017-11-24 アルパイン株式会社 多層画像表示装置
US20180037116A1 (en) * 2016-08-04 2018-02-08 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Combined head up display (hud) and camera system
US20180067212A1 (en) 2016-09-02 2018-03-08 Apple Inc. Infrared-Transparent Window Coatings for Electronic Device Sensors
US10094963B2 (en) 2016-09-02 2018-10-09 Apple Inc. Infrared-transparent window coatings for electronic device sensors
US20180079370A1 (en) 2016-09-22 2018-03-22 Delphi Technologies, Inc. Reconfigurable display with camera aperture therethrough
JP6825903B2 (ja) * 2016-12-27 2021-02-03 矢崎総業株式会社 ドライバー撮像装置
JP6528787B2 (ja) * 2017-01-17 2019-06-12 トヨタ自動車株式会社 車両の制御装置
JP6809262B2 (ja) * 2017-02-08 2021-01-06 トヨタ自動車株式会社 ドライバ状態検出装置
JP2018146784A (ja) * 2017-03-06 2018-09-20 矢崎総業株式会社 表示像投影装置および表示像投影システム
DE102017116699B4 (de) * 2017-07-24 2023-05-11 SMR Patents S.à.r.l. Fahrzeuganordnung, Fahrzeug sowie Verfahren zum Bereitstellen einer Anzeige
WO2019042535A1 (en) * 2017-08-30 2019-03-07 Continental Automotive Gmbh SYSTEM AND METHOD FOR IMAGE REDIRECTION OF AN OBJECT IN A CAMERA
DE102017216774B4 (de) * 2017-09-21 2019-07-04 Volkswagen Aktiengesellschaft Verfahren, Vorrichtung, computerlesbares Speichermedium und Kraftfahrzeug mit Instruktionen zur Steuerung einer Anzeige einer Augmented-Reality-Head-up-Display-Vorrichtung für ein Kraftfahrzeug
JP2019077283A (ja) * 2017-10-23 2019-05-23 矢崎総業株式会社 車載撮影装置
EP3502953A1 (en) 2017-12-19 2019-06-26 Continental Automotive GmbH Driver monitoring system for a vehicle

Also Published As

Publication number Publication date
EP3637314A1 (fr) 2020-04-15
FR3087029B1 (fr) 2022-06-24
US11308721B2 (en) 2022-04-19
FR3087029A1 (fr) 2020-04-10
CN111016912A (zh) 2020-04-17
US20200110950A1 (en) 2020-04-09
EP3637314B1 (fr) 2023-08-09

Similar Documents

Publication Publication Date Title
CN111016912B (zh) 用于检测驾驶员的面部的系统及其相关方法
JP6629889B2 (ja) ヘッドアップディスプレイ装置
JP6717856B2 (ja) ヘッドアップディスプレイ装置
JP6123761B2 (ja) 車両用表示装置
JP6338695B2 (ja) 動的照明装置および動的照明方法
US6927674B2 (en) Vehicle instrument cluster having integrated imaging system
US8953042B2 (en) Vehicle-mounted device identifying apparatus
CN100413324C (zh) 车载夜视摄象机系统,显示装置和显示方法
KR101433837B1 (ko) 차량의 나이트-뷰 시스템 동작 방법 및 대응하는 나이트-뷰시스템
US20090231116A1 (en) In-vehicle display device
US20150054933A1 (en) Motor vehicle with multifunctional display instrument
JP6278106B2 (ja) 状態監視装置，及び光学部材
JP2011079345A (ja) 車両用ヘッドアップディスプレイ
CN105301773B (zh) 车辆用显示装置和车辆
US20150124097A1 (en) Optical reproduction and detection system in a vehicle
JP2009222881A (ja) ヘッドアップディスプレイ装置
JP6106979B2 (ja) 状態監視装置，及び光学部材
JP2014130463A (ja) 制御装置
US10401621B2 (en) Display unit for vehicle head-up display system
JP7253708B2 (ja) 情報処理装置、車両及び情報処理方法
JP6414570B2 (ja) 車両用後方視認装置
JP2017061216A (ja) 車載撮像システム、車両および撮像方法
JP7068647B2 (ja) 運転支援装置
CN110816267A (zh) 显示装置、显示控制方法及存储介质
JP2020079879A (ja) 表示制御装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant