CN102975719A - 使用红外线传感器检测驾驶者状况的装置和方法 - Google Patents

使用红外线传感器检测驾驶者状况的装置和方法 Download PDF

Info

Publication number
CN102975719A
CN102975719A CN2012100016566A CN201210001656A CN102975719A CN 102975719 A CN102975719 A CN 102975719A CN 2012100016566 A CN2012100016566 A CN 2012100016566A CN 201210001656 A CN201210001656 A CN 201210001656A CN 102975719 A CN102975719 A CN 102975719A
Authority
CN
China
Prior art keywords
driver
sensor
identification error
distance
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012100016566A
Other languages
English (en)
Other versions
CN102975719B (zh
Inventor
金三龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Motor Co
Original Assignee
Hyundai Motor Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Motor Co filed Critical Hyundai Motor Co
Publication of CN102975719A publication Critical patent/CN102975719A/zh
Application granted granted Critical
Publication of CN102975719B publication Critical patent/CN102975719B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02Operational features
    • A61B2560/0266Operational features for monitoring or limiting apparatus function
    • A61B2560/0276Determining malfunction
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/08Systems determining position data of a target for measuring distance only
    • G01S17/10Systems determining position data of a target for measuring distance only using transmission of interrupted, pulse-modulated waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Educational Technology (AREA)
  • Developmental Disabilities (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Child & Adolescent Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Hospice & Palliative Care (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)
  • Optical Radar Systems And Details Thereof (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Analysis (AREA)
  • Measurement Of Optical Distance (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明提供了一种使用红外线传感器检测驾驶者状况的装置和方法。所述装置包括:红外线(IR)传感器,其包含配置成发射光信号的光发射单元和配置成接收光信号的光接收单元,并且使用从光发射单元发射的光信号和由光接收单元接收的光信号之间的相位差来测量至IR传感器前方的障碍物的距离;摄像机,其被配置成拍摄驾驶者的面部并从所拍摄的图像中检测驾驶者的面部;以及电子控制器,其被配置成使用通过IR传感器和摄像机测量的数据来确定识别错误是否已经发生,并且在识别错误发生时分析任何产生的识别错误。

Description

使用红外线传感器检测驾驶者状况的装置和方法
技术领域
本发明涉及一种使用红外线(IR)传感器检测驾驶者状况的装置和方法,并且更特别地涉及一种使用红外LED和摄像机检测驾驶者状况的装置和方法。
背景技术
驾驶者状况检测装置能够通过对驾驶者面部、表情和位置进行图像分析来监视驾驶者的精神状态和警觉状态。这些装置通常包括照明装置以及摄像机以便即使在晚上或在黑暗环境(诸如隧道)中也能顺利拍摄。
然而,如果仅通过摄像机拍摄的图像来检查驾驶者状况,那么很难适当地对诸如光子环境造成的退化现象、摄像机镜头上的灰尘引起的成像错误、无法检查到驾驶者面部的一部分以及无法根据驾驶者的位置变化识别出驾驶者状况等之类的错误作出响应。这些错误被无条件地作为未受到注意的识别错误来对待。
此外,当错误被无条件地作为识别错误来对待时,不能向用户提醒实际上是什么问题引起该识别错误,从而用户无法适当地对这样的识别错误作出响应。因此,在常规装置中,既不能向用户提醒识别错误又不能向用户说明如何纠正该识别错误。
发明内容
本发明是考虑到上述问题而做出的,并且提供了一种用于检测驾驶者的当前状况(例如,他们的警觉状态、是否清醒等等)的装置,其通过使用红外LED和摄像机检查驾驶者状况,来减少由于摄像机故障或驾驶者的位置产生的识别错误。
根据本发明的一方面,一种用于检测驾驶者状况的装置包括:红外线(IR)传感器,其包含发射光信号(例如,红外光信号)的光发射单元和接收光信号的光接收单元,并且使用从光发射单元发射的光信号和由光接收单元接收的光信号之间的相位差来测量至前方的障碍物的距离;面部识别摄像机,其拍摄驾驶者的面部并从所拍摄的图像中检测驾驶者的面部;以及电子控制器,其使用通过IR传感器和面部识别摄像机测量的数据来确定识别错误是否已经发生,并且在识别错误已经发生的情况下分析所产生的识别错误。
根据本发明的另一方面,一种用于检测驾驶者状况的方法包括:通过IR传感器使用从光发射单元发射的光信号与由光接收单元接收的光信号之间的相位差,来测量至前方的障碍物的距离(步骤1);拍摄驾驶者的面部并从所拍摄的图像中检测驾驶者的面部(步骤2);通过电子控制器使用在步骤1和步骤2测量的数据来确定识别错误是否已经发生,并且在识别错误已经发生的情况下分析所产生的识别错误(步骤3)。
根据本发明,能够减少在驾驶者状况检测装置中由于周围环境或驾驶者的位置而产生的识别错误。此外,由于使用了红外线传感器以及摄像机,所以可以根据情况的数目将识别错误分类,并且因此可以更容易地识别每种识别错误的起因。最后,通过向用户提供错误消息,可以引导用户纠正识别错误。
附图说明
根据结合附图给出的以下详细说明,本发明的目的、特征和优点将更加明了,在附图中:
图1示出根据本发明示例性实施例的驾驶者状况检测装置的配置;
图2示出根据本发明示例性实施例的在汽车中配备的驾驶者状况检测装置;
图3示出根据本发明示例性实施例的用于检测驾驶者状况的方法的流程图;并且
图4示出根据本发明示例性实施例的检查与驾驶者的距离的方法。
附图中各要素的附图标记
图1
100:IR传感器            101:光发射单元
103:光接收单元    110:面部识别摄像机
120:电子控制器    130:显示单元
140:警报单元
图3
S200:拍摄图像     S210:发射并接收LED
S220:估算距离     S230:分析估算的距离和拍摄的图像
S240:根据分析的结果输出预设消息或警报
具体实施方式
将参考附图详细描述本发明的示例性实施例。在所有附图中将始终使用相同的附图标记来指代相同或相似的部分。这里包含的公知的功能和结构的详细描述可能会被省略以避免使本发明的主题变模糊。
应该理解的是,本文中使用的术语“车辆”或“车辆的”或其它类似术语包括一般的所有机动车辆(诸如包括运动型多功能车(SUV)、公共汽车、卡车、各种商用车辆在内的客车)、包括各种艇和船在内的水运工具、飞行器等,并且包括燃气车、柴油车、混合动力车、电动车、插电式混合电动车、氢动力车以及其它代用燃料车(例如从除石油以外的资源中取得的燃料)。如本文中所述,混合动力车是具有两个或更多个动力源的车辆,例如既有汽油动力又有电动力的车辆。
图1示出根据本发明示例性实施例的驾驶者状况检测装置的配置。
如图1中所示,根据本发明的驾驶者状况检测装置包括红外线(IR)传感器100、面部识别摄像机110、电子控制器120、显示单元130和警报单元140。IR传感器100是配置成测量IR传感器前方的障碍物与IR传感器100自身之间的距离的装置,并且包括发射预设光信号的光发射单元101以及接收周围光信号的光接收单元103。
光发射单元101为面部识别摄像机110提供照明,并且发射由光接收单元103接收的光。可见光线或远红外线发光二极管(LED)可以用作光发射单元101,但是红外线LED(IR LED)是优选的。
IR传感器100与IR传感器前方的物体之间的距离是例如根据从光发射单元101发射的光信号和由光接收单元103接收的光信号之间的相位差来测量的。这里,IR传感器前方的物体是指,存在于光发射单元101和光接收单元103前方的物体,例如驾驶者面部、驾驶者上身和/或驾驶者座椅等。稍后参考图4详细解释测量IR传感器100和前方的障碍物之间的距离的方法。
面部识别摄像机110配置成拍摄驾驶者的面部。然后在面部识别摄像机110拍摄的图像中检测驾驶者面部。面部识别摄像机110常常布置成与IR传感器相邻,因此放置在面部识别摄像机110前方的物体被识别为IR传感器100前方的物体。
电子控制器120基于由IR传感器100和面部识别传感器110测量的数据,来确定是否已经发生识别错误。然后电子控制器120在没有发生识别错误的情况下检查驾驶者的当前状况,并且在已经发生识别错误的情况下分析所产生的识别错误。因此,电子控制器120可以监视驾驶者的当前状况,并且当没有发生识别错误时确定驾驶者状况是处于正常驾驶状况还是处于有害驾驶状况。
在已经发生识别错误的情况下,电子控制器120根据分析的识别错误通过显示单元130为用户提供适当的情报消息(informationmessage),使得驾驶者可以采取适当措施来纠正该识别错误。电子控制器120使用由IR传感器100和面部识别摄像机110测量的数据,根据各个情况分析识别错误。因此,电子控制器120可以根据由IR传感器100测量的距离来确定IR传感器前方的障碍物是什么以及驾驶者的位置是否正常。例如,当测得的距离在0cm与30cm之间时,可以确定物体或驾驶者面部非常靠近面部识别摄像机110。当测得的距离在40cm与60cm之间时,可以确定驾驶者的位置正常并且测得的距离是到驾驶者的上身的距离。可选地,当测得的距离在80cm与90cm之间时,可以确定驾驶者的位置异常并且测得的距离是到驾驶者的座椅而非驾驶者的距离。
根据从电子控制器120发送的信号,显示单元130显示表示驾驶者状况的驾驶者状况消息、表示所产生的识别错误的识别错误消息、表示对所产生的识别错误的分析的识别错误分析消息和/或配置成基于识别错误分析的结果对识别错误提供纠正指令的情报消息。取决于驾驶者状况是正常还是有害,使驾驶者状况消息不同地得到显示。
作为电子控制器120的结果,如果驾驶者状况是有害的,那么警报单元140可以输出警报。在一些实施例中,警报单元140可以是语音输出装置,并且可以配置成当识别错误发生时以音频格式输出识别错误消息或识别错误分析消息。
例如,在通常的光子环境和驾驶者位置的情况下,由IR传感器100测量的到驾驶者上身的距离被估算为在40cm与60cm之间,并且当在由面部识别摄像机110拍摄的图像中检测到驾驶者面部时,电子控制器120确定没有发生识别错误并检查驾驶者的当前状况。检查驾驶者的当前状况的结果可以分成正常驾驶状况或有害驾驶状况,并且通过显示单元130或警报单元140输出消息或警报。
作为另一实例,当驾驶者面部接近摄像机时,如果由IR传感器100测量的到驾驶者面部的距离被估算为在0cm与20cm之间,并且在由面部识别摄像机110拍摄的图像中没有正常地检测到驾驶者面部,则电子控制器120确定已经发生识别错误,分析该状态作为面部识别不可能状态,而且可以通过显示单元130或警报单元140输出识别错误消息和情报消息以检查用于监视驾驶者状况的驾驶者位置。
作为另一实例,当物体存在于面部识别摄像机110的前方时,由IR传感器100测量的到物体的距离被估算为15cm的固定值,并且当在由面部识别摄像机110拍摄的图像中没有检测到驾驶者面部时,电子控制器120确定已经发生识别错误,分析该状态作为面部识别不可能状态,并且通过显示单元130或警报单元140输出识别错误消息和情报消息以检查面部识别摄像机110前方的物体。
作为另一实例,当驾驶者面部由于背光状况或侧向光而处于非常黑暗或非常明亮的环境中时,如果由IR传感器100测量的到驾驶者上身的距离被估算为在40cm与60cm之间,并且在由面部识别摄像机110拍摄的图像中没有检测到驾驶者面部,那么电子控制器120确定已经发生识别错误,分析该状态作为面部识别不可能状态,并且通过显示单元130和警报单元140输出识别错误消息和情报消息以调整光子环境。
作为另一实例,当没有在驾驶者座椅位置检测到驾驶者面部时,如果由IR传感器100测量的到驾驶者座椅的距离被估算为在80cm与90cm之间,并且在由面部识别摄像机110拍摄的图像中没有检测到驾驶者面部,那么电子控制器120确定已经发生识别错误,分析该状态作为故障检测状态,并且通过显示单元130或警报单元140输出错误识别消息,其向驾驶者通知状况无法得到确定。
作为另一实例,当没有在通常的光子环境中检测到驾驶者面部时,如果由IR传感器100测量的到驾驶者上身的距离被估算为在40cm与60cm之间,并且在由面部识别摄像机110拍摄的图像中没有检测到驾驶者面部,那么电子控制器120确定已经发生识别错误,分析该状态作为故障检测状态,并且通过显示单元130或警报单元140输出错误识别消息,其向驾驶者通知状况无法得到确定。
关于IR传感器100测量的距离的标准不局限于以上示例性实施例中解释的厘米范围,并且到驾驶者面部的实际距离和到驾驶者上身的实际距离可以通过IR传感器数据的可选配置、根据驾驶者的体型而改变。因此,关于IR传感器100测量的距离的标准可以有差别地应用。
图2示出根据本发明示例性实施例的在汽车中配备的驾驶者状况检测装置。如图2中所示,根据本发明示例性实施例的驾驶者状况检测装置的IR传感器100和面部识别摄像机110可以布置在同一平面上。例证性地,一个光接收单元103布置在两个光发射单元101之间的光发射单元/接收器构造,被布置在面部识别摄像机110的两侧。在此实施例中,到前方障碍物的距离可以由IR传感器100测量,并且驾驶者的面部可以相应地由面部识别摄像机110拍摄。
图3是示出根据本发明示例性实施例的用于检测驾驶者状况的方法的流程图。如图3中所示,拍摄驾驶者面部的图像(200)。接着,光发射单元101发射光信号,并且光接收单元103接收光信号(210)。步骤200和210可以同时发生、按相反顺序发生或顺序地发生。然后,利用从光发射单元101发射的光信号与由光接收单元103接收的光信号之间的相位差,来估算至IR传感器100前方的障碍物的距离(220)。此后,由电子控制器120分析在步骤220估算的至障碍物的距离和在步骤200拍摄的驾驶者面部图像(230),并且基于这些分析结果,在步骤230,通过显示单元130和警报单元140输出预设消息或警报(240)。预设消息可以是驾驶者状况消息、识别错误消息、识别错误分析消息和/或情报消息。
图4示出根据本发明示例性实施例的检查与驾驶者的距离的方法。如图4中所示,如果光发射单元101每tR发射持续to的光信号,光接收单元103在延迟时间tD之后接收到光信号。其中to是光发射单元101发送光信号的时间,tR是光接收单元103接收同一光信号的时间,并且tD是两者之间的时间延迟。此时,可以使用下面的公式1计算从IR传感器100(其包括光发射单元101和光接收单元103)到障碍物的距离,并且公式1在到障碍物的距离大约为1m的情况下可以具有厘米单位的精度。
公式1
D = c × t D 2
这里,“D”是到障碍物的距离,并且“c”是光速。
如上所述,根据本发明,可以高精度地估算从IR传感器100到IR传感器前方的障碍物的距离,因此可能会被摄像机环境或驾驶者位置等改变的到障碍物的距离以及驾驶者面部可以同时被面部识别摄像机110识别。因此,本发明提供了一种通过使用数据、分析识别错误、查找识别错误的起因并纠正识别错误,来监视和分析识别错误的方法。
本发明可以实现为在处理器或控制器可读记录介质中可读的计算机可读代码。计算机可读记录介质包括可以存储处理器可读数据的各种记录装置。处理器可读介质的一些实例是ROM、RAM、CD-ROM、磁带、软盘、智能卡和光学数据存储器装置等。此外,处理器可读记录介质可以分布在通过网络连接的计算机系统中,并且处理器/控制器可读代码可以通过例如远程信息处理或控制器局域网(CAN)以分布式方式被存储和执行。
尽管已经在上文中详细描述了本发明的示例性实施例,但是应该清楚理解的是,本领域技术人员可能会想到的本文中教导的基本发明概念的许多变型和改型将会仍然落入所附权利要求所限定的本发明的精神和范围内。

Claims (12)

1.一种用于检测驾驶者状况的装置,所述装置包括:
红外线(IR)传感器,其包含配置成发射光信号的光发射单元和配置成接收光信号的光接收单元,并且使用从所述光发射单元发射的光信号和由所述光接收单元接收的所述光信号之间的相位差来测量至所述IR传感器前方的障碍物的距离;
摄像机,其被配置成拍摄驾驶者的面部并从所拍摄的图像中检测驾驶者的面部;以及
电子控制器,其被配置成使用通过所述IR传感器和所述摄像机测量的数据来确定识别错误是否已经发生,并且在识别错误发生时分析任何产生的识别错误。
2.如权利要求1所述的装置,还包括:
显示单元,其被配置成在识别错误发生时显示识别错误消息、识别错误分析消息和情报消息中的至少一者。
3.如权利要求1所述的装置,其中所述IR传感器前方的所述障碍物是驾驶者面部、驾驶者上身和驾驶者座椅中的至少一者。
4.如权利要求1所述的装置,其中所述电子控制器被配置成基于由所述IR传感器测量的距离来识别驾驶者位置或所述IR传感器前方的所述障碍物。
5.如权利要求1所述的装置,其中所述IR传感器被配置成使用在发送光信号的时刻和所述光接收单元接收所述光信号的时刻之间发生的延迟时间,来测量至所述IR传感器前方的所述障碍物的距离。
6.如权利要求1所述的装置,其中所述电子控制器被配置成当没有发生识别错误时,使用由所述IR传感器和所述摄像机测量的数据来确定驾驶者状况是处于正常驾驶状况还是处于有害驾驶状况。
7.如权利要求6所述的装置,还包括:
警报单元,其被配置成当作为所述电子控制器进行的确定的结果,确定驾驶者状况处于有害驾驶状况时,输出警报。
8.一种用于检测驾驶者状况的方法,所述方法包括:
通过红外线(IR)传感器使用从光发射单元发射的光信号与由光接收单元接收的所述光信号之间的相位差,来测量至所述IR传感器前方的障碍物的距离(步骤1);
由摄像机拍摄驾驶者的面部并由所述摄像机从所拍摄的图像中检测驾驶者的面部(步骤2);
通过控制器使用在步骤1和步骤2测量的数据来确定识别错误是否已经发生,并且在识别错误已经发生的情况下通过所述控制器分析所产生的识别错误(步骤3)。
9.如权利要求8所述的方法,还包括:
当识别错误发生时,由显示单元显示识别错误消息、识别错误分析消息和情报消息中的至少一者(步骤4)。
10.如权利要求8所述的方法,其中所述IR传感器前方的所述障碍物是驾驶者面部、驾驶者上身和驾驶者座椅中的一个。
11.如权利要求8所述的方法,还包括由所述控制器基于在步骤1测量的距离来识别驾驶者位置或所述IR传感器前方的所述障碍物。
12.如权利要求8所述的方法,其中步骤1使用所述光接收单元接收光信号的时刻与所述光发射单元发射所述光信号的时刻之间的时间延迟来测量至所述IR传感器前方的所述障碍物的距离。
CN201210001656.6A 2011-09-02 2012-01-05 使用红外线传感器检测驾驶者状况的装置和方法 Active CN102975719B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2011-0089104 2011-09-02
KR1020110089104A KR101251836B1 (ko) 2011-09-02 2011-09-02 적외선 센서를 이용한 운전자 상태감시 장치 및 그 방법

Publications (2)

Publication Number Publication Date
CN102975719A true CN102975719A (zh) 2013-03-20
CN102975719B CN102975719B (zh) 2017-05-17

Family

ID=47710902

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210001656.6A Active CN102975719B (zh) 2011-09-02 2012-01-05 使用红外线传感器检测驾驶者状况的装置和方法

Country Status (5)

Country Link
US (1) US20130057668A1 (zh)
JP (1) JP2013054717A (zh)
KR (1) KR101251836B1 (zh)
CN (1) CN102975719B (zh)
DE (1) DE102012200096A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106327608A (zh) * 2015-07-01 2017-01-11 窦娟 一种通过无线信号判断车内驾驶人员状态的方法和系统
CN108388837A (zh) * 2017-02-03 2018-08-10 福特全球技术公司 一种用于评估自主车辆的内部的系统和方法
CN108463692A (zh) * 2016-01-19 2018-08-28 索尼公司 信息处理设备、信息处理方法及程序
CN109278556A (zh) * 2018-11-19 2019-01-29 深圳和而泰智能控制股份有限公司 汽车安全装置
CN113671516A (zh) * 2021-08-05 2021-11-19 湖南大学 一种车灯测距装置及其方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5821859B2 (ja) * 2013-01-18 2015-11-24 株式会社デンソー 表示システム
CN103297704A (zh) * 2013-06-21 2013-09-11 苏州鼎富软件科技有限公司 视频摄制方法以及视频尺寸自动调整方法
US10210761B2 (en) 2013-09-30 2019-02-19 Sackett Solutions & Innovations, LLC Driving assistance systems and methods
US11243294B2 (en) * 2014-05-19 2022-02-08 Rockwell Automation Technologies, Inc. Waveform reconstruction in a time-of-flight sensor
JP6507015B2 (ja) * 2015-04-08 2019-04-24 日野自動車株式会社 運転者状態判定装置
CN105984378A (zh) * 2015-04-14 2016-10-05 智车优行科技(北京)有限公司 一种汽车语音提示系统
CN104820224B (zh) * 2015-05-08 2017-11-03 中国科学院南京地理与湖泊研究所 富营养化湖泊水体叶绿素a的MODIS卫星高精度监测方法
CN105357501A (zh) * 2015-12-16 2016-02-24 天津天地伟业数码科技有限公司 在嵌入式录像设备上扩展生命体征检测的方法
FR3061472B1 (fr) * 2016-12-29 2019-10-11 Arnaud Chaumeil Securite concernant un engin et une personne equipee d'un dispositif medical
DE102017205386A1 (de) * 2017-03-30 2018-10-04 Robert Bosch Gmbh Fahrerbeobachtungsvorrichtung und Verfahren zum Beobachten eines Fahrers in einem Fahrzeug zum Bestimmen zumindest einer Position des Fahrers in dem Fahrzeug
CN107277318B (zh) * 2017-06-26 2020-07-14 苏州佳世达电通有限公司 影像撷取装置及影像撷取方法
US20190012552A1 (en) * 2017-07-06 2019-01-10 Yves Lambert Hidden driver monitoring
US10691926B2 (en) * 2018-05-03 2020-06-23 Analog Devices, Inc. Single-pixel sensor
WO2022230168A1 (ja) * 2021-04-30 2022-11-03 三菱電機株式会社 乗員状態判定装置および乗員状態判定方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1308894A2 (en) * 2001-11-05 2003-05-07 Eaton Corporation Image processing system for estimating the energy transfer of an occupant into an airbag
WO2004075105A2 (en) * 2003-02-20 2004-09-02 Intelligent Mechatronic Systems Inc. Adaptive visual occupant detection and classification system
US20070262574A1 (en) * 1982-06-18 2007-11-15 Intelligent Technologies International, Inc. Optical Monitoring of Vehicle Interiors
KR100686564B1 (ko) * 1997-04-01 2008-03-24 후지 덴키 홀딩스 가부시끼가이샤 승차자의자세판별장치
CN101668665A (zh) * 2007-04-03 2010-03-10 德尔菲技术公司 用于控制可充气垫的设备和方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05196859A (ja) * 1992-01-17 1993-08-06 Nikon Corp オートフォーカス装置
JPH08297019A (ja) * 1995-04-27 1996-11-12 Nissan Motor Co Ltd 車両用視線方向計測装置
JP3286219B2 (ja) 1997-09-11 2002-05-27 トヨタ自動車株式会社 座席の使用状況判定装置
JP3532772B2 (ja) * 1998-09-25 2004-05-31 本田技研工業株式会社 乗員の乗車状態検出装置
DE10149115A1 (de) * 2001-10-05 2003-04-17 Bosch Gmbh Robert Objekterfassungsvorrichtung
JP2005024792A (ja) 2003-06-30 2005-01-27 Nec Saitama Ltd カメラ付き携帯通信端末
JP4702598B2 (ja) * 2005-03-15 2011-06-15 オムロン株式会社 監視システム、監視装置および方法、記録媒体、並びにプログラム
JP5233322B2 (ja) * 2008-02-28 2013-07-10 オムロン株式会社 情報処理装置および方法、並びに、プログラム
US20120050477A1 (en) * 2010-08-27 2012-03-01 Jeyhan Karaoguz Method and System for Utilizing Depth Information for Providing Security Monitoring

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070262574A1 (en) * 1982-06-18 2007-11-15 Intelligent Technologies International, Inc. Optical Monitoring of Vehicle Interiors
KR100686564B1 (ko) * 1997-04-01 2008-03-24 후지 덴키 홀딩스 가부시끼가이샤 승차자의자세판별장치
EP1308894A2 (en) * 2001-11-05 2003-05-07 Eaton Corporation Image processing system for estimating the energy transfer of an occupant into an airbag
WO2004075105A2 (en) * 2003-02-20 2004-09-02 Intelligent Mechatronic Systems Inc. Adaptive visual occupant detection and classification system
CN101668665A (zh) * 2007-04-03 2010-03-10 德尔菲技术公司 用于控制可充气垫的设备和方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106327608A (zh) * 2015-07-01 2017-01-11 窦娟 一种通过无线信号判断车内驾驶人员状态的方法和系统
CN106327608B (zh) * 2015-07-01 2019-05-21 窦娟 一种通过无线信号判断车内驾驶人员状态的方法和系统
CN108463692A (zh) * 2016-01-19 2018-08-28 索尼公司 信息处理设备、信息处理方法及程序
CN108388837A (zh) * 2017-02-03 2018-08-10 福特全球技术公司 一种用于评估自主车辆的内部的系统和方法
CN108388837B (zh) * 2017-02-03 2023-07-04 福特全球技术公司 一种用于评估自主车辆的内部的系统和方法
CN109278556A (zh) * 2018-11-19 2019-01-29 深圳和而泰智能控制股份有限公司 汽车安全装置
CN113671516A (zh) * 2021-08-05 2021-11-19 湖南大学 一种车灯测距装置及其方法
CN113671516B (zh) * 2021-08-05 2023-07-25 湖南大学 一种车灯测距装置及其方法

Also Published As

Publication number Publication date
KR20130025665A (ko) 2013-03-12
CN102975719B (zh) 2017-05-17
KR101251836B1 (ko) 2013-04-09
JP2013054717A (ja) 2013-03-21
US20130057668A1 (en) 2013-03-07
DE102012200096A1 (de) 2013-03-07

Similar Documents

Publication Publication Date Title
CN102975719A (zh) 使用红外线传感器检测驾驶者状况的装置和方法
US9760784B2 (en) Device, method and program for measuring number of passengers
CN103568947B (zh) 后侧方警报系统及方法
US9273971B2 (en) Apparatus and method for detecting traffic lane using wireless communication
US10824887B2 (en) Passenger counting device, system, method and program
CN109094669A (zh) 用于评估铰接角度的方法和设备
WO2020022042A1 (ja) 劣化診断装置、劣化診断システム、劣化診断方法、プログラムを記憶する記憶媒体
CN107766846A (zh) 车辆识别方法和装置、检查系统、存储介质、电子设备
US10395105B2 (en) Vehicle imaging system, vehicle imaging method and device, program, and recording medium
CN109383519B (zh) 信息处理方法、信息处理系统和记录介质
JP2018155753A (ja) 車載型排ガス分析装置、排ガス分析システム、情報処理装置、排ガス分析システム用プログラム、及び排ガス分析方法
WO2008097015A1 (en) A perceive system of harmful-gas emitting vehicles and method thereby
US20220165092A1 (en) Accident detection device and accident detection method
JP2008299787A (ja) 車両検知装置
KR101311112B1 (ko) 차량 사고 판단 장치 및 그 방법
JP2019031264A (ja) 情報処理方法、情報処理システム、および、プログラム
CN113419075B (zh) 基于双目视觉的船舶测速方法、系统、装置和介质
KR20200045697A (ko) 통학버스 아동 안전 관리 시스템
CN105857183A (zh) 一种公交车车载倒车监视装置
JP2009274480A (ja) 顔向き検知装置及び顔向き検知方法
CN114754872A (zh) 车载人体测温系统和控制方法
JP2024020838A (ja) 表示制御装置
CN115454101A (zh) 用于探测非直视区域内的前方车辆的方法和系统
CN116039666A (zh) 一种自动驾驶车载传感器偏移诊断方法及装置
CN115366795A (zh) 车辆控制方法、控制器、装置及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant