CN112477858A - 驾驶员辅助设备及其方法 - Google Patents

驾驶员辅助设备及其方法 Download PDF

Info

Publication number
CN112477858A
CN112477858A CN202010953313.4A CN202010953313A CN112477858A CN 112477858 A CN112477858 A CN 112477858A CN 202010953313 A CN202010953313 A CN 202010953313A CN 112477858 A CN112477858 A CN 112477858A
Authority
CN
China
Prior art keywords
driver
vehicle
gaze
control
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010953313.4A
Other languages
English (en)
Inventor
李珉菜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Halla Creedong Electronics Co ltd
Original Assignee
Mando Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mando Corp filed Critical Mando Corp
Publication of CN112477858A publication Critical patent/CN112477858A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10—Path keeping
    • B60W30/12—Lane keeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D15/00—Steering not otherwise provided for
    • B62D15/02—Steering position indicators ; Steering position determination; Steering aids
    • B62D15/025—Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D15/00—Steering not otherwise provided for
    • B62D15/02—Steering position indicators ; Steering position determination; Steering aids
    • B62D15/025—Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
    • B62D15/026—Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation combined with automatic distance control, i.e. electronic tow bar
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00—Brake-action initiating means
    • B60T7/12—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00—Brake-action initiating means
    • B60T7/12—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/22—Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger initiated by contact of vehicle, e.g. bumper, with an external object, e.g. another vehicle, or by means of contactless obstacle detectors mounted on the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18—Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20—Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08—Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09—Taking automatic action to avoid collision, e.g. braking and steering
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18—Propelling the vehicle
    • B60W30/18009—Propelling the vehicle related to particular drive situations
    • B60W30/181—Preparing for stopping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09—Driving style or behaviour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/004—Arrangements for holding or mounting articles, not otherwise provided for characterised by position outside the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00—Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/02—Active or adaptive cruise control system; Distance control
    • B60T2201/022—Collision avoidance systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2210/00—Detection or estimation of road or environment conditions; Detection or estimation of road shapes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60T—VEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2220/00—Monitoring, detecting driver behaviour; Signalling thereof; Counteracting thereof
    • B60T2220/02—Driver type; Driving style; Driver adaptive features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/04—Vehicle stop
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00—Input parameters relating to overall vehicle dynamics
    • B60W2520/06—Direction of travel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00—Purposes or special features of road vehicle drive control systems
    • B60Y2300/18—Propelling the vehicle
    • B60Y2300/18008—Propelling the vehicle related to particular drive situations
    • B60Y2300/18091—Preparing for stopping

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

驾驶员辅助设备及其方法。一种驾驶员辅助设备包括：外部摄像头，所述外部摄像头布置在车辆上以便具有所述车辆的外部视野，所述外部摄像头构造成获得所述车辆的所述外部视野的图像数据；内部摄像头，所述内部摄像头布置在所述车辆的内部以便抓取在所述车辆上的驾驶员的目光，所述内部摄像头构造成获得所述驾驶员的目光数据；以及控制器，所述控制器包括构造成处理所述图像数据和所述目光数据的至少一个处理器。所述控制器可以构造成基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变。

Description

驾驶员辅助设备及其方法
技术领域
本公开涉及一种驾驶员辅助设备，更具体地说，涉及能够反映驾驶员注意力状况的驾驶员辅助设备。
背景技术
现有的先进驾驶辅助系统(ADAS)根据车辆外部的车道信息和车辆外部的物体信息进行控制。例如，车道保持辅助系统(LKAS)基于从车辆外部的图像获得的物体信息和车道信息进行控制，以保持车道。此外，自动紧急制动系统基于车辆外部的物体信息和驾驶员的车辆运动信息防止碰撞。
但是，因为现有的ADAS没有考虑驾驶员的状况，所以除了在典型情况下之外，不足以防止事故的发生。
发明内容
本公开的一个方面是提供一种反映驾驶员状况的驾驶员辅助设备，并且提供一种控制驾驶员辅助设备的方法。
公开的其他方面将在下面的描述中部分地阐述，并且部分地从描述中显而易见，或者可以根据公开的实践来了解。
根据本公开的一个方面，一种驾驶员辅助设备包括：外部摄像头，所述外部摄像头布置在车辆上以便具有所述车辆的外部视野，所述外部摄像头构造成获得所述车辆的所述外部视野的图像数据；内部摄像头，所述内部摄像头布置在所述车辆的内部以便抓取在所述车辆上的驾驶员的目光，所述内部摄像头构造成获得所述驾驶员的目光数据；以及控制器，所述控制器包括构造成处理所述图像数据和所述目光数据的至少一个处理器。所述控制器可以构造成基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变。
当所述驾驶员的目光不在前方时，所述控制器可以构造成确定所述驾驶员处于所述疏忽状况，并将所述转向装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
当所述驾驶员的目光不在前方时，所述控制器可以构造成确定所述驾驶员处于所述疏忽状况，并且将所述横向距离极限值改变为比现有横向距离极限值小的值。
当从所述车辆的外部检测到的物体存在于所述驾驶员的目光区域内时，所述控制器可以构造成确定所述驾驶员不处于所述疏忽状况，并且不干预所述转向装置的控制。
当从所述车辆的外部检测到的物体不存在于所述驾驶员的目光区域内时，所述控制器可以构造成确定所述驾驶员处于所述疏忽状况。
所述内部摄像头可以构造成基于所述驾驶员的面部方向和所述驾驶员的瞳孔方向来获得所述驾驶员的目光数据。
所述驾驶员辅助设备还可以包括转向装置，所述转向装置构造成改变所述车辆的行驶方向。所述转向装置可以构造成根据由所述控制器改变的控制信号来改变所述车辆的行驶方向。
所述驾驶员辅助设备还可以包括制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止。当所述驾驶员的目光不在前方时，所述控制器可以构造成确定所述驾驶员处于所述疏忽状况，并将所述制动装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
所述驾驶员辅助设备还可以包括制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止。当所述驾驶员的目光不在前方时，所述控制器可以构造成确定所述驾驶员处于所述疏忽状况，并将所述制动装置的制动扭矩量控制成高于现有的制动扭矩量。
根据本公开的另一方面，一种控制驾驶员辅助设备的方法包括：由外部摄像头获得车辆的外部视野的图像数据；由内部摄像头获得在所述车辆上的驾驶员的目光数据，以抓取所述驾驶员的目光；以及由控制器基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变。
所述控制可以包括：当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述转向装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
所述控制可以包括：当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并且将所述横向距离极限值改变为比现有横向距离极限值小的值。
所述控制可以包括：当从所述车辆的外部检测到的物体存在于所述驾驶员的目光区域内时，确定所述驾驶员不处于所述疏忽状况，并且不干预所述转向装置的控制。
所述控制可以包括：当从所述车辆的外部检测到的物体不存在于所述驾驶员的目光区域内时，确定所述驾驶员处于所述疏忽状况。
所述目光数据可以包括关于所述驾驶员的面部方向和所述驾驶员的瞳孔方向的信息。
所述方法还可以包括转向装置，所述转向装置构造成改变所述车辆的行驶方向。所述控制可以包括：根据改变后的控制信号控制所述转向装置以改变所述车辆的行驶方向。
所述方法还可以包括制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止。所述控制可以包括：当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述制动装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
所述方法还可以包括制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止。所述控制可以包括：当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述制动装置的制动扭矩量控制成高于现有的制动扭矩量。
根据本公开的另一方面，一种包含由处理器执行的程序指令的非暂时计算机可读介质，该计算机可读介质包括：借助外部摄像头获得关于车辆的外部视野的图像数据的程序指令；借助内部摄像头获得在所述车辆上的驾驶员的目光数据以抓取所述驾驶员的目光的程序指令；以及借助控制器基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变的程序指令。
附图说明
根据实施方式的结合附图的以下描述，本公开的这些和/或其他方面将变得明显和更容易理解，在附图中：
图1是示出根据一个实施方式的车辆的部件的框图；
图2是示出根据一个实施方式的驾驶辅助系统的框图；
图3是示出根据一个实施方式的车辆控制方法的流程图；
图4是示出根据另一实施方式的车辆控制方法的流程图；
图5和图6是用于描述横向位置误差的计算的视图；
图7是示出改变制动装置的控制的实施例的视图。
具体实施方式
在整个说明书中，相同附图标记指代相同的元件。并非将要描述公开的实施方式的所有元件，并且将省略对现有技术中通常已知的内容或在示例性实施方式中相互重叠的内容的描述。
将进一步理解，术语“连接”及其派生词指的是直接连接和间接连接两者，并且间接连接包括通过无线通信网络的连接。
术语“包括”和“包含”是包容性的或开放式的，并且不排除另外的、未提及的元件或方法步骤，除非另有说明。将进一步理解，术语“构件”及其派生词既指一个构件与另一个构件接触的情况，也指另一个构件存在于两个构件之间的情况。
要理解的是，除非上下文明确另有规定，否则单数形式包括复数含义。
如本文中所使用的，术语“部分”、“单元”、“块”、“构件”和“模块”指的是能够执行至少一种功能或操作的单元。这些术语可以指电气电路，并且可以指至少一个过程，该过程由诸如现场可编程门阵列(FPGA)和特定应用集成电路(ASIC)之类的至少一个硬件以及存储在存储器或处理器中的至少一个软件来执行。
用于方法步骤的附图标记仅仅是为了便于说明，而不是为了限制步骤的顺序。因此，除非上下文明确另有规定，否则书面顺序可以以其他方式实践。
下文中，将参照附图详细描述一种驾驶员辅助设备以及控制该驾驶员辅助设备的方法的实施方式。
图1是示出根据一个实施方式的车辆的部件的框图。
如图1中所示，车辆1可以包括发动机10、变速器20、制动装置30和转向装置40。发动机10可以包括至少一个气缸和至少一个活塞，并且可以产生驱动车辆1所需的动力。变速器20可以包括多个齿轮，并且可以将发动机10产生的动力传递给车辆1的车轮。制动装置30可以借助车轮上的摩擦力使车辆1减速或停止。制动装置30可以包括可操作成使车辆减速或停止的一个或多个刹车片和闸瓦。转向装置40可以改变车辆1的行驶方向。
车辆1可以包括多个电子构成元件。例如，车辆1还可以包括发动机管理系统(EMS)11、也称为变速器控制单元(TCU)的变速控制器21、也称为电子制动控制模块(EBCM)的电子制动控制器31、电子动力转向(EPS)装置41、车身控制模块(BCM)和驾驶员辅助设备100。
EMS 11可以响应于来自加速踏板的驾驶员的加速意图或来自驾驶员辅助设备100的请求信号来控制发动机10。例如，EMS 11可以控制发动机10的扭矩。
TCU 21可以响应于由换档杆激活的驾驶员的换档指令和/或车辆1的行驶速度来控制变速器20。例如，TCU 21可以调整或调节从发动机10到车辆1的车轮的换档比。
EBCM 31可以响应于来自制动踏板的驾驶员的制动意图或车轮打滑而控制制动装置30。例如，EBCM 31可以响应于在车辆1的制动模式中检测到的车轮打滑而暂时释放车轮制动，从而实施防抱死制动系统(ABS)。EBCM 31可以响应于在车辆1的转向模式中检测到的转向过度和/或转向不足而选择性地释放车轮制动，从而实施电子稳定性控制(ESC)。此外，EBCM 31可以响应于由车辆行驶检测到的车轮打滑而暂时制动车轮，从而实施牵引力控制系统(TCS)。
EPS装置41可以响应于来自方向盘的驾驶员转向意图而辅助转向装置40，从而EPS装置41可以辅助驾驶员轻松地操纵方向盘。例如，EPS装置41可以辅助方向盘40，使得在车辆1的低速行驶模式或泊车模式下转向力减小而在车辆1的高速行驶模式下转向力增大。
车身控制模块51可以控制能够为驾驶员提供用户便利或保证驾驶员安全的各种电子部件。例如，车身控制模块51可以控制大灯(前灯)、雨刷器、仪表或其他仪表板、多功能开关、转向灯指示器或类似装置。
驾驶员辅助设备100可以辅助驾驶员轻松地操纵(例如，驾驶、制动和转向)车辆1。例如，驾驶员辅助设备100可以检测车辆1(即，车辆本身)的周边环境(例如，周边车辆、行人、骑自行车者、车道、交通标志等)，并且可以响应于检测到的周边环境进行车辆1的驾驶、制动和/或转向。
驾驶员辅助设备100可以为驾驶员提供各种功能。例如，驾驶员辅助设备100可以为驾驶员提供车道偏离警告(LDW)功能、车道保持辅助(LKA)功能、远光灯辅助(HBA)功能、自主紧急制动(AEB)功能、交通标志识别(TSR)功能、智能巡航控制(SCC)功能、盲点检测(BSD)功能等。
驾驶员辅助设备100可以包括：摄像头模块101，其操作成获得车辆1的周边区域(例如，车辆1的外部和周围区域)的图像数据；以及雷达模块102，其操作成获得关于存在于车辆1的周边区域中的周边物体的数据。
摄像头模块101可以包括一个摄像头101a或多个摄像头以及电子控制单元(ECU)控制器101b。摄像头101a可以捕捉包括车辆1的前进区域(例如，车辆1前方的区域)的图像，并且可以包括图像处理器，该图像处理器操作成处理捕捉的图像以识别捕捉图像中的周边车辆、行人、骑自行车者、车道、交通标志等。
雷达模块102可以包括一个雷达102a或多个雷达以及电子控制单元(ECU)控制器102b，并且可以基于感测到的雷达数据获得或确定车辆1的周边物体(例如，周边车辆、行人或骑自行车者)的相对位置、相对速度等。
上述电子部件可以借助车辆通信网络(NT)相互通信。例如，电子部件可以借助以太网、面向媒体的系统传输(MOST)、FlexRay、控制器区域网(CAN)、本地互连网(LIN)等进行数据通信。例如，驾驶员辅助设备100可以经由车辆通信网络(NT)分别向EMS 11、EBCM 31和EPS装置41传送驱动控制信号、制动信号和转向信号。
图2是示出根据一个实施方式的驾驶辅助系统的框图。
车辆1可以包括：外部摄像头100，其用于获得车辆1的外部视野并捕捉该外部视野中的物体和道路；内部摄像头200，其用于获得驾驶员的目光数据；车辆信息获得器300，其用于获得车辆1的状态；控制器400；制动装置30；转向装置40；以及警告器500。
外部摄像头100可以包括面向车辆1的前进区域的视野(FOV)110a。外部摄像头100可以安装在车辆1的挡风玻璃处。
外部摄像头100可以捕捉车辆1的前进区域的图像，并且可以获得车辆1的前视图像的数据。车辆1的前视图像数据可以包括关于位于车辆1的前进区域中的周边车辆、行人、骑自行车者或车道的位置的信息。
外部摄像头100可以包括多个镜头和多个图像传感器。每个图像传感器均可以包括多个光电二极管以将光转换成电信号，并且光电二极管可以排列成二维(2D)矩阵。
外部摄像头100可以电联接至处理器或控制器140。例如，外部摄像头100可以借助车辆通信网络(NT)、硬线或印刷电路板(PCB)连接至控制器140。
外部摄像头100可以将车辆1的前视图像数据传送至控制器140。
内部摄像头200可以是安装在车辆1内部的摄像头，以捕捉驾驶员的面部。因此，内部摄像头200可以通过捕捉驾驶员的面部来获得目光数据。内部摄像头200可以包括能够通过获得驾驶员的面部图像来提供用于图像处理的数据的各种捕捉装置。此外，内部摄像头200可以是红外(IR)摄像头，以便即使在夜间驾驶时也能准确地获得驾驶员的面部图像。内部摄像头200可以安装在车辆1内部的各种位置，但为了便于抓取驾驶员的目光，可以安装在具有驾驶员座椅和乘客座椅的单排空间(如仪表板和中央仪表板)中。
内部摄像头200可以将车辆1内的驾驶员目光数据传送给控制器400。
车辆信息获得器300可以包括能够获得与车辆1的速度或姿势有关的信息的各种传感器中的至少一个。车辆信息获得器300可以包括：用于检测车辆1的速度的车辆速度传感器；用于检测车辆1的加速度的加速度传感器；以及用于检测车辆1的角速度的角速度传感器。
车辆速度传感器可以实施成检测车轮速度的车轮速度传感器，并且车轮速度传感器可以包括检测车辆1的前车轮和后车轮中的至少一者的速度的车轮速度传感器。
加速度传感器可以包括：纵向加速度传感器，其输出车辆1的高度方向上的加速度(即Z轴方向上的加速度)；以及横向加速度传感器，其输出车辆1的横向方向上的加速度(即Y轴方向上的加速度)。
纵向加速度传感器和横向加速度传感器可以实施成分开的传感器模块，或者可以实施成一个传感器模块。角速度传感器可以是测量车辆1的姿态的传感器，并且也可以称为陀螺仪传感器。角速度传感器可以包括：滚动速率传感器，其检测车辆1在滚动方向上的旋转角速度；以及横摆率传感器，其检测车辆1在横摆方向上的旋转角速度。滚动速率传感器和横摆率传感器同样可以实施成分开的传感器模块，或者可以实施成一个传感器模块。
制动系统32可以包括EBCM 31(参见图1)和制动装置30(参见图1)。转向系统42可以包括EPS装置41(参见图1)和转向装置40(参见图1)。
制动装置30可以连接至参照图1描述的EBCM 31(参见图1)，并且转向装置40可以连接至参照图1描述的EPS装置41(参见图1)。
警告器500可以在根据控制器400的控制进行操作时，通知驾驶员开始控制操作。警告器500可以通过刺激驾驶员的视觉、听觉和触觉中的至少一者来通知驾驶员碰撞风险。
例如，警告器500可以借助设置在车辆1中的人机界面(HMI)向驾驶员提供显示和警告声音，也可以借助从设置在车辆1中的触觉模块产生的振动向驾驶员提供预警告信号或警告信号。
控制器400可以包括处理器410和存储器420。
处理器410可以处理外部摄像头100的图像数据和内部摄像头200的目光数据，并且可以产生控制制动装置30的制动信号和控制转向装置40的转向信号。
处理器410可以基于每个在前物体的位置信息(距离)和速度信息(相对速度)计算出车辆1与在前物体之间的碰撞时间(TTC)，可以将计算出的TTC与预定的参考时间进行比较，并可以警告驾驶员与在前物体发生碰撞的高度可能性，或者可以将制动信号传送给制动装置30和转向装置40。
在另一个实施例中，处理器410可以基于每个在前物体的速度信息计算碰撞距离(DTC)，并且可以根据计算出的DTC和到每个在前物体的距离之间的比较结果，警告驾驶员与在前物体发生碰撞的高度可能性，或者可以向制动装置30和转向装置40传送控制信号。
存储器420可以存储允许处理器410处理图像数据所需的程序和/或数据，可以存储处理器410处理雷达数据所需的程序和/或数据，并且可以存储处理器410产生制动信号和/或转向信号所需的程序和/或数据。
存储器420可以临时存储从外部摄像头100接收的图像数据和/或从内部摄像头200接收的目光数据，还可以临时存储处理器410处理的图像数据和/或目光数据的处理结果。
存储器420不仅可以包括易失性存储器，例如静态随机存取存储器(SRAM)或动态随机存取存储器(DRAM)，还可以包括非易失性存储器，例如闪存、只读存储器(ROM)或可擦除可编程只读存储器(EPROM)。
下面，将参照图3和图4详细描述由上述车辆1的部件进行的控制方法。
图3是示出根据一个实施方式的车辆控制方法的流程图。
控制器400可以控制外部摄像头100以捕捉车辆1的外部视野，并且可以控制内部摄像头200以监测车辆1内的驾驶员的目光(301)。然后，控制器400可以接收在操作301中获得的图像数据和目光数据。在此，内部摄像头200可以基于驾驶员的面部方向和驾驶员的瞳孔方向来获得驾驶员的目光数据。
控制器400基于图像数据分析确定车辆1是否存在车道偏离的风险(302)。作为确定结果，当没有车道偏离风险时，控制器400可以持续监测外部视野和驾驶员的目光。
当存在车道偏离风险时，控制器400可以确定驾驶员是否处于疏忽状况(303)。在此，驾驶员的疏忽状况可以是驾驶员的目光不面向前方的情况。此外，除了上述状况之外，驾驶员的疏忽状况可以包括无法正常观察到驾驶员的状况的所有情况，例如，驾驶员的瞳孔不可见或眼睑移动与平时不同的情况。在这种情况下，控制器400可以将驾驶员的目光图像存储在存储器420中，并将驾驶员的疏忽状况与存储的图像进行比较以确定驾驶员的疏忽状况。
作为确定驾驶员是否处于疏忽状况的结果，当驾驶员的状况没有异常时，控制器400可以维持现有的控制状态，而不改变转向控制的切入点或控制基准(305)。
根据一个实施方式，当从车辆1外部检测到的物体存在于驾驶员的目光区域中时，控制器400可以确定驾驶员不是处于疏忽状况，并且可以控制转向装置40不进行干预。例如，目光区域可以是基于驾驶员的目光方向的中心的大小不变的区域。在这种情况下，目光区域可以是圆形或椭圆形的各种虚拟区域。目光区域的大小可以根据设置的各种尺寸。
根据另一实施方式，当从车辆1外部检测到的物体不存在于驾驶员的目光区域内时，控制器400可以确定驾驶员处于疏忽状况。
当驾驶员处于疏忽状况时，控制器400可以进行控制以将转向装置40的控制定时提前(304)，并可以控制转向装置40的转向控制以提前的控制定时进行(306)。此时，控制器400可以控制成改变转向装置40的控制定时，并控制成除控制定时以外还改变用于操作转向装置40的横向距离极限值。将参照图4详细描述相关描述。
根据本实施方式，当驾驶员的目光不在前方时，控制器400可以确定驾驶员处于疏忽状况，并可以将转向装置40的控制定时控制成与现有控制定时相比提前一段预设时间。此时，可以根据设定改变控制定时。转向装置40可以通过由控制器400改变的控制信号改变车辆1的行驶方向。此时，针对预设时间而不是转向装置40的现有控制切入点产生控制信号，从而使车辆1不偏离车道。
图4是示出根据另一实施方式的车辆控制方法的流程图。上述控制方法可以反映驾驶员的状况，并通过将转向装置40的控制定时提前来防止车辆1偏离车道。根据图4的控制方法可以反映驾驶员的状况，但当驾驶员处于疏忽状况时，放宽转向装置40的操作标准，以防止车辆1提前离开车道。
控制器400可以控制外部摄像头100捕捉车辆1的外部视野，并且可以控制内部摄像头200监测车辆1内部的驾驶员的目光(401)。然后，控制器400可以接收操作401中获得的图像数据和目光数据。这里，内部摄像头200可以基于驾驶员的面部方向和驾驶员的瞳孔方向获得驾驶员的目光数据。
控制器400基于图像数据分析确定车辆1是否具有车道偏离的风险(402)。作为确定结果，当没有车道偏离风险时，控制器400可以持续监测外部视野和驾驶员的目光。
当存在车道偏离风险时，控制器400可以确定驾驶员是否处于疏忽状况(403)。在此，驾驶员的疏忽状况可以是驾驶员的目光不面向前方的情况。此外，除了上述状况之外，驾驶员的疏忽状况可以包括无法正常观察到驾驶员的状况的所有情况，例如，驾驶员的瞳孔不可见或眼睑移动与平时不同的情况。在这种情况下，控制器400可以将驾驶员的目光图像存储在存储器420中，并将驾驶员的疏忽状况与存储的图像进行比较以确定驾驶员的疏忽状况。
作为确定驾驶员是否处于疏忽状况的结果，当驾驶员的状况没有异常时，控制器400可以维持现有的控制状态，而不改变转向控制的横向距离极限值(408)。这里，横向距离极限值是与横向位置误差相比的参考值，横向位置误差是车辆1的中心点与车道中心之间的距离，并且当横向位置误差超过横向距离极限值时，控制器300可以进行转向控制。并且，当横向位置误差小于横向距离极限值时，控制器300可以不进行转向控制。将参照图5和图6描述计算横向位置误差的方法。
当驾驶员处于疏忽状况时，控制器400可以将先前设定的横向距离极限值改变为较小的值(404)。因此，因为控制器400即使在车辆1与车道中心的偏离度低于现有的偏离度时也进行转向控制，所以能够防止突然偏离车道。
当横向距离极限值改变时，控制器400可以计算当前的横向位置误差(405)。当横向位置误差大于改变后的横向距离极限值(406)时，控制器400可以进行转向控制，使车辆1的中心与车道中心重合(407)。
根据本实施方式，当驾驶员的目光不在前方时，控制器400可以确定驾驶员处于疏忽状况，并可以将横向距离极限值改变为小于现有横向距离极限值的值。
以上参照图3和图4描述的每一种控制方法均可以相互独立进行，也可以同时进行。
同时，在图4中，已经描述了基于横向位置误差的控制方法。下文中，将参照图5和图6来描述上述实施方式中提到的横向位置误差的计算方法。
如图5中所示，假设车辆1在车道间行驶，并基于车辆1的中心设定虚拟坐标系。此时，基于矩形坐标系，e表示假设车辆1静止的横向位置，ψ表示车辆1与车道之间的角度，并且γ表示车道的曲率，
Figure BDA0002677769210000111
表示车道曲率的变化率。
参照图6和下面的等式1，当车辆1行驶时，车辆1的横向位置误差可以按以下方式计算。
等式1
Figure BDA0002677769210000112
特别地，横向位置误差(ela)对应于基于正被驱动的车辆1的未来轨迹对应的车道中心的距离误差。此外，预设前方距离(dla)表示车辆1在获得横向位置误差的时间点(位置)的前进距离。
如图4中所述，通过将计算出的横向位置误差与现有的横向距离极限值或改变后的极限值进行比较，进行转向控制。
图7是示出改变制动装置的控制的实施例的视图。
如上所述，本公开可以通过抓取驾驶员的注意力状况来进行转向控制。此外，根据本公开，能够通过抓取驾驶员的注意状况来进行制动控制。
驾驶员辅助设备100还可以包括用于使车辆1减速或使车辆1停止的制动装置30。在此，当驾驶员的目光不在前方时，控制器400可以确定驾驶员处于疏忽状况，并且可以将制动装置30的控制定时控制成比现有的控制定时提前一段预设时间。例如，如图7中所示，当驾驶员试图在十字路口右转时，为了准备应对由于驾驶员只注视从左侧驶来的其他车辆2而未识别右转路径上的行人的情况，控制器400可以在比现有的制动控制定时机提前的时间点进行制动控制。
此外，根据该实施方式，除了将制动装置30的控制定时提前外，控制器400还可以将制动装置30的制动扭矩量控制成高于现有的制动扭矩量。
根据所公开的实施方式，因为反映了驾驶员的注意力状况，所以能够防止在异常情况下的车道偏离和碰撞。
所公开的实施方式可以以存储可由处理器执行的计算机可执行指令的记录介质的形式实施。该指令可以以程序代码的形式存储，并且当由处理器被执行时，该指令可以生成程序模块以进行所公开的实施方式的操作。记录介质可以非暂时性地实现成计算机可读记录介质。
非暂时性计算机可读记录介质可以包括存储能由计算机解译的命令的各种记录介质。例如，非暂时性计算机可读记录介质可以是例如ROM、RAM、磁带、磁盘、闪存、光学数据存储装置等。
到目前为止，已经参照附图描述了本公开的实施方式。对于本领域的普通技术人员来说显而易见的是，在不改变本公开的技术思想或基本特征的情况下，本公开可以以上述实施方式以外的其他形式来实施。上述实施方式仅是举例说明，而不应以限制意义进行解释。
相关申请的交叉参考
本申请要求2019年9月11日在韩国知识产权局提交的第10-2019-0112681号韩国专利申请的优先权，该申请的公开内容通过引用被全部并入于此。

Claims (20)

1.一种驾驶员辅助设备，所述驾驶员辅助设备包括：
外部摄像头，所述外部摄像头布置在车辆上以便具有所述车辆的外部视野，所述外部摄像头构造成获得所述车辆的所述外部视野的图像数据；
内部摄像头，所述内部摄像头布置在所述车辆的内部以便抓取在所述车辆上的驾驶员的目光，所述内部摄像头构造成获得所述驾驶员的目光数据；以及
控制器，所述控制器包括构造成处理所述图像数据和所述目光数据的至少一个处理器，
其中，所述控制器构造成基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变。
2.根据权利要求1所述的驾驶员辅助设备，其中，当所述驾驶员的目光不在前方时，所述控制器构造成确定所述驾驶员处于所述疏忽状况，并将所述转向装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
3.根据权利要求1所述的驾驶员辅助设备，其中，当所述驾驶员的目光不在前方时，所述控制器构造成确定所述驾驶员处于所述疏忽状况，并且将所述横向距离极限值改变为比现有横向距离极限值小的值。
4.根据权利要求1所述的驾驶员辅助设备，其中，当从所述车辆的外部检测到的物体存在于所述驾驶员的目光区域内时，所述控制器构造成确定所述驾驶员不处于所述疏忽状况，并且不干预所述转向装置的控制。
5.根据权利要求1所述的驾驶员辅助设备，其中，当从所述车辆的外部检测到的物体不存在于所述驾驶员的目光区域内时，所述控制器构造成确定所述驾驶员处于所述疏忽状况。
6.根据权利要求1所述的驾驶员辅助设备，其中，所述内部摄像头构造成基于所述驾驶员的面部方向和所述驾驶员的瞳孔方向来获得所述驾驶员的目光数据。
7.根据权利要求1所述的驾驶员辅助设备，所述驾驶员辅助设备还包括：
转向装置，所述转向装置构造成改变所述车辆的行驶方向，
其中，所述转向装置构造成根据由所述控制器改变的控制信号来改变所述车辆的行驶方向。
8.根据权利要求1所述的驾驶员辅助设备，所述驾驶员辅助设备还包括：
制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止，
其中，当所述驾驶员的目光不在前方时，所述控制器构造成确定所述驾驶员处于所述疏忽状况，并将所述制动装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
9.根据权利要求1所述的驾驶员辅助设备，所述驾驶员辅助设备还包括：
制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止，
其中，当所述驾驶员的目光不在前方时，所述控制器构造成确定所述驾驶员处于所述疏忽状况，并将所述制动装置的制动扭矩量控制成高于现有的制动扭矩量。
10.一种控制驾驶员辅助设备的方法，该方法包括：
由外部摄像头获得车辆的外部视野的图像数据；
由内部摄像头获得在所述车辆上的驾驶员的目光数据，以抓取所述驾驶员的目光；以及
由控制器基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变。
11.根据权利要求10所述的方法，其中，所述控制包括：
当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述转向装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
12.根据权利要求10所述的方法，其中，所述控制包括：
当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并且将所述横向距离极限值改变为比现有横向距离极限值小的值。
13.根据权利要求10所述的方法，其中，所述控制包括：
当从所述车辆的外部检测到的物体存在于所述驾驶员的目光区域内时，确定所述驾驶员不处于所述疏忽状况，并且不干预所述转向装置的控制。
14.根据权利要求10所述的方法，其中，所述控制包括：
当从所述车辆的外部检测到的物体不存在于所述驾驶员的目光区域内时，确定所述驾驶员处于所述疏忽状况。
15.根据权利要求10所述的方法，其中，所述目光数据包括关于所述驾驶员的面部方向和所述驾驶员的瞳孔方向的信息。
16.根据权利要求10所述的方法，该方法还包括：
转向装置，所述转向装置构造成改变所述车辆的行驶方向，
其中，所述控制包括：
根据改变后的控制信号控制所述转向装置以改变所述车辆的行驶方向。
17.根据权利要求10所述的方法，该方法还包括：
制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止，
其中，所述控制包括：
当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述制动装置的所述控制定时控制成与现有的控制定时相比提前一段预设时间。
18.根据权利要求10所述的方法，该方法还包括：
制动装置，所述制动装置构造成使所述车辆减速或使所述车辆停止，
其中，所述控制包括：
当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述制动装置的制动扭矩量控制成高于现有的制动扭矩量。
19.一种包含由处理器执行的程序指令的非暂时计算机可读介质，所述计算机可读介质包括：
借助外部摄像头获得关于车辆的外部视野的图像数据的程序指令；
借助内部摄像头获得在所述车辆上的驾驶员的目光数据以抓取所述驾驶员的目光的程序指令；以及
借助控制器基于所述目光数据抓取所述驾驶员的目光，并基于对所述驾驶员处于疏忽状况的确定，将转向装置的控制定时和用于操作所述转向装置的横向距离极限值中的至少一者控制成被改变的程序指令。
20.根据权利要求19所述的计算机可读介质，其中，所述控制包括：
当所述驾驶员的目光不在前方时，确定所述驾驶员处于所述疏忽状况，并将所述横向距离极限值改变为比现有横向距离极限值小的值。
CN202010953313.4A 2019-09-11 2020-09-11 驾驶员辅助设备及其方法 Pending CN112477858A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190112681A KR102658769B1 (ko) 2019-09-11 2019-09-11 운전자 보조 장치 및 그 제어 방법
KR10-2019-0112681 2019-09-11

Publications (1)

Publication Number Publication Date
CN112477858A true CN112477858A (zh) 2021-03-12

Family

ID=74644328

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010953313.4A Pending CN112477858A (zh) 2019-09-11 2020-09-11 驾驶员辅助设备及其方法

Country Status (4)

Country Link
US (1) US11560176B2 (zh)
KR (1) KR102658769B1 (zh)
CN (1) CN112477858A (zh)
DE (1) DE102020123658B4 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220000536A (ko) * 2020-06-26 2022-01-04 현대자동차주식회사 차량 주행 제어 장치 및 방법
CN114162130B (zh) * 2021-10-26 2023-06-20 东风柳州汽车有限公司 驾驶辅助模式切换方法、装置、设备及存储介质
WO2023244513A1 (en) * 2022-06-16 2023-12-21 Samsara Inc. Data privacy in driver monitoring system

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8604932B2 (en) * 1992-05-05 2013-12-10 American Vehicular Sciences, LLC Driver fatigue monitoring system and method
US7788008B2 (en) * 1995-06-07 2010-08-31 Automotive Technologies International, Inc. Eye monitoring system and method for vehicular occupants
US6496117B2 (en) * 2001-03-30 2002-12-17 Koninklijke Philips Electronics N.V. System for monitoring a driver's attention to driving
US6989754B2 (en) * 2003-06-02 2006-01-24 Delphi Technologies, Inc. Target awareness determination system and method
JP4841425B2 (ja) * 2003-06-06 2011-12-21 ボルボ テクノロジー コーポレイション 運転者の行動解釈に基づいて自動車のサブシステムを制御する方法および機構
DE102009022055A1 (de) 2009-05-20 2010-11-25 Audi Ag Kraftfahrzeug mit einem Fahrerassistenzsystem zur Querführung des Kraftfahrzeugs und Verfahren zur Unterstützung eines Fahrers eines Kraftfahrzeugs beim Halten einer Fahrspur
DE102010013243A1 (de) 2010-03-29 2011-09-29 Audi Ag Verfahren zur Ermittlung von auf die Blickrichtung eines Fahrers und die Position der Hände des Fahrers bezüglich des Lenkrads bezogenen Informationen in einem Kraftfahrzeug und Kraftfahrzeug
US8698639B2 (en) 2011-02-18 2014-04-15 Honda Motor Co., Ltd. System and method for responding to driver behavior
US9405982B2 (en) * 2013-01-18 2016-08-02 GM Global Technology Operations LLC Driver gaze detection system
DE102013016488B4 (de) 2013-10-02 2017-09-07 Audi Ag Kraftfahrzeug und Verfahren zur Steuerung eines Kraft-fahrzeugs
JP6241235B2 (ja) * 2013-12-04 2017-12-06 三菱電機株式会社 車両用運転支援装置
DE102015206200A1 (de) 2015-04-08 2016-10-13 Robert Bosch Gmbh Verfahren und Vorrichtung zur Aufmerksamkeitserkennung eines Fahrzeugführers
KR20170068936A (ko) * 2015-12-10 2017-06-20 현대모비스 주식회사 운전자 시선 기반 영상 출력 및 차량 컨트롤 결정 방법
KR20190112681A (ko) 2019-09-16 2019-10-07 엘지전자 주식회사 차량 공조 제어 장치 및 방법

Also Published As

Publication number Publication date
KR102658769B1 (ko) 2024-04-18
US11560176B2 (en) 2023-01-24
DE102020123658B4 (de) 2023-11-09
DE102020123658A1 (de) 2021-03-11
KR20210031128A (ko) 2021-03-19
US20210070359A1 (en) 2021-03-11

Similar Documents

Publication Publication Date Title
US20190283757A1 (en) Vehicle control apparatus, vehicle, vehicle control method, and storage medium
US20200148226A1 (en) Driver assistance apparatus, method of controlling the same, and driver assistance system
US11511731B2 (en) Vehicle and method of controlling the same
US11560176B2 (en) Driver assistance apparatus and method thereof
US11427166B2 (en) Adaptive AEB system considering steerable path and control method thereof
US20050012602A1 (en) Method and device for preventing collision of vehicles
KR102440255B1 (ko) 운전자 보조 시스템 및 그 제어 방법
US11518373B2 (en) Vehicle and control method thereof
KR101552017B1 (ko) 성능이 개선된 운전보조시스템 및 그 제어방법
KR20200115827A (ko) 운전자 보조 시스템 및 그 제어 방법
KR20210084713A (ko) 운전자 보조 시스템 및 운전자 보조 방법
KR20210123626A (ko) 운전자 보조 시스템
KR20210130297A (ko) 운전자 보조 시스템
US20200391591A1 (en) Vehicle and control method thereof
KR20210133330A (ko) 운전자 보조 시스템 및 운전자 보조 방법
US20220242485A1 (en) Driver assistance system and control method for the same
CN115871655A (zh) 车辆及其控制方法
KR20210152144A (ko) 운전자 보조 장치 및 운전자 보조 방법
US20220396266A1 (en) Driver assistance system and method of controlling the same
KR102673387B1 (ko) 운전자 보조 시스템 및 그 제어 방법
US20220410879A1 (en) Vehicle and control method thereof
KR101511859B1 (ko) 차선 인식이 향상된 운전보조시스템 및 그 제어방법
US20240101122A1 (en) Driver pre-abnormal detection apparatus, circuit and computer program therefor
KR102673147B1 (ko) 운전자 보조 시스템 및 그 제어방법
EP3848724A1 (en) System and method for rear crash avoidance of vehicles

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20211201

Address after: Gyeonggi Do, South Korea

Applicant after: Wandu Mobile System Co.,Ltd.

Address before: Gyeonggi Do, South Korea

Applicant before: MANDO Corp.

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20221009

Address after: Inchon, Korea

Applicant after: Halla Creedong Electronics Co.,Ltd.

Address before: Gyeonggi Do, South Korea

Applicant before: Wandu Mobile System Co.,Ltd.