CN112867663B - 在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法和装置 - Google Patents

在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法和装置 Download PDF

Info

Publication number
CN112867663B
CN112867663B CN201980068355.5A CN201980068355A CN112867663B CN 112867663 B CN112867663 B CN 112867663B CN 201980068355 A CN201980068355 A CN 201980068355A CN 112867663 B CN112867663 B CN 112867663B
Authority
CN
China
Prior art keywords
driver
motor vehicle
rear view
driving assistance
digital
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980068355.5A
Other languages
English (en)
Other versions
CN112867663A (zh
Inventor
L·法因戈尔德
J·C·里亚特
D·弗里娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
PSA Automobiles SA
Original Assignee
PSA Automobiles SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by PSA Automobiles SA filed Critical PSA Automobiles SA
Publication of CN112867663A publication Critical patent/CN112867663A/zh
Application granted granted Critical
Publication of CN112867663B publication Critical patent/CN112867663B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/168Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/25Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the sides of the vehicle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/168Evaluating attention deficit, hyperactivity
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893Cars
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/634Warning indications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20Workers
    • A61B2503/22Motor vehicles operators, e.g. drivers, pilots, captains
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Developmental Disabilities (AREA)
  • Hospice & Palliative Care (AREA)
  • Social Psychology (AREA)
  • Educational Technology (AREA)
  • Psychiatry (AREA)
  • Child & Adolescent Psychology (AREA)
  • Psychology (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明涉及一种用于在倒车驾驶阶段辅助驾驶机动车辆的驾驶辅助方法。所述辅助建立在对于驾驶员并不仅仅注视数字后视系统的屏这一事实的核查的基础上。因此,如果确定驾驶员的视觉注意力仅投向数字后视屏达经判定为过长的时长,所述数字后视屏显示视觉警告,所述视觉警告使所述驾驶员明白需使用其它信息源,例如直接观察或使用外后视镜。

Description

在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法和装置
技术领域
本发明大体上涉及对于机动车辆的驾驶辅助。
更具体地,本发明涉及一种用于在倒车阶段中(也就是说,在车辆的倒车操作(或后退操作)过程中)辅助驾驶机动车辆的驾驶辅助方法和装置。
背景技术
近来的一些车辆(尤其是高级车辆)具有装配有数字后视系统的版本,所述数字后视系统代替内后视镜(约定为“内部”的数字后视),或者代替外后视镜(约定为“外部”的数字后视)。对于内部数字后视,这种系统包括配置在车辆后部且优选地配置在上部的数字摄像机,以动态地获取车辆后方的外部环境的图像。车载计算机构造用于接收和处理由数字摄像机获取的图像。所述系统还包括专用的显示屏,所述显示屏配置用于基于由数字摄像机获取的图像来给车辆驾驶员重建由计算机提供的图像以及任选地与车辆后方的外部环境相关的附加信息。
该内部后视技术(已知还缩写成“内RMR”(英文“interior Rearview MirorReplacement”))旨在取代传统的内后视镜,以尤其是带来以下优点:更大的视野,该视野独立于后挡风玻璃和车身后侧板(panneaux de custode)的尺寸;良好的可见性性能,无论后挡风玻璃的清洁状况如何,甚至是在困难的使用条件下(例如在下雨的情况下);以及,保持了后部可见性,即使存在可能遮挡后挡风玻璃(如果发生这种情况)的行李以及坐在车辆后部的三名乘客。
然而,这种系统的众多优点引起了装配有这种系统的车辆的驾驶员的行为发生改变。特别是,众多驾驶员不应用用于实施倒车操作(后退操作)的道路法规倡议,所述道路法规倡议建议核查内后视镜和外后视镜,或建议驾驶员头部运动以获得直接观察等,事故可能由于不遵守这些安全条例或建议而造成。
文件DE 102015206209(对应于文件WO 2016/162207)公开了一种机动车辆的驾驶员警惕性确定装置,根据所述驾驶员警惕性确定装置,确定了表示车辆驾驶员警惕性的测量值。所描述的方法包括:检测驾驶员的目光方向,确定所述目光方向的理想频率分布,以及根据所述目光方向的理想频率分布与真实频率分布之间的偏差来确定所述测量值。当由该测量值反映出的驾驶员警惕性等级不足时,可向驾驶员传达警告信息。所述装置能够确定驾驶员是否在一定时长期间注视不同的车厢元件,计算出这些目光的频率,并且从所述频率中推导驾驶员警惕性指标。
文件US2018/0050639描述了一种同时监督驾驶员头部以及其眼睛的位置的系统,所述系统同时根据该位置和由后视野摄像机捕获的视图在屏上显示图像。
发明内容
本发明能够在倒车操作(或车辆的后退操作)期间监视驾驶员的动作,以便激励所述驾驶员并不仅仅注视数字后视系统的屏。
为此,本发明的第一方面提供了一种用于在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法,所述车辆包括:
-计算单元;
-数字后视系统,所述数字后视系统具有:至少一个第一数字摄像机,所述至少一个第一数字摄像机配置用于动态地获取车辆后方的外部环境的图像;计算机,所述计算机构造用于处理由所述第一数字摄像机获取的图像;以及显示屏,所述显示屏配置用于基于由所述第一数字摄像机获取的图像给所述车辆的驾驶员重建由所述计算机提供的图像和/或与车辆后方的外部环境相关的信息;以及
-驾驶员警惕性检查系统,所述驾驶员警惕性检查系统具有至少一个第二数字摄像机,所述至少一个第二数字摄像机定向成朝向所述驾驶员的面部,以获取与所述驾驶员相关的眼动追踪数据,所述驾驶员警惕性检查系统还具有用于从所述眼动追踪数据中推导所述驾驶员的目光定向的部件,
所述方法包括在所述车辆的倒车操作过程中由所述计算单元执行的以下步骤:
-在由所述第二数字摄像机动态地获取的与所述驾驶员相关的眼动追踪数据的基础上确定所述驾驶员的目光定向;以及,
-在所述倒车操作过程中,当所述驾驶员的目光定向成仅朝着所述数字后视系统的显示屏方向达大于经确定时长阈值的时长时,在所述数字后视系统的显示屏上显示视觉警告,所述视觉警告促使所述驾驶员使用与车辆后方的外部环境相关的其它信息源。
由于本发明,在倒车阶段中的驾驶过程被监视,在该方面,核查驾驶员是否并不仅仅注视数字后视系统的屏。当确定所述驾驶员的视觉注意力投向数字后视屏超过经确定时长(通常5秒)时,所述数字后视屏给所述驾驶员显示警告,所述警告使所述驾驶员明白需使用其它信息源(例如,直接观察,或经由一个或多个外后视镜观察,如道路法规中所建议地)。
根据所述方法的可单独或组合地采用的实施方式:
-所述机动车辆还包括驻车辅助系统,所述驻车辅助系统包括至少一个传感器和/或至少一个数字摄像机,所述至少一个传感器和/或至少一个数字摄像机用于检测车辆后方的外部环境中的事件,其中,当所述驻车辅助系统检测到在所述机动车辆后方的外部环境中但在所述数字后视系统的数字摄像机的视野之外存在物体时,在所述数字后视系统的显示屏上显示相应的视觉警告。
-所述计算单元还配置用于借助于例如“Car-to-X”类型的车间通信系统交换数据,其中,当所述计算单元通过所述车间通信系统接收到与在车辆后方的外部环境中但在所述数字后视系统的数字摄像机的视野之外存在物体相关的信息时,在所述数字后视系统的显示屏上显示相应的视觉警告。
-所述经确定时长阈值等于几秒,尤其是在3秒与8秒之间,例如等于5秒。
-由所述数字后视系统的显示屏显示的视觉警告包括集合中所包括的元素中的一个或多个,所述集合包括:象形符号、文本信息和视觉效果(例如闪烁、着色或突出显示)。
-促使所述驾驶员使用与车辆后方的外部环境相关的其它信息源的视觉警告包括列表中所包括的信息源中的至少一个,所述列表包括:使用外后视镜、使用由驻车辅助系统提供的信息、透过车窗直接观察。
-在所述倒车操作过程中,当所述驾驶员的目光定向成仅朝着所述数字后视系统的显示屏方向达大于经确定时长阈值的时长时,自动系统(例如紧急制动系统)干预所述车辆的驾驶以阻止所述驾驶员的驾驶动作。
本发明的第二方面涉及一种用于在倒车阶段中辅助驾驶机动车辆的驾驶辅助装置,所述驾驶辅助装置包括软件部件,所述软件部件用于执行根据上述第一方面的方法的其中一个实施方式的所有方法步骤。
本发明的第三方面还旨在提供一种包括根据第二方面的装置的车辆。最后,另一方面可涉及一种包括指令的电脑程序产品,当电脑程序装入在电脑的存储器中并且由所述电脑的处理器执行时,所述指令引起由所述电脑实施根据第一方面的方法的所有步骤。
附图说明
通过阅读下文中纯粹非限制性的详细说明和附图,本发明的其它特征和优点将更加清楚,在所述附图中:
-图1是数字后视系统的多个部件在机动车辆中的定位的示意图;
-图2是根据本发明实施方式的装置的功能性示图;以及
-图3是示出了根据本发明的方法的实施方式的步骤图。
具体实施方式
在下文所述的实施方式的详细说明中以及在附图中,相同或相似的元件在附图中具有相同的附图标记。
图1示意性地示出了机动车辆,在所述机动车辆中可实施根据本发明的驾驶辅助方法。
在道路102上行驶的机动车辆101装配有数字后视系统202。所述系统202包括至少一个数字摄像机104、显示屏106以及计算机202a。为了保持该图1易于阅读,显示屏106示出在机动车辆101之外。然而,在实际中,显示屏106可处在机动车辆的车厢中,或者处在驾驶员的视野中的并不妨碍所述驾驶员对于道路的良好且直接的可见性的任何位置,例如处在组合仪表位置处,或处在仪表板中央,或者代替处在前挡风玻璃的上部中央的内后视镜,同时转向成朝向所述驾驶员的面部和眼睛。
数字摄像机104配置用于动态地获取车辆后方的外部环境的图像。因此,当车辆向后移动时,也就是说,当驾驶员实施倒车操作(还称作后退操作)时,所述数字摄像机提供对所述驾驶员特别有用的图像。在图1中,箭头103示出了车辆在这种驾驶阶段中的移动方向,并且限定了在本说明书的含义中的后方方向。根据摄像机的技术,所述摄像机的视野105通常覆盖朝向车辆后方延伸直到大约60米的区域。
计算机202a构造用于处理由数字摄像机104获取的图像,并且构造用于控制这些图像直接地显示在显示屏106上或者在这些图像经分析和/或数字处理(如果发生这种情况)之后显示在所述显示屏上。另外,所述计算机可控制(尤其是与车辆外部环境相关的)其它图像和/或信息显示在屏上,以使得显示了所述其它图像和/或信息,例如与由数字摄像机104获取的图像重叠地显示。
除此之外,有利地,相较于传统的后视镜,数字后视系统202能够覆盖更大的视野,即使在恶劣的外部可见性条件(雨水、强烈阳光等)下也能够显示可读的图像,并且摆脱了由存在于车辆后部的乘客和/或行李形成的对于可见性的障碍(如果发生这种情况)。
参考图2,现在将描述其中可实施根据本发明的驾驶辅助方法的装置的一个示例。图2的框图示出了在该实施中所涉及的不同元件之间的功能交互。
机动车辆101包括具有计算机的计算单元201,所述计算机执行一个或多个软件元件,所述一个或多个软件元件实施所述方法的不同步骤。该计算机可例如是用于确保车辆发动机的最佳运行的发动机控制计算机,或用于确保不同车载装备的运行的车厢计算机,又或专用计算机。计算单元201与所述车辆中所包括的不同实体(entité)通信,这将更详细地描述。
首先,(如上文中已参考图1描述的)数字后视系统202向计算单元202提供来自数字摄像机104的信息。由此回收的信息与车辆后方的外部环境(更确切地,在摄像机104的朝向机动车辆101后方的视野105中的外部环境)相关。
其次,计算单元201还与驾驶员警惕性检查系统203(也称作眼动追踪测量系统)通信。在所示的示例中,该系统包括两个数字摄像机203b和203c。然而本领域技术人员理解到,可基于单个数字摄像机或相反地基于多于两个数字摄像机实施这种眼动追踪测量。数字摄像机203b和203c向另一计算单元203a传输图像,所述另一计算单元尤其是在分析驾驶员的眼睛运动之后(用英文称作“Eye–tracking”功能)能够实时地推导和跟踪所述驾驶员的目光定向。这些数据动态地传输到计算单元201。
最后,计算单元201与驻车辅助系统204通信,所述驻车辅助系统依赖于由一组传感器提供的数据来在驻车操作中辅助驾驶员。所述系统的一组传感器能够检测在车辆外部环境中特别是在车辆后方的事件。这种系统本身可集成在更通用的驾驶辅助系统(英文“Advanced driver-assistance Systems”或ADAS)中。在所示的示例中,计算单元204a回收和处理来自传感器204b、204c和204d的数据,以相对于存在于车辆外部环境中的不同元素定位所述车辆。本领域技术人员理解到,在不同的实施方式中,可基于由一个或多个传感器和/或一个或多个数字摄像机获得的数据实施驻车辅助系统204的功能。最后,驻车辅助系统204向计算单元201动态地传输基于一个或多个传感器和/或一个或多个摄像机获得的数据。
参考图3,现在将描述步骤图,所述步骤图示出了由计算单元201执行的用于实施根据本发明的在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法的不同步骤。一旦机动车辆处于倒车阶段中的操作(也就是说,朝着后方方向操作),触发所述方法,所述倒车阶段例如响应于在变速选择箱位置处接合倒车挡。
在步骤301中,在与驾驶员相关的眼动追踪数据的基础上确定所述驾驶员的目光定向,所述眼动追踪数据由驾驶员警惕性检查系统203的至少一个数字摄像机动态地获取。所述驾驶员的目光定向因此实时地由计算单元201确定。
在步骤302中,核查所述驾驶员的目光保持定向成朝向数字后视系统202的显示屏106(也就是说,无中断地定向成朝向该屏)所达的时长。在所述倒车操作过程中,仅当所述驾驶员的目光定向成仅朝着所述数字后视系统的显示屏方向达大于经确定时长阈值tth(几秒)的时长时,实施所述方法的下一步骤。在所述方法的实施方式中,时长阈值tth可在3秒与8秒之间。例如,该时长阈值可等于5秒。
最后,步骤303旨在在数字后视系统202的显示屏106上显示视觉警告,所述视觉警告促使驾驶员使用与车辆后方的外部环境相关的其它信息源。例如,可促使所述驾驶员使用外后视镜,使用由驻车辅助系统提供的信息,或者通过透过车窗直接观察来查看车辆后方的外部环境。以该方式,驾驶员被激励沿着所有有用的方向注视,这降低了撞到障碍物的风险,并提高了车辆的安全性以及第三方(其它车辆、行人、骑车人、城市公用设施的拥有者等)的安全性。
此外,在所述方法的特殊实施方式中,还可在由驻车辅助系统204的传感器和/或数字摄像机检测到在机动车辆后方的外部环境中但在数字后视系统的数字摄像机的视野之外的物体之后,触发对于警告的显示。
除了由数字摄像机104获取的图像之外,不同的视觉警告也可由数字后视系统的显示屏106显示,所述不同的视觉警告用于给驾驶员传输信息或指标。在该方面,所述不同的视觉警告可例如涉及:在屏106上示出的象形符号、文本信息或视觉效应,例如所述屏的一部分的闪烁、着色或突出显示、所显示的文本、象形符号等。以该方式,所述屏可特别地能够清楚地给司机指出该司机的目光和注意力需投向何处,例如响应于在车辆外部环境(在后方或前方)中检测到物体或者与该情况相关联。
如今,一些机动车辆装配有称作“Car-to-X”的技术。这涉及已知的车间通信系统(附图上未示出),所述车间通信系统尤其能够使车辆在空间中分别定位。因此,在所述方法的特殊实施方式中,机动车辆的计算单元201可配置用于借助于“Car-to-X”类型的车间通信系统交换数据。在该情况下,除了通过驻车辅助系统获得(如果发生这种情况)的信息之外,所述计算单元还可从该系统接收与在车辆后方的外部环境中但在数字后视系统的数字摄像机的视野之外存在物体相关的信息。当该情况发生时,还可借助于数字后视系统的显示屏在视觉上警告驾驶员。有利地,所述驾驶员可被激励明确地朝着车辆可能撞到障碍物的方向注视,无论所述障碍物是在车辆后方还是前方。
最后,在特殊的实施方式中,当步骤302确认驾驶员的目光定向成朝着屏106方向达大于tth的时长时,自动系统(例如紧急制动系统)可直接干预车辆的驾驶。特别是,该系统可触发紧急制动,以便避免与物体的碰撞,人类的反射不能够阻止所述碰撞。
在权利要求书中,术语“包括”并不排除其它元素或其它步骤。可使用单个处理器或多个其它单元来实施本发明。可有利地组合采用所呈现或所要求保护的不同特征。本说明书中或不同的从属权利要求中所呈现的特征并未排除该可能性。附图标记并不被理解为用于限制本发明的保护范围。

Claims (12)

1.一种用于在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法,所述机动车辆包括:
-计算单元(201);
-数字后视系统(202),所述数字后视系统具有:至少一个第一数字摄像机(104),所述至少一个第一数字摄像机配置用于动态地获取所述机动车辆后方的外部环境的图像;计算机(202a),所述计算机构造用于处理由所述第一数字摄像机获取的图像;以及显示屏(106),所述显示屏配置用于基于由所述第一数字摄像机获取的图像给所述机动车辆的驾驶员重建由所述计算机提供的图像和/或与所述机动车辆后方的外部环境相关的信息;以及
-驾驶员警惕性检查系统(203),所述驾驶员警惕性检查系统具有至少一个第二数字摄像机(203b),所述至少一个第二数字摄像机定向成朝向所述驾驶员的面部,以获取与所述驾驶员相关的眼动追踪数据,所述驾驶员警惕性检查系统还具有用于从所述眼动追踪数据中推导所述驾驶员的目光定向的部件(203a),
所述驾驶辅助方法包括在所述机动车辆的倒车操作过程中由所述计算单元执行的以下步骤:
-在由所述第二数字摄像机动态地获取的与所述驾驶员相关的眼动追踪数据的基础上确定所述驾驶员的目光定向;以及
-在所述倒车操作过程中,当所述驾驶员的目光定向成仅朝着所述数字后视系统的显示屏方向达到大于经确定时长阈值(tth)的时长时,在所述数字后视系统的显示屏上显示视觉警告,所述视觉警告促使所述驾驶员使用与所述机动车辆后方的外部环境相关的其它信息源,
并且,所述计算单元还配置用于借助于车间通信系统交换数据,并且,当所述计算单元通过所述车间通信系统接收到与在所述机动车辆后方的外部环境中但在所述数字后视系统的第一数字摄像机的视野之外存在物体相关的信息时,在所述数字后视系统的显示屏上显示相应的视觉警告。
2.根据权利要求1所述的驾驶辅助方法,其中,所述机动车辆还包括驻车辅助系统,所述驻车辅助系统包括至少一个传感器和/或至少一个数字摄像机,所述至少一个传感器和/或至少一个数字摄像机用于检测所述机动车辆后方的外部环境中的事件,并且,当所述驻车辅助系统检测到在所述机动车辆后方的外部环境中但在所述数字后视系统的第一数字摄像机的视野之外存在物体时,在所述数字后视系统的显示屏上显示相应的视觉警告。
3.根据权利要求1或2所述的驾驶辅助方法,其中,所述经确定时长阈值(tth)等于几秒。
4.根据权利要求3所述的驾驶辅助方法,其中,所述经确定时长阈值(tth)在3秒与8秒之间。
5.根据权利要求3所述的驾驶辅助方法,其中,所述经确定时长阈值(tth)等于5秒。
6.根据权利要求1、2、4和5中任一项所述的驾驶辅助方法,其中,由所述数字后视系统的显示屏显示的视觉警告包括集合中所包括的元素中的一个或多个,所述集合包括:象形符号、文本信息和视觉效果。
7.根据权利要求1、2、4和5中任一项所述的驾驶辅助方法,其中,促使所述驾驶员使用与所述机动车辆后方的外部环境相关的其它信息源的视觉警告包括列表中所包括的信息源中的至少一个,所述列表包括:使用一个或多个外后视镜、使用由驻车辅助系统提供的信息、透过车窗直接观察。
8.根据权利要求1、2、4和5中任一项所述的驾驶辅助方法,其中,在所述倒车操作过程中,当所述驾驶员的目光定向成仅朝着所述数字后视系统的显示屏方向达到大于经确定时长阈值(tth)的时长时,自动系统干预所述机动车辆的驾驶以阻止所述驾驶员的驾驶动作。
9.根据权利要求8所述的驾驶辅助方法,其中,所述自动系统是紧急制动系统。
10.一种用于在倒车阶段中辅助驾驶机动车辆的驾驶辅助装置,所述驾驶辅助装置包括软件部件,所述软件部件用于执行根据权利要求1至9中任一项所述的驾驶辅助方法的所有步骤。
11.一种机动车辆,所述机动车辆包括根据权利要求10所述的驾驶辅助装置。
12.一种电脑可读存储介质,所述电脑可读存储介质上存储有包括指令的电脑程序,当电脑程序装入在电脑的存储器中并且由所述电脑的处理器执行时,所述指令引起由所述电脑实施根据权利要求1至9中任一项所述的驾驶辅助方法的所有步骤。
CN201980068355.5A 2018-10-17 2019-10-01 在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法和装置 Active CN112867663B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1859587 2018-10-17
FR1859587A FR3087406B1 (fr) 2018-10-17 2018-10-17 Procede et dispositif d’aide a la conduite d’un vehicule automobile en phase de recul
PCT/FR2019/052312 WO2020079340A1 (fr) 2018-10-17 2019-10-01 Procédé et dispositif d'aide à la conduite d'un véhicule automobile en phase de recul

Publications (2)

Publication Number Publication Date
CN112867663A CN112867663A (zh) 2021-05-28
CN112867663B true CN112867663B (zh) 2023-06-02

Family

ID=65244310

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980068355.5A Active CN112867663B (zh) 2018-10-17 2019-10-01 在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法和装置

Country Status (4)

Country Link
EP (1) EP3867126B1 (zh)
CN (1) CN112867663B (zh)
FR (1) FR3087406B1 (zh)
WO (1) WO2020079340A1 (zh)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3614346B2 (ja) * 2000-04-24 2005-01-26 株式会社ケンウッド 車載用ナビゲーション装置及び表示装置
GB2508860A (en) * 2012-12-13 2014-06-18 Nissan Motor Mfg Uk Ltd Vehicle Rear-View Camera System
US20150310287A1 (en) * 2014-04-28 2015-10-29 Ford Global Technologies, Llc Gaze detection and workload estimation for customized content display
CN104786933A (zh) * 2015-03-04 2015-07-22 江苏大学 一种全景影像驾驶辅助装置及方法
DE102015206209A1 (de) 2015-04-08 2016-10-13 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Bestimmung einer die Aufmerksamkeit eines Fahrzeugführers abbildenden Maßzahl und Vorrichtung zur Aufmerksamkeitsüberwachung eines Fahrzeugführers
US10239455B2 (en) 2016-08-19 2019-03-26 Panasonic Automotive Systems Company Of America, Division Of Panasonic Corporation Of North America Reactive smart rear view display mirror
CN106476700A (zh) * 2016-11-08 2017-03-08 北京小米移动软件有限公司 驾车安全提醒的方法、装置、后视镜及交通工具
JP2018148530A (ja) * 2017-03-09 2018-09-20 株式会社Jvcケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム

Also Published As

Publication number Publication date
CN112867663A (zh) 2021-05-28
EP3867126B1 (fr) 2023-09-13
FR3087406A1 (fr) 2020-04-24
FR3087406B1 (fr) 2020-10-16
EP3867126A1 (fr) 2021-08-25
WO2020079340A1 (fr) 2020-04-23

Similar Documents

Publication Publication Date Title
KR101737737B1 (ko) 차량용 카메라 hud 통합 클러스터 시스템
CA2990430C (en) Augmented reality system for vehicle blind spot prevention
JP5088669B2 (ja) 車両周辺監視装置
JP4683192B2 (ja) 車両用死角監視装置及び車両用運転支援システム
JP6241235B2 (ja) 車両用運転支援装置
CN111731188B (zh) 一种全景影像控制方法、装置及车辆
US10410514B2 (en) Display device for vehicle and display method for vehicle
CN110178141A (zh) 用于操控自主机动车辆的方法
JP6593011B2 (ja) 安全運転促進装置及び安全運転促進方法
CN108725454B (zh) 安全驾驶辅助系统及其控制方法
KR20180094992A (ko) 표시 장치의 제어 방법 및 표시 장치
EP2487666B1 (en) Method and driver assistance system for displaying images in a motor vehicle
CN116674468A (zh) 影像显示方法及相关装置、车辆、存储介质和程序
US20200273153A1 (en) Surroundings monitoring apparatus
CN109690559B (zh) 用于提供车辆环境信息的装置
CN112867663B (zh) 在倒车阶段中辅助驾驶机动车辆的驾驶辅助方法和装置
CN107074237B (zh) 根据驾驶员眼睛的察看方向对车辆轨迹监控系统的停用进行控制的控制装置
WO2022185653A1 (ja) 車両用記録制御装置および記録制御方法
CN216184804U (zh) 一种辅助驾驶系统及车辆
US11161454B2 (en) Motor vehicle
Kidd et al. Changes in driver glance behavior when using a system that automates steering to perform a low-speed parallel parking maneuver
US11643012B2 (en) Driving assistance device, driving situation information acquisition system, driving assistance method, and program
CN113386669A (zh) 一种辅助驾驶系统及车辆
JP7158655B2 (ja) 停車支援装置
CN112660022A (zh) 基于透明a柱的开门预警显示方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant