CN108501807A - 在车载显示器上叠置与潜在危险相关联的道路对象 - Google Patents

在车载显示器上叠置与潜在危险相关联的道路对象 Download PDF

Info

Publication number
CN108501807A
CN108501807A CN201810136042.6A CN201810136042A CN108501807A CN 108501807 A CN108501807 A CN 108501807A CN 201810136042 A CN201810136042 A CN 201810136042A CN 108501807 A CN108501807 A CN 108501807A
Authority
CN
China
Prior art keywords
vehicle
local
detection
detection vehicle
local vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810136042.6A
Other languages
English (en)
Inventor
Y·G·格拉泽
A·K·路易斯
D·S·格拉泽
M·纳斯里安
P·E·克拉热夫斯基
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GM Global Technology Operations LLC
Original Assignee
GM Global Technology Operations LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GM Global Technology Operations LLC filed Critical GM Global Technology Operations LLC
Publication of CN108501807A publication Critical patent/CN108501807A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了用于将与潜在危险相关联的道路对象叠置在车载显示器上的技术的示例。在一个示例性实施方式中,一种方法可包括:响应于检测到本地车辆附近存在检测车辆而通过处理装置确定检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间;基于检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间通过处理装置确定本地车辆附近的检测车辆对于本地车辆而言是否是潜在危险;以及响应于确定本地车辆附近的检测车辆对于本地车辆而言是潜在危险而通过处理装置将警告标记叠置在车载显示器上。

Description

在车载显示器上叠置与潜在危险相关联的道路对象
引言
本公开涉及将与潜在危险相关联的道路对象叠置在车载显示器上。
车辆(例如,轿车、摩托车、船舶或任何其他类型的汽车)可配备有车载显示器(例如,触摸屏)。显示器可用于将摄像机图像和/或其他图像显示给车辆的驾驶员。例如,传统后视镜和/或侧视镜可替换成显示来自摄像机的摄像机图像的显示器,该摄像机定位在车辆后面,以代替传统后视镜将“后方景物”显示给驾驶员。
发明内容
在一个示例性实施例中,用于将与本地车辆所面临的潜在危险相关联的道路对象叠置在车载显示器上的计算机实施方法包括响应于检测到本地车辆附近存在检测车辆而通过处理装置确定检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间。方法进一步包括基于检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间通过处理装置确定本地车辆附近的检测车辆对于本地车辆而言是否是潜在危险。方法进一步包括响应于确定本地车辆附近的检测车辆对于本地车辆而言是潜在危险而通过处理装置将警告标记叠置在车载显示器上。
在某些示例性方法中,车载显示器上的警告标记指示车辆所面临的潜在危险。在某些示例性方法中,警告标记为叠置在检测车辆周围的方框、沿着检测车辆的路径的箭头或警告消息中的一种。示例性方法可包括在警告标记叠置在车载显示器上时生成可听信号以提醒本地车辆的驾驶员。在某些示例性方法中,潜在危险为如下项中的一种:检测车辆处于本地车辆的盲区中、检测车辆在本地车辆的相邻车道上快速接近本地车辆或检测车辆在本地车辆的共用车道上快速接近本地车辆。在某些示例性方法中,检测车辆基于从本地车辆的近程传感器或摄像机接收到的信号进行检测。在某些示例性方法中,检测车辆基于从检测车辆接收到的专用短程通信进行检测。
在另一示例性实施例中,提供了将与本地车辆所面临的潜在危险相关联的道路对象叠置在车载显示器上的系统,其包括配置成显示图像的车载显示器。系统进一步包括定位发动机。定位发动机配置成响应于检测到本地车辆附近存在检测车辆而确定检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间。定位发动机被进一步配置成基于检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间确定本地车辆附近的检测车辆对于本地车辆而言是否是潜在危险。系统还包括配置成响应于确定本地车辆附近的检测车辆对于本地车辆而言是潜在危险而将警告标记叠置在车载显示器上的警告叠置发动机。
在某些示例性系统中,车载显示器上的警告标记指示车辆所面临的潜在危险。在某些示例性系统中,警告标记为叠置在检测车辆周围的方框、沿着检测车辆的路径的箭头或警告消息中的一种。示例性系统可包括在警告标记叠置在车载显示器上时生成可听信号以提醒本地车辆的驾驶员。在某些示例性系统中,潜在危险为如下项中的一种:检测车辆处于本地车辆的盲区中、检测车辆在本地车辆的相邻车道上快速接近本地车辆或检测车辆在本地车辆的共用车道上快速接近本地车辆。在某些示例性系统中,检测车辆基于从本地车辆的近程传感器或摄像机接收到的信号进行检测。在某些示例性系统中,检测车辆基于从检测车辆接收到的专用短程通信进行检测。
在又一示例性实施例中,用于将与本地车辆所面临的潜在危险相关联的道路对象叠置在车载显示器上的计算机程序产品可包括具有通过其进行实现的程序指令的计算机可读存储介质,其中该计算机可读存储介质本身并不是瞬变信号,其中该程序指令可由处理装置进行执行,以致使处理装置执行方法。在示例中,该方法包括响应于检测到本地车辆附近存在检测车辆而通过处理装置确定检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间。方法进一步包括基于检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间通过处理装置确定本地车辆附近的检测车辆对于本地车辆而言是否是潜在危险。方法进一步包括响应于确定本地车辆附近的检测车辆对于本地车辆而言是潜在危险而通过处理装置将警告标记叠置在车载显示器上。
在某些示例性方法中,车载显示器上的警告标记指示车辆所面临的潜在危险。在某些示例性方法中,警告标记为叠置在检测车辆周围的方框、沿着检测车辆的路径的箭头或警告消息中的一种。示例性方法可包括在警告标记叠置在车载显示器上时生成可听信号以提醒本地车辆的驾驶员。在某些示例性方法中,潜在危险为如下项中的一种:检测车辆处于本地车辆的盲区中、检测车辆在本地车辆的相邻车道上快速接近本地车辆或检测车辆在本地车辆的共用车道上快速接近本地车辆。在某些示例性方法中,检测车辆基于从本地车辆的近程传感器接收到的信号进行检测。在某些示例性方法中,检测车辆基于从检测车辆接收到的专用短程通信进行检测。
从以下结合附图进行的详细描述中可更清楚地了解本公开的上述特征和优点以及其他特征和优点。
附图说明
其他特征、优点以及细节仅以示例的方式出现在以下的详细描述中,其中该详细描述涉及如下附图:
图1根据本公开实施例示出了包括用于将与潜在危险相关联的道路对象叠置在车载显示器上的处理系统的车辆;
图2A、2B和2C根据本公开实施例示出了包括用于将与潜在危险相关联的道路对象叠置在车载显示器上的车载显示器的全屏幕显示镜的示例;
图3是示出了根据本公开各方面的用于将与潜在危险相关联的道路对象叠置在车载显示器上的方法的流程图;
图4是示出了根据本公开各方面的用于通过近程传感器确定检测车辆对于本地车辆而言是否是潜在危险的方法的流程图;
图5是示出了根据本公开各方面的用于通过专用短程通信确定检测车辆对于本地车辆而言是否是潜在危险的方法的流程图;以及
图6是示出了根据示例性实施例的用于实施本文所描述的技术的处理系统的框图。
具体实施方式
以下描述本质上仅仅是示例性的,其并不旨在限制本公开或其应用或用途。应理解的是,在整个附图中,相应的参考标记表示相同或相应的部件及特征。如本文所使用的,术语“模块”指的是处理电路,该处理电路可包括专用集成电路(ASIC)、电子电路、执行一个或多个软件或固件程序的处理器(共享、专用或集群)和存储器、组合逻辑电路和/或其他合适的提供所述功能的部件。
本文所描述的技术方案用于将与潜在危险相关联的道路对象叠置在车载显示器上。潜在危险包括其他车辆、道路碎屑、坑洞、行人、骑自行车者等。这使得可向用户呈现关于其周围环境的额外信息。车辆可配备有车载显示器,该车载显示器可用于将摄像机图像以及其他图像显示给车辆的驾驶员。如上所述,传统后视镜和/或侧视镜可替换成显示来自摄像机的摄像机图像的显示器,该摄像机定位在车辆外部(例如,车辆的后面、车辆的侧面、车辆的前面等),以代替传统后视镜将外部景物(例如,“后方景物”、“侧方景物”等)显示给驾驶员。当然,显示器可用于显示任何合适的信息,例如,来自车辆或车辆内部的其他景物、导航信息、音频信息、车辆信息等。
通过将与潜在危险相关联的道路对象叠置在显示器上,本技术具有安全益处,因为其可更准确地判断对象的速度及距离,并将该信息提供给车辆的操作员。例如,可提醒驾驶员留意处于盲区中的车辆、快速接近的车辆和/或紧随的车辆。相对于单独的图形提醒(例如,盲区提醒),直接识别并显示与危险相关的对象具有额外的安全益处。为了实现这一目的,本技术采用近程传感器(例如,超声波传感器、短程雷达等)和/或专用短程通信(DSRC)数据来在车载显示器上增强可引起冲突的对象。显示器可为全屏幕显示镜、触摸屏或屏幕。不同于增强现实方法,本技术并不要求将增强图形映射至实际空间中的对象。
图1根据本公开实施例示出了包括用于将与潜在危险相关联的道路对象叠置在车载显示器112上的处理系统110的车辆100(“本地车辆”)。特别地,车辆100可包括处理系统110、显示器120以及摄像机130、131、132。车辆100可为轿车、卡车、货车、公共汽车、摩托车、轮船、飞机或任何合适的车辆100。
摄像机130-132在车辆100的外部采集图像。应理解的是,虽然示出了三个摄像机130-132,但可在各种实施例中实施更多或更少的摄像机。所采集的图像(也被称作“原始图像”)可显示在显示器120上,以将车辆100的外部景物提供给车辆100的驾驶员/操作员。所采集的图像可作为活动图像、静止图像或二者的某种组合显示在显示器210上。显示器120可为全屏幕显示镜(FDM),其能够显示来自摄像机130-132中的一个或多个的图像(例如,原始图像)。应理解的是,原始图像可为来自摄像机130-132中的一个的单个图像,或可为来自摄像机130-132中的一个以上的图像的组合。在一个模式中,FDM可为传统镜;或者,在另一模式中,其可为用于显示数字图像的显示器120。应理解的是,摄像机图像可由任何其他车载显示器(例如,中央仪表台)进行显示,且摄像机图像可来自任何其他内部或外部车辆摄像机。
处理系统110可用于促进若干应用情形以将与潜在危险相关联的道路对象叠置在车载显示器上。例如,处理系统110可提醒车辆100的驾驶员或操作员注意潜在危险,这些潜在危险包括相邻车道上快速接近的车辆、在车辆100所在的车道上从后方快速接近车辆100的车辆、存在于车辆100的盲区中的另一车辆以及其他类似潜在危险。
为了将与本地车辆(例如,车辆100)所面临的潜在危险相关联的道路对象叠置在车载显示器上,处理系统110可按如下方式进行操作。例如,处理系统110的定位发动机112响应于检测到本地车辆100附近存在检测车辆而确定检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间。当检测车辆被近程传感器、来自检测车辆的专用短程通信(DSRC)和/或另一合适的检测技术检测到时,检测车辆被认为位于车辆100附近。
随后,处理系统110的定位发动机112基于检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间确定本地车辆附近的检测车辆对于本地车辆而言是否是潜在危险。若确定本地车辆100附近的检测车辆对于本地车辆100而言是潜在危险,则处理系统110的警告叠置发动机114将警告标记叠置在显示器120上。警告标记可叠置在显示器120的原始图像上,以提醒车辆100的驾驶员或操作员注意潜在危险。
图2A、2B和2C根据本公开实施例示出了包括用于将与潜在危险相关联的道路对象叠置在车载显示器120上的车载显示器120的全屏幕显示镜200的示例。在图2A、2B和2C的示例中,显示器120显示可由摄像机(例如,摄像机130)采集的原始图像212,以显示车辆100的后方景物。原始图像示出具有第一车道221、第二车道222以及第三车道223的道路。应理解的是,本技术适用于检测车辆后方、侧方和/或前方的危险。例如,本技术可警告驾驶员车辆前方有危险,例如,道路碎屑、失速或抛锚车辆等。
在图2A的示例中,原始图像212示出了在车道221中的检测车辆231。处理系统110的定位发动机112确定检测车辆231的位置、检测车辆231的速度以及检测车辆231接近本地车辆100的所需时间。若定位发动机112确定车辆231对于车辆100而言是潜在危险,则警告叠置发动机114将警告标记叠置在显示器120上。在图2A的情况下,确定检测车辆231处于本地车辆100的盲区内,因此,警告叠置发动机114将以围绕着车辆231的方框241的形式存在的警告标记叠置在显示器120上。如此,可提醒车辆100的驾驶员或操作员注意以相邻车道中的车辆231的形式存在的潜在危险。因此,由于存在有与车辆231的位置相关联的潜在冲突,因而驾驶员不应变道。
应理解的是,可使用其他标记,且标记可包括允许标记基于标准(例如,风险严重性、风险类型、风险紧急性等)进行改变的特征,而且其可由用户定制,并且/或者预先设置。此外,标记可改变透明度、颜色、线宽、显示频率(屏幕刷新)等。
在图2B的示例中,原始图像212示出了在车道222中的检测车辆232。处理系统110的定位发动机112确定检测车辆232的位置、检测车辆232的速度以及检测车辆232接近本地车辆100的所需时间。若定位发动机112确定车辆232对于车辆100而言是潜在危险,则警告叠置发动机114将警告标记叠置在显示器120上。在图2B的情况下,确定检测车辆232正快速接近本地车辆100,这使得可能会发生由检测车辆232引起的潜在追尾碰撞。因此,警告叠置发动机114将以示出车辆232的路径的箭头242的形式存在的警告标记叠置在显示器120上。如此,可提醒车辆100的驾驶员或操作员注意以正在快速接近的车辆232的形式存在的潜在危险。因此,驾驶员应进行变道、加速等操作以避免发生由快速接近的车辆232引起的潜在碰撞。
在图2C的示例中,原始图像212示出了在车道223中的检测车辆233。处理系统110的定位发动机112确定检测车辆233的位置、检测车辆233的速度以及检测车辆233接近本地车辆100的所需时间。若定位发动机112确定车辆233对于车辆100而言是潜在危险,则警告叠置发动机114将警告标记叠置在显示器120上。在图2C的情况下,确定检测车辆233正在与本地车辆100所在的车道222相邻的车道中快速接近本地车辆100。在这种情况下,若车辆100从车道222变道至检测车辆233的行进路径所在的车道223,则可能会发生潜在危险。因此,警告叠置发动机114将以警告消息243的形式存在的警告标记叠置在显示器120上。警告消息243可包括文本、符号或其他信息,该其他信息可将关于潜在危险的信息提供给车辆100的驾驶员或操作员。如此,可提醒车辆100的驾驶员或操作员注意以在相邻车道中快速接近的车辆233的形式存在的潜在危险。因此,驾驶员不应变道至车辆233所在的路径,以避免发生潜在碰撞。
根据某些示例,处理系统110可在车辆100内生成音频信号以提醒驾驶员存在有潜在危险。音频信号可在警告标记叠置在车载显示器120上时生成。这可为驾驶员提供关于潜在危险的额外通知,并可使驾驶员查看显示器以通过叠置图像获得更多关于额外危险的信息。在某些示例中,触觉信号、音频信号或另一类型的信号可用于为驾驶员提供通知。
图3是示出了根据本公开各方面的用于将与潜在危险相关联的道路对象叠置在车载显示器120上的方法300的流程图。例如,方法300可由图1的处理系统110、图6的处理系统20或另一合适的处理系统或装置进行实施。
在框302处,方法300包括响应于检测到本地车辆附近存在检测车辆而通过处理装置(例如,图1的处理系统110)确定检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间。检测车辆的存在可由近程传感器、DSRC或另一合适的检测技术进行检测。
在框304处,方法300包括基于检测车辆的位置、检测车辆的速度以及检测车辆接近本地车辆的所需时间通过处理装置确定本地车辆附近的检测车辆对于本地车辆而言是否是潜在危险。至于检测车辆是否是潜在危险,其是基于检测的执行方式(例如,通过近程传感器、DSRC等进行检测)进行确定的。在本文中参照图4和5对该确定的示例进行描述。
在框306处,方法300包括响应于确定本地车辆附近的检测车辆对于本地车辆而言是潜在危险而通过处理装置将警告标记叠置在车载显示器上。
还可包括额外过程,且应理解的是,图3所示的过程仅仅是说明;还应理解的是,在不偏离本公开的范围和精神的情况下,可添加其他过程,或可移除、修改或重新布置现有的过程。
图4是示出了根据本公开各方面的用于通过近程传感器确定检测车辆对于本地车辆100而言是否是潜在危险的方法的流程图。例如,方法400可由图1的处理系统110、图6的处理系统20或另一合适的处理系统或装置进行实施。
在框402处,方法400包括通过来自定位在车辆110的左右两侧上的两个近程传感器的数据确定检测车辆在时间t下的位置。在框404处,方法400包括基于左右两侧的近程传感器确定检测车辆的接近速度。接近速度等于时间t下的检测车辆位置减去时间t-1下的检测车辆位置,再除以循环时间(即读取之间的时间)。在框406处,方法400包括通过如下方式确定检测车辆接近本地车辆的所需时间:本地车辆的速度减去检测车辆的接近速度,再除以时间t下的检测车辆位置。
在决定框408处,确定框406的时间是否小于第一阈值。如果是,则在框410处显示临界值标记。如果不是,则随后在决定框412处确定时间是否小于第二阈值。如果是,则在框414处显示警告标记。如果不是,则方法400可结束或重复。第一阈值可小于第二阈值,从而使得紧急性较高的风险以临界值标记进行提醒,而紧急性较低的风险则以警告标记进行提醒。例如,在一个示例中,第一阈值可约为0.5秒,且第二阈值可约为1秒。在其他示例中,可使用其他阈值。
还可包括额外过程,且应理解的是,图4所示的过程仅仅是说明;还应理解的是,在不偏离本公开的范围和精神的情况下,可添加其他过程,或可移除、修改或重新布置现有的过程。
图5是示出了根据本公开各方面的用于通过专用短程通信(DSRC)确定检测车辆对于本地车辆100而言是否是潜在危险的方法的流程图。例如,方法500可由图1的处理系统110、图6的处理系统20或另一合适的处理系统或装置进行实施。
在框502处,从另一车辆接收到DSRC消息。在框504处,对DSRC消息进行解析以提取关于检测车辆的位置及速度数据。在决定框506处,确定检测车辆是否位于本地车辆后方。如果不是,方法500结束或重复。如果是,则在决定框508处确定检测车辆是否处于与本地车辆相邻的车道中。如果不是,方法500结束或重复。如果是,则方法500在框510处包括通过如下方式确定检测车辆接近本地车辆的所需时间:本地车辆的速度减去检测车辆的接近速度,再除以时间t下的检测车辆位置。
在决定框512处,确定框510的时间是否小于第一阈值。如果是,则在框514处显示临界值标记。如果不是,则随后在决定框516处确定时间是否小于第二阈值。如果是,则在框518处显示警告标记。如果不是,则方法500可结束或重复。第一阈值可小于第二阈值,从而使得紧急性较高的风险以临界值标记进行提醒,而紧急性较低的风险则以警告标记进行提醒。例如,在一个示例中,第一阈值可约为0.5秒,且第二阈值可约为1秒。在其他示例中,可使用其他阈值。
还可包括额外过程,且应理解的是,图5所示的过程仅仅是说明;还应理解的是,在不偏离本公开的范围和精神的情况下,可添加其他过程,或可移除、修改或重新布置现有的过程。
将理解的是,本公开能够结合任何其他类型的现在已知或以后开发出的计算环境进行实施。例如,图6是示出了用于实施本文所描述的技术的处理系统20的框图。在示例中,处理系统20具有一个或多个中央处理单元(处理器)21a、21b、21c等(共同地称为或统称为处理器21和/或处理装置)。在本公开的方面中,各处理器21可包括精简指令集计算机(RISC)微处理器。处理器21经由系统总线33联接至系统存储器(例如,随机存取存储器(RAM)24)以及各种其他部件。只读存储器(ROM)22联接至系统总线33,并可包括控制处理系统20的特定基本功能的基本输入/输出系统(BIOS)。
进一步示出的是输入/输出(I/O)适配器27以及联接至系统总线33的通信适配器26。I/O适配器27可为与硬盘23和/或其他存储驱动器25或任何其他类似部件进行通信的小型计算机系统接口(SCSI)适配器。I/O适配器27、硬盘23以及其他存储装置25在本文中共同地称为大容量存储器34。用于在处理系统20上进行执行的操作系统40可存储在大容量存储器34中。网络适配器26使系统总线33与外部网络36互连,从而使得处理系统20能够与其他此类系统进行通信。
显示器(例如,显示监视器)35通过显示适配器32连接至系统总线33,该显示适配器可包括用以改善图形密集应用的性能的图形适配器以及视频控制器。在本公开的一个方面中,适配器24、27和/或32可连接至一个或多个I/O总线,该一个或多个I/O总线经由中间总线桥接器(未示出)连接至系统总线33。用于连接外围装置(例如,硬盘控制器、网络适配器以及图形适配器等)的合适I/O总线通常包括公共协议,例如,外围部件互联(PCI)。额外的输入/输出装置示出为经由用户接口适配器28以及显示适配器32连接至系统总线33。键盘29、鼠标30以及扬声器31可经由用户接口适配器28互连至系统总线33,其中,例如,该用户接口适配器可包括将多个装置适配器集成至单个集成电路中的超级I/O芯片。
在本公开的某些方面中,处理系统20包括图形处理单元37。图形处理单元37为专用电子电路,其被设计成操纵并改变存储器以在帧缓冲器中加速形成用于输出至显示器的图像。通常而言,图形处理单元37在操纵计算机图形和图像处理方面非常高效,并具有使其比用于算法的通用CPU更有效的高度并行结构,在该并行结构中,大型的数据块以并行的方式进行处理。
因此,如本文所配置的,处理系统20包括以处理器21的形式存在的处理功能、包括系统存储器(例如,RAM24)和大容量存储器34的存储功能、输入装置(例如,键盘29以及鼠标30等)以及包括扬声器31和显示器35的输出功能。在本公开的某些方面中,系统存储器(例如,RAM24)的部分和大容量存储器34共同存储用于协调处理系统20中示出的各种部件的功能的操作系统。
本技术可实施为系统、方法和/或计算机程序产品。计算机程序产品可包括在其上具有用于致使处理器执行本公开的各方面的计算机可读程序指令的计算机可读存储介质(或媒介)。
计算机可读存储介质可为有形装置,其可保留并存储供指令执行装置使用的指令。例如,计算机可读存储介质可为,但不限于:电子存储装置、磁存储装置、光存储装置、电磁存储装置、半导体存储装置或上述装置的任何合适组合。计算机可读存储介质的更具体示例的非穷举列表包括如下部件:便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪速存储器)、静态随机存取存储器(SRAM)、便携式光盘只读存储器(CD-ROM)、数字通用光盘(DVD)、存储棒以及上述部件的任何合适组合。如本文所使用的,计算机可读存储介质不应被理解为本身是瞬变信号,例如,无线电波或其他自由传播的电磁波、通过波导或其他传输介质(例如,穿过光纤线缆的光脉冲)进行传播的电磁波或通过线缆进行传输的电信号。
本文所描述的计算机可读程序指令可从计算机可读存储介质下载至相应的计算/处理装置,或经由网络(例如,互联网、局域网、广域网和或无线网络)下载至外部计算机或外部存储装置。网络可包括铜线传输线缆、传输光纤、无线传输、路由器、防火墙、交换机、闸道计算机和/或边缘服务器。各计算/处理装置中的网络适配器卡或网络接口接收来自网络的计算机可读程序指令,并转发该计算机可读程序指令以将其存储于相应计算/处理装置内的计算机可读存储介质中。
用于执行本公开的操作的计算机可读程序指令可为汇编程序指令、指令集架构(ISA)指令、机器指令、机器相关指令、微码、固件指令、状态设置数据或以一种或多种编程语言的任意组合进行编写的源代码或对象代码,该一种或多种编程语言包括面向对象的编程语言(例如,Smalltalk、C++等)以及常规的程序编程语言(例如,“C”编程语言或类似的编程语言)。计算机可读程序指令可全部在用户的计算机上进行执行,或可作为独立的软件包部分地在用户的计算机上进行执行。其还可部分地在用户的计算机上进行执行,并部分地在远程计算机上进行执行,或者全部在远程计算机或服务器上进行执行。在后者的情况下,远程计算机可通过任何类型的网络(包括局域网(LAN)或广域网(WAN))连接至用户的计算机,或其可连接至外部计算机(例如,通过使用互联网服务提供商的互联网实现该连接)。在某些示例中,例如,包括可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)的电子电路可通过利用计算机可读程序指令的状态信息对电子电路进行个性化来执行计算机可读程序指令,以执行本公开的各方面。
本公开的各方面在本文中参照根据本公开各方面的方法、设备(系统)以及计算机程序产品的流程图和/或框图进行描述。将理解的是,流程图和/或框图中的各框以及流程图和/或框图中各框的组合可由计算机可读程序指令进行实施。
这些计算机可读程序指令可提供至通用计算机、专用计算机或其他可编程数据处理设备的处理器以产生机器,从而使得通过计算机或其他可编程数据处理设备的处理器进行执行的指令形成用于实施流程图和/或框图或框中规定的功能/动作的装置。这些计算机可读程序指令还可存储在计算机可读存储介质中,其能够指导计算机、可编程数据处理设备和/或其他装置以特定方式运行,从而使得具有存储在其中的指令的计算机可读存储介质包括一种制品,该制品包括实施流程图和/或框图或框中规定的功能/动作的各方面的指令。
计算机可读程序指令还可装载至计算机、其他可编程数据处理设备或其他装置中,以致使一系列操作步骤在计算机、其他可编程设备或其他装置上执行来产生计算机实施过程,从而使得在计算机、其他可编程设备或其他装置上执行的指令实施流程图和/或框图或框中规定的功能/动作。
附图中的流程图和框图示出了根据本公开各方面的系统、方法及计算机程序产品的可能实施方式的架构、功能以及操作。就这一点而言,流程图或框图中的各框可代表指令模块、段或部分,其包括一个或多个用于实施指定逻辑功能的可执行指令。在某些可选实施方式中,框中提到的功能可不按附图中提到的顺序发生。例如,连续示出的两个框实际上可基本同时地执行,或根据所涉及的功能,有时候可以相反的顺序执行所述框。还将注意的是,框图和/或流程图的各框以及框图和/或流程图中的框的组合可通过基于专用硬件的系统进行实施,该系统执行指定功能或动作,或者执行专用硬件和计算机指令的组合。
本公开的各种示例的描述出于说明的目的而提供,但其并不旨在具有穷举性或限制于所公开的实施例。许多不脱离所述技术的范围及精神的修改以及变化对于本领域的普通技术人员而言是显而易见的。本文所用的术语被选择来最好地解释本技术的原理、实际应用或针对市场上找到的技术的技术改进,或者使得本领域的其他普通技术人员能够理解本文所公开的技术。
虽然已参照示例性实施例描述了上述公开内容,但本领域技术人员将理解的是,在不背离本公开的范围的情况下,可做出各种改变,并且可利用等同物来代替元件。此外,根据本公开的教导,可在不偏离本公开的基本范围的情况下进行许多修改以适应特定的情况或材料。因此,本技术并不旨在限制于所公开的特定实施例;相反,其旨在包括所有落入本申请范围内的实施例。

Claims (11)

1.一种用于将与本地车辆所面临的潜在危险相关联的道路对象叠置在车载显示器上的计算机实施方法,所述方法包括:
响应于检测到所述本地车辆附近存在检测车辆而通过处理装置确定所述检测车辆的位置、所述检测车辆的速度以及所述检测车辆接近所述本地车辆的所需时间;
基于所述检测车辆的所述位置、所述检测车辆的所述速度以及所述检测车辆接近所述本地车辆的所述所需时间通过所述处理装置确定所述本地车辆附近的所述检测车辆对于所述本地车辆而言是否是潜在危险;以及
响应于确定所述本地车辆附近的所述检测车辆对于所述本地车辆而言是所述潜在危险而通过所述处理装置将警告标记叠置在所述车载显示器上。
2.根据权利要求1所述的计算机实施方法,其中所述车载显示器上的所述警告标记指示所述车辆所面临的所述潜在危险。
3.根据权利要求1所述的计算机实施方法,其中所述警告标记为叠置在所述检测车辆周围的方框、沿着所述检测车辆的路径的箭头或警告消息中的一种。
4.根据权利要求1所述的计算机实施方法,其进一步包括在所述警告标记叠置在所述车载显示器上时生成可听信号以提醒所述本地车辆的驾驶员。
5.根据权利要求1所述的计算机实施方法,其中所述潜在危险为如下项中的一种:所述检测车辆处于所述本地车辆的盲区中、所述检测车辆在所述本地车辆的相邻车道上快速接近所述本地车辆或所述检测车辆在所述本地车辆的共用车道上快速接近所述本地车辆。
6.根据权利要求1所述的计算机实施方法,其中所述检测车辆基于从所述本地车辆的近程传感器接收到的信号进行检测。
7.根据权利要求1所述的计算机实施方法,其中所述检测车辆基于从所述检测车辆接收到的专用短程通信进行检测。
8.一种用于将与本地车辆所面临的潜在危险相关联的道路对象叠置在车载显示器上的系统,所述系统包括:
车载显示器,所述车载显示器配置成显示图像;
定位发动机,所述定位发动机配置成:
响应于检测到所述本地车辆附近存在检测车辆而确定所述检测车辆的位置、所述检测车辆的速度以及所述检测车辆接近所述本地车辆的所需时间,并且
基于所述检测车辆的所述位置、所述检测车辆的所述速度以及所述检测车辆接近所述本地车辆的所述所需时间确定所述本地车辆附近的所述检测车辆对于所述本地车辆而言是否是潜在危险;以及
警告叠置发动机,所述警告叠置发动机配置成响应于确定所述本地车辆附近的所述检测车辆对于所述本地车辆而言是潜在危险而将警告标记叠置在所述车载显示器上。
9.根据权利要求8所述的系统,其中所述潜在危险为如下项中的一种:所述检测车辆处于所述本地车辆的盲区中、所述检测车辆在所述本地车辆的相邻车道上快速接近所述本地车辆或所述检测车辆在所述本地车辆的共用车道上快速接近所述本地车辆。
10.根据权利要求8所述的系统,其中所述检测车辆基于从所述本地车辆的近程传感器接收到的信号进行检测。
11.根据权利要求8所述的系统,其中所述检测车辆基于从所述检测车辆接收到的专用短程通信进行检测。
CN201810136042.6A 2017-02-27 2018-02-09 在车载显示器上叠置与潜在危险相关联的道路对象 Pending CN108501807A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/443,699 US10173590B2 (en) 2017-02-27 2017-02-27 Overlaying on an in-vehicle display road objects associated with potential hazards
US15/443699 2017-02-27

Publications (1)

Publication Number Publication Date
CN108501807A true CN108501807A (zh) 2018-09-07

Family

ID=63112320

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810136042.6A Pending CN108501807A (zh) 2017-02-27 2018-02-09 在车载显示器上叠置与潜在危险相关联的道路对象

Country Status (3)

Country Link
US (1) US10173590B2 (zh)
CN (1) CN108501807A (zh)
DE (1) DE102018104012A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110562141A (zh) * 2019-08-27 2019-12-13 中国第一汽车股份有限公司 一种流媒体后视镜及其显示方法
WO2022016730A1 (zh) * 2020-07-23 2022-01-27 深圳市健创电子有限公司 车辆驾驶的安全预警方法、系统及相关装置
CN114312771A (zh) * 2020-09-25 2022-04-12 通用汽车环球科技运作有限责任公司 车辆接触减轻的检测、警告和准备动作

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210005428A (ko) * 2019-07-05 2021-01-14 현대모비스 주식회사 차량 주행 정보 표시 시스템 및 방법
JP6921160B2 (ja) 2019-10-29 2021-08-18 三菱電機株式会社 車両の後側方監視装置
US11462021B2 (en) * 2021-01-13 2022-10-04 GM Global Technology Operations LLC Obstacle detection and notification for motorcycles

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120154591A1 (en) * 2009-09-01 2012-06-21 Magna Mirrors Of America, Inc. Imaging and display system for vehicle
US8676431B1 (en) * 2013-03-12 2014-03-18 Google Inc. User interface for displaying object-based indications in an autonomous driving system
US20140302774A1 (en) * 2013-04-04 2014-10-09 General Motors Llc Methods systems and apparatus for sharing information among a group of vehicles
US20150120137A1 (en) * 2013-10-28 2015-04-30 GM Global Technology Operations LLC Path planning for evasive steering maneuver in presence of target vehicle and surrounding objects
CN105163972A (zh) * 2013-09-13 2015-12-16 日立麦克赛尔株式会社 信息显示系统以及信息显示装置
CN105765641A (zh) * 2013-11-27 2016-07-13 株式会社电装 驾驶辅助装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150042799A1 (en) 2013-08-07 2015-02-12 GM Global Technology Operations LLC Object highlighting and sensing in vehicle image display systems
EP3190021A1 (en) * 2016-01-08 2017-07-12 Harman Becker Automotive Systems GmbH System and method for collision warning
KR101745876B1 (ko) * 2016-03-18 2017-06-12 현대자동차주식회사 차량 및 차량의 제어방법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120154591A1 (en) * 2009-09-01 2012-06-21 Magna Mirrors Of America, Inc. Imaging and display system for vehicle
US8676431B1 (en) * 2013-03-12 2014-03-18 Google Inc. User interface for displaying object-based indications in an autonomous driving system
US20140302774A1 (en) * 2013-04-04 2014-10-09 General Motors Llc Methods systems and apparatus for sharing information among a group of vehicles
CN105163972A (zh) * 2013-09-13 2015-12-16 日立麦克赛尔株式会社 信息显示系统以及信息显示装置
US20150120137A1 (en) * 2013-10-28 2015-04-30 GM Global Technology Operations LLC Path planning for evasive steering maneuver in presence of target vehicle and surrounding objects
CN105765641A (zh) * 2013-11-27 2016-07-13 株式会社电装 驾驶辅助装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110562141A (zh) * 2019-08-27 2019-12-13 中国第一汽车股份有限公司 一种流媒体后视镜及其显示方法
WO2022016730A1 (zh) * 2020-07-23 2022-01-27 深圳市健创电子有限公司 车辆驾驶的安全预警方法、系统及相关装置
CN114312771A (zh) * 2020-09-25 2022-04-12 通用汽车环球科技运作有限责任公司 车辆接触减轻的检测、警告和准备动作

Also Published As

Publication number Publication date
US20180244198A1 (en) 2018-08-30
DE102018104012A1 (de) 2018-08-30
US10173590B2 (en) 2019-01-08

Similar Documents

Publication Publication Date Title
CN106980813B (zh) 机器学习的注视生成
CN108501807A (zh) 在车载显示器上叠置与潜在危险相关联的道路对象
EP3462377B1 (en) Method and apparatus for identifying driving lane
US11282043B2 (en) Visuailizing vehicle condition using extended reality
CN106169244B (zh) 利用人行横道识别结果的引导信息提供装置及方法
EP3376432A2 (en) Method and device to generate virtual lane
CN108571974A (zh) 使用摄像机的车辆定位
US9336630B2 (en) Method and apparatus for providing augmented reality
US10402670B2 (en) Parallel scene primitive detection using a surround camera system
CN112084232B (zh) 基于目标他车视野信息的车辆行驶风险评估方法及装置
Zhao et al. A cooperative vehicle-infrastructure based urban driving environment perception method using a DS theory-based credibility map
CN114373335A (zh) 一种车辆的碰撞预警方法、装置、电子设备及存储介质
US20210004016A1 (en) U-turn control system for autonomous vehicle and method therefor
Molloy et al. Safety Assessment for Autonomous Systems' Perception Capabilities
CN111191603B (zh) 车内人员识别方法、装置、终端设备及介质
US11590988B2 (en) Predictive turning assistant
US11904863B2 (en) Passing a curve
JP2020131957A (ja) 車両、表示方法及びプログラム
JP2014115799A (ja) ナンバープレート判定装置
CN114435385B (zh) 显示装置和显示方法
EP3964413A1 (en) Method for passing a curve
Devi et al. Speed regulation using raspberry pi for road sign recognition system
CN117360372A (zh) 夜间行车的方法、装置、车辆及存储介质
Lelowicz et al. Generic Sensor Model Usecase Exemplified by Pedestrian Crossing
CN117681766A (zh) 车辆碰撞预警方法、装置、设备、存储介质和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180907

RJ01 Rejection of invention patent application after publication