CN107209987B - 用于交通标志验证的驾驶员辅助系统和方法 - Google Patents

用于交通标志验证的驾驶员辅助系统和方法 Download PDF

Info

Publication number
CN107209987B
CN107209987B CN201480083506.1A CN201480083506A CN107209987B CN 107209987 B CN107209987 B CN 107209987B CN 201480083506 A CN201480083506 A CN 201480083506A CN 107209987 B CN107209987 B CN 107209987B
Authority
CN
China
Prior art keywords
vehicle
validity
regulation value
value
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480083506.1A
Other languages
English (en)
Other versions
CN107209987A (zh
Inventor
金重祐三
川崎智哉
克里斯托弗·吉莱
汤姆·里肯
佐野智也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Europe NV SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Europe NV SA filed Critical Toyota Motor Europe NV SA
Publication of CN107209987A publication Critical patent/CN107209987A/zh
Application granted granted Critical
Publication of CN107209987B publication Critical patent/CN107209987B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623—Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/243—Classification techniques relating to the number of classes
    • G06F18/24317—Piecewise classification, i.e. whereby each classification requires several discriminant rules
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/251—Fusion techniques of input or preprocessed data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
    • G06V10/803—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of input or preprocessed data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1253—Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display

Abstract

提供车辆的驾驶员辅助系统。系统包括图像获取装置，配置为获取有关车辆附近的一个或多个管制指示符的数据，基于数据确定管制值，以及至少一个传感器装置，配置为提供与车辆的状态有关的状态信息。还包括处理装置，处理装置被配置为基于数据确定路段状况是否适用，基于状态信息、确定的管制值、路段状况以及数据的年龄确认检测到的管制值的有效性，其中，当年龄超过与状态信息关联的预定阈值时长时，处理装置被配置为撤销有效性，并且其中，在路段状况得到确定时，处理装置被配置为增加预定阈值时长。处理装置还被配置为当有效性被确认时使管制值被显示，以及当有效性被撤销时，阻止管制值的显示。

Description

用于交通标志验证的驾驶员辅助系统和方法
技术领域
本公开涉及用于道路标志识别的系统和方法，并且更特别地，涉及减少与错误的道路标志识别有关的不利影响。
背景技术
存在为机动车的驾驶员提供辅助的各种系统。例如，一种这样的辅助的领域涉及自动的道路标志识别。
道路标志识别可以通过使用用于感知或检测机动车的周围环境的合适的设备(例如，诸如摄像机的光学设备)来完成。例如既可从车辆制造商处商业地获得系统，也可从便携导航设备(PND)制造商处商业地获得系统。PND系统是基于GPS信号和地图数据来为驾驶员提供与道路标志有关的信息的。
一些现有的系统实现用于提高识别的准确率和鲁棒性的摄像机设备。车辆的制造商使用前置摄像机设备和将信号和与车辆的驾驶状态相关的数据合并的装置。另一个选择是将信号与导航设备合并的装置。
在这样的系统中，存在某些问题，诸如，例如持续多长时间来维持对驾驶员的特定的管制值的显示(即这样的相关值是多长时间)，当多个指示符号被连续识别时怎么做，以及车辆改变方向或者穿过十字路口应该怎样影响管制值的显示。
US2012/046855公开了识别道路标志的系统和方法。道路标志的图像由至少一个图像传感器来采集。车辆计算机接收表示沿路线的一个或多个道路标志的图像数据并基于图像数据显示道路标志的一个或多个图像。显示器能够基于车辆的一个或多个行驶状态，诸如已行驶时间量、已行驶距离或速度来呈现道路标志的一个或多个状态。
EP1826736 B1公开了具有用于确定道路标志和/或道路标志的管制内容的控制器的车辆，其中道路标志被覆盖在摄像图片中。提供用于显示道路标志的表示或显示关于管制内容的信息的显示器。显示是在两个输出格式间可变的，两个输出格式分别具有道路标志确定的更小概率和道路标志确定的更高概率。单色或灰度值表示以一种输出格式进行，并且彩色表示以另一种输出格式进行。
EP 1131803 B1公开了使得交通标志能够被识别并以记忆辅助的形式显示给观察者的设备和方法。与被识别为交通标志的对象的识别有关的拒绝率保持在低的数值。来自图像传感器的图像数据在信息处理单元中被分析并被分类。与存储在存储器单元中的符号表示对应的图像部分和/或图像数据被存档于存储器单元中，并基于分类结果通过显示器单元来表示。当图像数据被进一步处理时，所提取的对象被分到交通标志的特定类别和子类别中并被分类。交通标志的合成图像被生成、存储在存储器单元中并通过显示器单元显示。
DE 29610677 U1公开了用于显示道路标志的系统，除了用于将消息显示给驾驶员的显示器之外，系统还具有信号发送器，信号发送器根据已行驶距离激活显示器并且使得显示器视觉可见或视觉不可见。
DE 198 29 162 A1公开了出于识别道路标志的目的对电子摄像机的使用以及与其协作的图像识别设备的使用，其中，如果例如在指示速度限制的道路标志之后车辆转弯离开道路，则图像识别设备可以被重置到它的开始状态。
发明内容
前面描述的配置通常缺乏用来确认检测到的标志的有效性的期望控制，尤其是当路段状况存在时。如这里所使用的，路段状况指的是一个区域，在该区域中，特定的交通规则集适用于整个区域。换句话说，并作为一个例子，在路段区域的入口处所指示的速度限制适用于由路段指示符和路段终止指示符划界的整个路段区域中的所有道路。
根据本公开的实施例，提供用于车辆的驾驶员辅助系统。系统包括图像获取装置，配置为获取关于所述车辆附近的一个或多个管制指示符的数据、基于数据确定管制值；至少一个传感器装置，配置为提供与车辆的状态相关的状态信息；以及处理装置。处理装置被配置为基于数据确定路段状况是否适用，确认检测到的管制值的有效性，当有效性被确认时使管制值被显示，以及当有效性被撤销时阻止管制值的显示。当路段状况得到确定时，处理装置被配置为增加阈值时长，并且当状态信息指示车辆已经超出管制值且超出的时长大于阈值时长时，处理装置被配置为撤销有效性。
通过提供根据本发明的实施例的这样的系统，驾驶员可以被通知当前的管制值(例如速度限制)，并可以让驾驶员放心的是，显示在车辆中的显示器上的管制值的有效性是当前的。在路段情况中这可能是特别重要的，因为在这样的路段中的分流会有更大的后果。这至少因为下述原因而成立：在进入一个路段时，驾驶员可能被通知例如适用于整个路段的速度限制值。当在该路段中驾驶期间，可能不会有该速度限制的进一步指示出现，并且驾驶员可能不确定当驾驶在这个路段中时什么速度限制适用。例如，驾驶员可能不会意识到路段限制速度仍然适用，并且可能因此加速至法定速度限制之上。这可以是特别有问题的，因为在这样的路段情况中的处罚可能显著地高于非路段情况中的处罚。因此，重要的是，直到车辆离开路段，驾驶员应当在路段中始终意识到当前管制值。
状态信息可以包括车辆速度、已行驶距离和车辆行驶方向的改变中的至少一个。
处理装置可以被配置为修改管制值的显示以反映数据的年龄。例如，随着从图像获取装置的最近管制指示符识别起始的时间增加，显示可以相应地改变。
可以从显示的灰度化和增加所显示的管制值的透明度的至少一个中选择显示修改。
根据本公开的实施例，当状态信息指示车辆的方向改变时，处理器被配置为撤销管制指示符的有效性，除非路段状况已经被确定。相反地，当确定车辆已经进入路段区域时，车辆的方向改变可以不导致管制指示符的有效性的撤销。
管制值可以包括速度限制。
根据本公开的另一个实施例，提供一种驾驶辅助的方法。该方法包括获取有关车辆附近的一个或多个管制指示符的数据，基于数据确定管制值，接收与车辆相关的状态信息，在路段状况得到确定时增加阈值时长，基于状态信息、所确定的管制值、路段状况来确认检测到的管制值的有效性，当管制值的有效性被确认时显示管制值，以及当管制值的有效性被撤销时隐藏管制值，其中当状态信息指示车辆已经超出管制值并且超出的时长大于阈值时长时，有效性被撤销。
通过提供这样的方法，本公开的实施例使得驾驶员能够被通知当前的管制值(例如速度限制)，以及使得驾驶员放心管制指示符的有效性是当前的。如上面所说明的，在它自己的情况中这可能是特别重要的。
方法可以包括基于数据的年龄修改管制值的显示，其中，可以从所显示的管制值的灰度化和增加透明度的至少一个中选择修改。
方法也可以包括当状态信息指示车辆方向的变化时撤销有效性，除非路段状况已经被确定。相反地，当路段状况有效时，由状态信息指示的车辆方向的变化可以不导致管制指示符的有效性的撤销。
管制值可以包括速度限制。
根据本公开的另一个实施例，提供一种用于车辆的驾驶员辅助系统。该系统包括：摄像机，摄像机被配置为获取有关一个或多个管制指示符的光学数据以及基于数据确定管制值；至少一个传感器，传感器被配置为提供与车辆的状态相关的状态信息；以及处理器。处理器被配置为基于数据确定路段状况是否适用，确认检测到的管制值的有效性，当有效性被确认时使得管制值被显示，以及当有效性被撤销时阻止管制值的显示。在路段状况得到确定时，处理器被配置为增加阈值时长，以及当状态信息指示车辆已经超出管制值并且超出的时长大于阈值时长时，处理器被配置为撤销管制值的有效性。
状态信息可以包括车辆速度、行驶距离和车辆行驶方向的改变中的至少一个。
处理器可以被配置为修改管制值的显示以反映数据的年龄，并且可以从所显示的管制值的灰度化和增加透明度的至少一个中选择修改。
在路段状况得到确定时，处理器可以被配置为从状态信息中忽略车辆方向改变。
除非另有矛盾，意图是可以进行上面描述的要素与说明书中的要素的组合。
应该明白的是，如所要求地，前面的一般描述和接下来的详细描述都仅是示范性的和解释性的，并且不限制本公开。
包含在本说明书中并构成本说明书的一部分的附图说明本公开的实施例，并连同说明书一起用来解释实施例的原理。
附图说明
图1示出了根据本公开的实施例的示例性的驾驶员辅助系统；
图2是表示实现根据图1的驾驶员辅助系统的示例性情形的图；
图3是表示实现根据图1的驾驶员辅助系统的另一种情形的图；
图4是显示执行本公开的实施例的示例性方法的流程图；
具体实施例
现在将详细参考本公开的示例性的实施例，其中的例子在附图中说明。尽可能地，相同的附图标记将会在所有附图中用来指示相同的或近似的部分。
图1示出了根据本公开的实施例的示例性的驾驶员辅助系统1。驾驶员辅助系统1可以包括ECU 10、图像获取装置15、一个或多个传感器20以及显示器25等。根据某些实施例，可以根据需要选择性地提供全球定位系统，例如将有关位置和地图的附加数据提供给ECU 10。
图像获取装置15可以包括例如一个或多个摄像机和/或配置用于从车辆周围的区域(例如在前进的车辆的前面)获取光学数据的其它的合适的设备。图像获取装置15也可以被配置为处理从车辆的周围获取的数据以确定管制指示符(例如，道路标志，诸如速度限制标志、路段指示符标志等)的存在。这种图像获取装置15是本领域已知的，并且本领域技术人员会理解，可以在不脱离本公开的范围的情况下在本发明的系统中实现任何这样的图像获取装置15。
图像获取装置15可以位于车辆2上以便提供车辆2的周围的足够的视野4(例如跨越接近180度的前视和侧视)，例如，图像获取装置15可以位于挡风玻璃的后面、前保险杠上、侧视镜、后视镜或车辆2上的其它的合适的安装位置，以便提供靠近管制指示符的视野4。根据某些实施例，由于美观的原因可能期望最小化图像获取装置15的可见性，并且本领域技术人员会理解，找到适合实现该目标的安装位置并同时也提供车辆2周围的足够的视野是合理的考虑。当指的是这里使用的视野时，术语”足够”意味着视野为图像获取装置15提供以至少99.9％的识别成功率识别在移动车辆周围的路上出现的管制指示符50以及将与所述管制指示符相关的信息在显示器25上显示给车辆的驾驶员的能力。
图像获取装置15可以被配置为将关于车辆2周围的管制指示符50的数据提供给ECU 10。这样的数据可以包括例如管制值(例如速度限制和/或路段指示符)。图像获取装置15也可以经由有线连接、无线连接或其它用于将数据传送到ECU的合适的传送方法将这样的数据提供到ECU10。例如，图像获取装置15可以包括用于将数据传输到ECU 10的无线通信装置(例如IEEE 802.11兼容的Wi-Fi硬件)和/或可以使用来自图像获取装置15的数据的其它设备。作为替代或者另外地，例如出于安全目的，可以提供有线连接。可以提供这样的有线连接，以例如在无线连接应该停止工作的情况下提供失效保护。
当获取与管制指示符有关的数据时，图像获取装置15可以被配置为将时间指示符(例如时间戳)分配给数据。作为替代，ECU 10可以被配置为在从图像获取装置15收到数据时将时间指示符和/或位置指示符分配给数据。通过将时间指示符分配给由图像获取装置15获取的数据，数据的年龄(例如从管制指示符被图像获取装置15识别起经过的时间)等可以被ECU 10追踪。
一个或多个传感器20可以被配置为将与车辆的状态有关的状态信息传输到ECU10。例如，车辆的状态可以包括车辆正在行驶的速度、车辆正在行驶的方向、车辆正在经历的方向转变和/或已经经历的方向转变、车辆已经行驶的距离等。
因此，一个或多个传感器20可以包括例如方向盘位置传感器、车辆速度传感器、角速度传感器等。与图像获取装置15类似，这样的传感器可以被配置为无线地和/或通过有线方式将这种状态信息提供给ECU 10，并且可以进一步包括时长信息。与状态信息相关的时长信息可以被ECU10追踪。
为了实现本公开的实施例，ECU 10可以包括任何合适的设备，该设备被配置为操纵数据、执行计算、执行用于做出决策的代码、和执行导致给车辆2的操作者进行信息显示的代码。例如，ECU 10可以包括各种模拟的和/或数字的电路，并且可以包括集成电路，诸如RISC处理器、i386处理器、ASIC处理器等。通常地，现代的车辆中的车载计算机包括这样的处理器，并且本领域技术人员会理解，本发明的ECU 10可以被包括在这样的车载计算机中，或者可以被分离地提供。本领域的技术人员也会理解，这里所描述的示例性的电路和处理器意图不是限制性的，并且可以实施任何合适的设备。
ECU 10可以被连接到与车辆2相关的一个或多个数据库和/或其它存储器(例如RAM、ROM等)以便使得能够存储车辆相关数据和在车辆功能的处理，例如管制指示符验证期间会使用的值(例如阈值数值)。本领域的技术人员会认识到，这里讨论的关于任何这种数据库和/或存储器的信息意图都不是限制性的。
ECU 10可以被配置为接收来自图像获取装置15和一个或多个传感器22的数据，以提供与本公开相关的功能。例如，ECU 10可以同时从图像获取装置15和一个或多个传感器接收关于管制指示符的数据(例如流数据)。这样的数据可以包括例如速度限制和/或路段指示符。
ECU 10因此包括用于从图像获取装置15接收数据和从一个或多个传感器22接收状态信息的一个或多个装置。例如ECU 10可以被连接到一个或多个接口，例如网络接口等，所述一个或多个接口被配置为无线地和/或通过有线方式接收状态信息中的数据。
基于提供给ECU 10的数据和状态信息，ECU 10可以被配置为执行各种操作来确认或撤销与所识别的管制指示符50相关联的管制值的有效性等。出于解释本公开的实施例的目的，将描述使用速度限制标志50和路段限制标志55的例子。然而，本领域的技术人员会理解这仅仅是示例性的并且意图不是限制性的。
显示器25可以被配置为将由ECU 10提供的信息显示给车辆2的驾驶员。图2示出了提供车辆2的驾驶员可能感兴趣的信息的示例显示器25。如图2所述，正确的速度限制在显示器25上当前被显示给驾驶员的信息中。
显示器25可以是用于将可看见的和/或可听到的信息提供给车辆2的驾驶员的任何合适的设备。例如，显示器25可以包括平视显示器(例如在驾驶员前面的挡风玻璃上)、监视器、仪表盘显示器等。
图4是描绘示例性处理例程的流程图，该处理例程用于基于从一个或多个传感器20接收的车辆的状态信息和由图像获取装置15提供的与一个或多个管制指示符有关的数据确认或撤销图3描绘的示例性场景中的管制指示符的有效性。
重要的是，流程图400中没有示出可以由ECU 10执行(例如在启动车辆时)的有关驾驶员辅助系统的某些系统变量的初始化。例如，出于各种的确认的目的，例如确定速度限制标志50的有效性，ECU 10可以使用阈值时长。这样的阈值时长值可以如上面所提到的那样被存储在数据库中。这个阈值时长可以例如被初始设置为预定的量，例如10秒、20秒等。这个预定阈值数值可以依据关于车辆状态和图像获取装置15提供的数据的特定状况而被改变，这将在下面被更详细地讨论。
图像获取装置15可以获取与针对车辆2当前正行驶在的道路的管制指示符有关的图像数据，并将这个信息发送给ECU 10(步骤405)。也是在步骤405，一个或多个传感器20可以获取与车辆2有关的状态信息，例如车辆速度、车辆行驶方向以及车辆角速度，并将这个信息提供给ECU10。在接收到状态信息和管制指示符数据时，ECU 10可以被配置为确定与管制指示符相关联的管制数据的有效性。
根据某些实施例，图像获取装置15可以被配置为将与管制指示符相关联的管制值提供给ECU 10。作为替代，ECU 10可以被配置为使用由图像获取装置15提供的数据来确定管制值。例如，在图像获取装置15获取图像和指示50公里每小时的速度限制的速度限制标志的情况下，数据可以被提供给ECU 10，并且ECU 10可以随后确定管制值等于50公里每小时的速度限制，于是可以使得在显示器25上显示指示50公里每小时的速度限制的管制指示符的图像。
另外，图像获取装置15可以被配置为向ECU 10提供指示路段状况是否存在的数据。换句话说，当车辆进入路段状况存在的路段区域时，图像获取装置15可以获得例如如图3的管制指示符55所示的数据。就30公里每小时的速度限制而言，图3的管制指示符55表明不仅管制值(例如30公里每小时的速度限制)有效，而且路段状况也是有效的。当ECU10确定路段状况有效时(步骤410：是)，ECU 10将阈值时间增加至路段状况阈值时间(步骤415)。路段状况阈值时间可以按照需要算数地或几何地大于初始的预定阈值数值。例如，当初始的预定阈值数值等于10秒时，路段状况阈值时间可以等于20秒、40秒、100秒或甚至更大，以便使得能够对路段40中管制指示符50进行期望的确认。
如果路段状况不是有效的，或者在路段状况得到确定之后，ECU 10可以确定车辆2是否正在超出与所确定的管制值相关联的管制值(例如速度限制)(步骤420)。例如，在管制指示符提供50公里每小时的管制值的情况下，ECU 10可以使用一个或多个传感器20提供的状态信息来确定与车辆2相关联的速度。如果与车辆2相关联的速度超出管制值(例如车辆正在以70公里每小时的速度行驶)(步骤420：是)，ECU 10可以进一步地使用状态信息来确定车辆已经超出管制值的时长。例如，ECU 10可以使用在预定时间段内车辆2已行驶的距离来确定超出时长。如果超出时长超过当前设定的阈值时间，即路段状况下的路段阈值时间或初始的预定阈值时间，视情形而定(步骤425：是)，则管制指示符的有效性会被撤销(步骤430)。
当ECU 10确定车辆没有超出管制值(步骤420：否)或者车辆超出管制值的时间不多于阈值时间(步骤425：否)时，处理器于是可以访问来自一个或多个传感器22的额外状态信息来确定车辆是否已经经历方向改变(步骤435)。例如，ECU 10可以分析方向盘位置状态信息、和/或GPS数据(在可用的情况下)、和/或来自图像获取装置15的能够指示车辆2方向改变的信息。
当ECU 10确定车辆2已经经历方向改变(步骤435：是)时，ECU10可以再次检查路段状况是否有效。例如，ECU 10可以简单地检查阈值时间是否已经被设置为路段阈值时间，并且如果是这样，ECU 10则识别路段状况(步骤440：是)。如上所述，当路段状况有效时，与其相关联的管制值因此在整个路段是适用的，并且因此方向改变不应影响管制值的有效性。因此，ECU 10确认有效性并且使管制值被显示在显示器25上(步骤450)。ECU 10然后继续接收状态信息和管制数据的过程，以持续地等待新的管制指示符。
如果处理器确定路段状况不是有效的(步骤440：否)，那么当车辆已经改变了先前所确定的方向时，管制指示符不再是有效的并且应该被撤销。因此，ECU 10使管制指示符的有效性被撤销(步骤430)，并且从显示器25上移除管制指示符的显示。ECU 10然后继续接收状态信息和管制数据的过程，以持续地等待新的管制指示符。
本领域技术人员将认识到，在不脱离本公开的范围的情况下，可以提供额外的变型。例如，因为与管制指示符50相关联的数据的年龄可以被ECU 10追踪，由于在图像识别装置15没有识别出新的管制指示符50的情况下年龄会增加，这样的年龄增长的管制指示符的有效性可能存在问题。因此，ECU 10可以在显示器25上导致管制值的显示的修改。例如，ECU10可以在显示器25上修改灰度化和/或透明度的一般程度以将管制值的年龄的指示给予驾驶员。
当然，上面的例子仅仅是示例性的并且意图不是限制性的。
在整个说明书中，包括权利要求，术语“包括”应该被理解为“包括至少一个”的同义词，除非另有说明。被描述的要素的特定值应该被理解为在可接受的制造业或工业公差范围内是本领域技术人员已知晓的，并且任何对术语“实质地”和/或“大概地”和/或“一般地”的使用应该被理解为意味着落入这样的可接受的公差范围内。
如果国家、国际或其他标准机构的任何标准(例如ISO等)被参考，这样的参考意图在于参考到本说明书的优先权日期为止的国家或国际标准机构定义的标准。对这些标准的任何后续的实质性改变意图并不在于修改本公开和/或权利要求的范围和/或定义。
尽管已经参考特定实施例描述了本公开，但是应当理解，这些实施例仅仅是本公开的原理和应用的说明。
意图是说明书和实施例仅被认为是示例性的，本公开的真实范围由所附权利要求书来指示。

Claims (17)

1.一种车辆的驾驶员辅助系统，包括：
图像获取装置，配置为：
获取关于所述车辆附近的一个或多个管制指示符的数据；
基于所述数据确定管制值；和
至少一个传感器装置，配置为提供与所述车辆的状态有关的状态信息；
处理装置，配置为：
基于所述数据确定路段状况是否适用，其中，所述路段状况是一个区域，在该区域中，特定的交通规则集适用于整个区域；
确认检测到的所述管制值的有效性；
当所述有效性被确认时，使所述管制值被显示；和
当所述有效性被撤销时，阻止所述管制值的显示；
其中，在路段状况得到确定时，所述处理装置被配置为增加阈值时长，并且
其中，当所述状态信息指示所述车辆已经超出所述管制值，并且超出的时长大于所述阈值时长时，所述处理装置被配置为撤销所述有效性。
2.根据前述的权利要求所述的驾驶员辅助系统，其中，所述状态信息包括车辆速度、已行驶距离和车辆行驶方向的改变中的至少一个。
3.根据前述权利要求中的任意一项所述的驾驶员辅助系统，其中，所述处理装置被配置为修改所述管制值的显示以反映所述数据的年龄。
4.根据权利要求3所述的驾驶员辅助系统，其中，所述修改是从所显示的所述管制值的灰度化和增加所显示的所述管制值的透明度的至少一个中选择的。
5.根据权利要求1或2所述的驾驶员辅助系统，其中，当所述状态信息指示所述车辆方向的改变时，所述处理装置被配置为撤销所述有效性，除非路段状况已经被确定。
6.根据权利要求1或2所述的驾驶员辅助系统，其中所述管制值是速度限制。
7.一种驾驶员辅助方法，包括：
获取关于车辆附近的一个或多个管制指示符的数据；
基于所述数据确定管制值；
接收与所述车辆有关的状态信息；
在路段状况得到确定时，增加阈值时长，其中，所述路段状况是一个区域，在该区域中，特定的交通规则集适用于整个区域；
基于所述状态信息、确定的所述管制值、所述路段状况确认检测到的所述管制值的有效性；和
当所述有效性被确认时，显示所述管制值，当所述有效性被撤销时，隐藏所述管制值，其中
当所述状态信息指示所述车辆已经超出所述管制值，并且超出的时长大于所述阈值时长时，所述有效性被撤销。
8.根据权利要求7所述的方法，包括：
基于所述数据的年龄修改所述管制值的显示。
9.根据权利要求8所述的方法，其中，所述修改是从所显示的所述管制值的灰度化和增加所显示的所述管制值的透明度的至少一个中选择的。
10.根据权利要求7-9中的任何一个所述的方法，包括：
当所述状态信息指示车辆方向的改变时，撤销所述有效性，除非路段状况已经被确定。
11.根据权利要求7-9中的任何一个所述的方法，其中所述管制值是速度限制。
12.一种车辆的驾驶员辅助系统，包括：
摄像机，配置为获取关于一个或多个管制指示符的光学数据并基于所述数据确定管制值；和
至少一个传感器，配置为提供与所述车辆的状态有关的状态信息；
处理器，配置为：
基于所述数据确定路段状况是否适用，其中，所述路段状况是一个区域，在该区域中，特定的交通规则集适用于整个区域；
确认检测到的所述管制值的有效性；和
当所述有效性被确认时，使所述管制值被显示，以及当所述有效性被撤销时，阻止所述管制值的显示；
其中，在路段状况得到确定时，所述处理器被配置为增加阈值时长，和
其中，当所述状态信息指示所述车辆已经超出所述管制值，并且超出的时长大于所述阈值时长时，所述处理器被配置为撤销所述有效性。
13.根据权利要求12所述的驾驶员辅助系统，其中，所述状态信息包括车辆速度、已行驶距离和车辆行驶方向的改变中的至少一个。
14.根据权利要求12所述的驾驶员辅助系统，其中，所述处理器被配置为修改所述管制值的显示以反映所述数据的年龄。
15.根据权利要求14所述的驾驶员辅助系统，其中，所述修改是从所显示的所述管制值的灰度化和增加所显示的所述管制值的透明度的至少一个中选择的。
16.根据权利要求12所述的驾驶员辅助系统，其中，当所述状态信息指示车辆方向的改变时，所述处理器被配置为撤销所述管制值的有效性，除非路段状况已经被确定。
17.根据权利要求12所述的驾驶员辅助系统，其中所述管制值是速度限制。
CN201480083506.1A 2014-10-14 2014-10-14 用于交通标志验证的驾驶员辅助系统和方法 Active CN107209987B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2014/072059 WO2016058635A1 (en) 2014-10-14 2014-10-14 Systems and methods for traffic sign validation

Publications (2)

Publication Number Publication Date
CN107209987A CN107209987A (zh) 2017-09-26
CN107209987B true CN107209987B (zh) 2021-06-25

Family

ID=51691080

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480083506.1A Active CN107209987B (zh) 2014-10-14 2014-10-14 用于交通标志验证的驾驶员辅助系统和方法

Country Status (6)

Country Link
US (1) US10573175B2 (zh)
EP (1) EP3207494B1 (zh)
JP (1) JP6496018B2 (zh)
KR (1) KR20170105481A (zh)
CN (1) CN107209987B (zh)
WO (1) WO2016058635A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101678095B1 (ko) * 2015-07-10 2016-12-06 현대자동차주식회사 차량, 및 그 제어방법
JPWO2017145945A1 (ja) * 2016-02-25 2018-11-29 京セラ株式会社 ステレオカメラ装置、車両および視差算出方法
US11361562B2 (en) 2017-08-08 2022-06-14 3M Innovative Properties Company Pathway article authentication
WO2019063096A1 (en) * 2017-09-29 2019-04-04 Toyota Motor Europe SYSTEMS AND METHODS FOR DRIVING ASSISTANCE
US10713510B2 (en) * 2017-12-29 2020-07-14 Waymo Llc Autonomous vehicle system configured to respond to temporary speed limit signs
CN108520634A (zh) * 2018-03-28 2018-09-11 吉利汽车研究院（宁波）有限公司 高速匝道限速识别方法、装置及电子设备
US11106925B2 (en) * 2018-10-25 2021-08-31 Intel Corporation Computer-assisted or autonomous driving traffic sign recognition method and apparatus
US11030898B2 (en) * 2018-12-13 2021-06-08 Here Global B.V. Methods and systems for map database update based on road sign presence
CN113242486B (zh) * 2021-05-08 2023-02-03 深圳市美恩微电子有限公司 一种主动降噪的蓝牙耳机

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1244086A2 (de) * 2001-03-21 2002-09-25 AM3 AutoMotive MultiMedia AG Verfahren und Vorrichtung zur Ermittlung der für einen Strassenabschnitt geltenden Verkehrszeichen
CN102376166A (zh) * 2010-08-23 2012-03-14 福特全球技术公司 用于在机动车辆内识别道路标志的装置和方法
CN103942971A (zh) * 2013-01-21 2014-07-23 沃尔沃汽车公司 车辆驾驶员辅助设备
DE102013003798A1 (de) * 2013-03-05 2014-09-11 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Fahrerassistenzsystem

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3471835B2 (ja) * 1992-11-30 2003-12-02 株式会社ザナヴィ・インフォマティクス 車載用情報表示装置
JP3226153B2 (ja) * 1996-03-18 2001-11-05 シャープ株式会社 マルチメディアデータ表示装置
JP3435623B2 (ja) * 1996-05-15 2003-08-11 株式会社日立製作所 交通流監視装置
DE29610677U1 (de) 1996-06-18 1996-09-12 Terbrack Leo Dipl Ing Anordnung zur Anzeige von Verkehrshinweisen
DE19829162A1 (de) 1998-06-30 2000-01-05 Erwin Dietz Verwendung einer elektronischen Kamera und einer mit ihr zusammenarbeitenden Bilderkennungseinrichtung in einem Automobil zum Erkennen von Verkehrszeichen
DE19852631C2 (de) 1998-11-14 2001-09-06 Daimler Chrysler Ag Vorrichtung und Verfahren zur Verkehrszeichenerkennung
JP3948431B2 (ja) * 2003-04-09 2007-07-25 トヨタ自動車株式会社 車両用周辺監視装置
JP4354217B2 (ja) * 2003-06-11 2009-10-28 クラリオン株式会社 道路標識等表示装置
DE102004042382B4 (de) 2004-09-02 2013-03-07 Robert Bosch Gmbh Verfahren und System zum Hinweis auf Verkehrszeichen
EP1736360A1 (en) * 2005-06-23 2006-12-27 Mazda Motor Corporation Blind-Spot detection system for vehicle
DE102006008656A1 (de) 2006-02-24 2007-08-30 Audi Ag Kraftfahrzeug mit einer Einrichtung zur Verkehrszeichenerkennung
EP2383713B1 (en) * 2006-12-06 2013-05-29 Mobileye Technologies Limited Detecting and recognizing traffic signs
EP2048476B1 (de) * 2007-10-08 2013-12-11 Delphi Technologies, Inc. Fahrerunterstützungsverfahren
JP4941234B2 (ja) * 2007-10-31 2012-05-30 株式会社エクォス・リサーチ 道路標識表示装置
US8843292B2 (en) 2009-02-20 2014-09-23 Nissan North America, Inc. Adaptive speed control device
JP5361541B2 (ja) * 2009-06-02 2013-12-04 三菱電機株式会社 標識認識装置
CN101783072B (zh) * 2009-12-23 2012-07-04 中国科学院自动化研究所 一种可变限速的车辆超速违章记录系统和方法
DE102010013380A1 (de) * 2010-03-30 2011-10-06 Gm Global Technology Operations Llc (N.D.Ges.D. Staates Delaware) Verfahren zur Bereitstellung von Informationen eines Verkehrszeichens und Fahrzeug
US20130034261A1 (en) * 2011-03-04 2013-02-07 Quantum Signal, Llc Road sign detection and tracking within field-of-view (FOV) video data
DE102011109387A1 (de) * 2011-08-04 2013-02-07 Conti Temic Microelectronic Gmbh Verfahren zur Erkennung von Verkehrszeichen
DE102011081456A1 (de) 2011-08-24 2013-02-28 Ford Global Technologies, Llc Vorrichtung und Verfahren zur Verkehrszeichenerkennung
JP2013097620A (ja) * 2011-11-01 2013-05-20 Toyota Motor Corp 運転支援装置
DE102012021419B3 (de) * 2012-10-30 2013-07-25 Audi Ag Verfahren zum Warnen eines Fahrers eines Fahrzeugs vor einem Überschreiten einer Geschwindigkeitsbeschränkung und Fahrzeug
DE102012024613A1 (de) * 2012-12-17 2014-06-18 GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) Verfahren zum Betreiben eines Kraftfahrzeugs und Kraftfahrzeug
DE102012025067A1 (de) * 2012-12-19 2014-06-26 Valeo Schalter Und Sensoren Gmbh Fahrerassistenzeinrichtung mit kombinierter Verkehrszeichenerfassung und Markierungserfassung für ein Kraftfahrzeug und entsprechendes Verfahren
US20140327772A1 (en) * 2013-05-03 2014-11-06 Magna Electrics Inc. Vehicle vision system with traffic sign comprehension

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1244086A2 (de) * 2001-03-21 2002-09-25 AM3 AutoMotive MultiMedia AG Verfahren und Vorrichtung zur Ermittlung der für einen Strassenabschnitt geltenden Verkehrszeichen
CN102376166A (zh) * 2010-08-23 2012-03-14 福特全球技术公司 用于在机动车辆内识别道路标志的装置和方法
CN103942971A (zh) * 2013-01-21 2014-07-23 沃尔沃汽车公司 车辆驾驶员辅助设备
DE102013003798A1 (de) * 2013-03-05 2014-09-11 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Fahrerassistenzsystem

Also Published As

Publication number Publication date
JP2017538995A (ja) 2017-12-28
US20170243483A1 (en) 2017-08-24
US10573175B2 (en) 2020-02-25
KR20170105481A (ko) 2017-09-19
WO2016058635A1 (en) 2016-04-21
JP6496018B2 (ja) 2019-04-03
EP3207494A1 (en) 2017-08-23
EP3207494B1 (en) 2021-12-22
CN107209987A (zh) 2017-09-26

Similar Documents

Publication Publication Date Title
CN107209987B (zh) 用于交通标志验证的驾驶员辅助系统和方法
CN107054218B (zh) 标识信息显示装置和方法
CN108263383B (zh) 在协同自适应巡航控制系统中控制速度的装置和方法
US9747800B2 (en) Vehicle recognition notification apparatus and vehicle recognition notification system
US9892641B2 (en) Regulatory information notifying device and method
CN108454631B (zh) 信息处理装置、信息处理方法以及记录介质
US9218535B2 (en) Arrangement and method for recognizing road signs
EP3093829B1 (en) Vehicle speed limit display device
CN106997677B (zh) 车辆用标识显示装置和方法
CN112771592B (zh) 用于警告机动车的驾驶员的方法、控制设备及机动车
CN113593301B (zh) 车辆加塞的预判断方法、车辆及计算机可读存储介质
US20170178591A1 (en) Sign display apparatus and method for vehicle
US11361687B2 (en) Advertisement display device, vehicle, and advertisement display method
CN108572366B (zh) 移动物体检测装置和方法以及使用所述装置的警告系统
US20190161007A1 (en) Unilluminated vehicle indication based on communication
US10380437B2 (en) Systems and methods for traffic sign assistance
JP7432198B2 (ja) 状況認識推定システム及び運転支援システム
JP6740644B2 (ja) 報知装置
US20200256695A1 (en) Systems and methods for driver assistance
CN111508238A (zh) 用于在车辆中指示交通信息的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211112

Address after: Toyota, Aichi, Japan

Patentee after: Toyota Motor Corp.

Address before: Brussels, Belgium

Patentee before: TOYOTA MOTOR EUROPE

TR01 Transfer of patent right