CN106663374A - 信号机检测装置以及信号机检测方法 - Google Patents

信号机检测装置以及信号机检测方法 Download PDF

Info

Publication number
CN106663374A
CN106663374A CN201480080421.8A CN201480080421A CN106663374A CN 106663374 A CN106663374 A CN 106663374A CN 201480080421 A CN201480080421 A CN 201480080421A CN 106663374 A CN106663374 A CN 106663374A
Authority
CN
China
Prior art keywords
semaphore
vehicle
search
region
masking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480080421.8A
Other languages
English (en)
Other versions
CN106663374B (zh
Inventor
松尾治夫
山井大贵
冲孝彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Publication of CN106663374A publication Critical patent/CN106663374A/zh
Application granted granted Critical
Publication of CN106663374B publication Critical patent/CN106663374B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623—Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18—Propelling the vehicle
    • B60W30/18009—Propelling the vehicle related to particular drive situations
    • B60W30/18154—Approaching an intersection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00—Special features of vehicle units
    • B60Y2400/30—Sensors
    • B60Y2400/301—Sensors for position or displacement
    • B60Y2400/3015—Optical cameras
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Traffic Control Systems (AREA)

Abstract

提供可以根据信号机的遮蔽状态适当地选择成为检测对象的信号机的信号机检测装置。信号机检测装置(10)包括：被安装在车辆上，拍摄周围的图像的摄像单元(31)；检测车辆的位置的车辆位置检测单元(11)；存储地图信息的地图信息单元(12)；从车辆的位置以及地图信息估计车辆周围的信号机的位置，设定被估计为存在信号机的信号机搜索区域的信号机位置估计单元(13)；在图像上搜索信号机搜索区域，检测信号机的信号机检测单元(32)；以及估计在信号机搜索区域是否为信号机被持续遮蔽的遮蔽持续状态的遮蔽估计单元(23)，在由遮蔽估计单元(23)估计为遮蔽持续状态的情况下，信号机位置估计单元(13)根据遮蔽持续状态选择信号机搜索区域。

Description

信号机检测装置以及信号机检测方法
技术领域
本发明涉及信号机检测装置以及信号机检测方法。
背景技术
以往，作为用于检测在车辆前方存在的信号机的方法，已知在车辆前方存在多个信号机的情况下，检测图像数据上的大小最大的信号机的方法(例如，参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本专利特开2007－257299号公报
发明内容
但是，在专利文献1中记载的方法中，在最大的信号机被前行车辆等物体遮蔽的情况下，即使该遮蔽是暂时的，检测对象也切换到次大的信号机。因此，有难以适当地选择成为检测对象的信号机的情况。
本发明是鉴于上述课题而完成的，其目的是提供可以根据信号机的遮蔽持续状态，适当地选择成为检测对象的信号机的信号机检测装置以及信号机检测方法。
本发明的一个方式的信号机检测装置以及信号机检测方法的特征在于，通过车辆上安装的摄像单元拍摄周围的图像，从车辆的位置以及地图信息，估计车辆周围的信号机的位置，设定被估计为存在信号机的信号机搜索区域，在图像上搜索信号机搜索区域，检测信号机，估计在信号机搜索区域中信号机是否为被持续遮蔽的遮蔽持续状态，在被估计为处于遮蔽持续状态的情况下，根据遮蔽持续状态选择信号机搜索区域。
附图说明
图1是表示本发明的实施方式的信号机检测装置的结构的一例的方框图。
图2是表示本发明的实施方式的位置估计系统的结构的一例的方框图。
图3是表示本发明的实施方式的遮蔽估计系统的结构的一例的方框图。
图4是表示本发明的实施方式的信号机检测系统的结构的一例的方框图。
图5是表示本发明的实施方式的车辆控制系统的结构的一例的方框图。
图6是表示本发明的实施方式的信号机检测方法的一例的流程图。
图7是表示本发明的实施方式的信号机位置估计处理的一例的流程图。
图8是表示本发明的实施方式的遮蔽估计处理的一例的流程图。
图9是表示本发明的实施方式的信号机检测处理的一例的流程图。
图10是表示本发明的实施方式的车辆控制处理的一例的流程图。
图11(a)以及图11(b)是表示本发明的第1实施例的前方图像的时间变化的一例的概略图。
图12(a)是表示本发明的第1实施例的至停车位置的距离的时间变化的定时图。图12(b)是表示本发明的第1实施例的车速的时间变化的定时图。图12(c)是表示本发明的第1实施例的物体位置以及信号机搜索区域位置的时间变化的定时图。图12(d)是表示本发明的第1实施例的信号机搜索区域相对物体位置的相对位置的时间变化的定时图。
图13(a)以及图13(b)是表示本发明的第2实施例的前方图像的时间变化的一例的概略图。
图14(a)是表示至本发明的第2实施例的停车位置为止的距离的时间变化的定时图。图14(b)是表示本发明的第2实施例的车速的时间变化的定时图。图14(c)是表示本发明的第2实施例的物体位置以及信号机搜索区域位置的时间变化的定时图。图14(d)是表示本发明的第2实施例的信号机搜索区域相对物体位置的相对位置的时间变化的定时图。
图15(a)以及图15(b)是表示本发明的第3实施例的前方图像的时间变化的一例的概略图。
图16(a)是表示离本发明的第3实施例的停车位置的距离的时间变化的定时图。图16(b)是表示本发明的第3实施例的车速的时间变化的定时图。图16(c)是表示本发明的第3实施例的物体位置以及信号机搜索区域位置的时间变化的定时图。图16(d)是表示本发明的第3实施例的信号机搜索区域相对物体位置的相对位置的时间变化的定时图。
图17(a)以及图17(b)是表示本发明的第4实施例的前方图像的时间变化的一例概略图。
图18(a)是表示本发明的第4实施例的至停车位置的距离的时间变化的定时图。图18(b)是表示本发明的第4实施例的车速的时间变化的定时图。图18(c)是表示本发明的第4实施例的物体位置以及信号机搜索区域位置的时间变化的定时图。图18(d)是表示本发明的第4实施例的信号机搜索区域相对物体位置的相对位置的时间变化的定时图。
具体实施方式
参照附图，说明本发明的实施方式。在附图的记载中对于同一部分附加同一标号，省略说明。
[信号机检测装置]
本发明的实施方式的信号机检测装置10能够适用于可自动驾驶的车辆。如图1所示，本发明的实施方式的信号机检测装置10包括：位置估计系统1、遮蔽估计系统2、信号机检测系统3以及车辆控制系统4。
位置估计系统1、遮蔽估计系统2、信号机检测系统3以及车辆控制系统4可以使用主要包括中央处理装置(CPU)、存储器以及输入输出单元的微控制器等来实现。CPU通过执行被预先安装的计算机程序，构成多个信息处理单元1～4。而且，微控制器也可以与车辆的自动驾驶控制中使用的电子控制单元(ECU)兼用。
在位置估计系统1中输入包含从全球定位系统(GPS)或车轮的旋转数得到的本车辆的位置的位置信息D1、以及包含物体(遮蔽物)造成的信号机的遮蔽状态等的遮蔽信息D4。作为遮蔽信号机的物体，不特别限定，例如举出前行车辆或相向车辆、行道树、广告牌、标识等。位置估计系统1估计本车辆接近中的十字路口存在的信号机的位置。位置估计系统1输出包含从本车辆的位置直至接近中的十字路口为止的距离的道路信息D2、以及与信号机的估计位置有关的信号机区域信息D3。
在遮蔽估计系统2中输入从位置估计系统1输出的信号机区域信息D3、从在本车辆上安装的激光、毫米波雷达、视频摄像机等各种传感器得到的传感器信息D5、从本车辆上安装的摄像单元等得到的影像信号D6、从信号机检测系统3输出的信号机检测结果D7。传感器信息D5包含直至本车辆周边的物体的距离。影像信号D6包含在道路画的白线、黄线等限制信息。遮蔽估计系统2估计接近中的十字路口存在的信号机的遮蔽状态，输出估计结果作为遮蔽信息D4。
在信号机检测系统3中输入从位置估计系统1输出的信号机区域信息D3、从本车辆上安装的摄像单元等得到的影像信号D6。信号机检测系统3从周围的图像检测信号机，输出信号机检测结果D7。
在车辆控制系统4中，输入从位置估计系统1输出的道路信息D2、从遮蔽估计系统2输出的遮蔽信息D4、从信号机检测系统3输出的信号机检测结果D7、包含从本车辆上安装的各种传感器等得到的车速的车辆信号D8。车辆控制系统4决定例如所谓对前行车辆的追随、减速停止、加速的至十字路口的接近方法(车辆控制方法)，作为用于车辆控制的控制信息D9输出。
更具体地说，如图2所示，位置估计系统1具有车辆位置检测单元11、地图信息单元(地图数据库)12以及信号机位置估计单元13。车辆位置检测单元11根据包含从GPS或车轮的旋转数等得到的本车辆的位置的位置信息D1、从地图信息单元12中存储的地图信息得到的道路信息D2，检测本车辆相对地图上的道路的相对位置以及姿态，作为车辆位置D11输出。
地图信息单元12在存储器中预先存储包含道路信息D2的地图信息。地图信息单元12根据由车辆位置检测单元11输出的车辆位置D11，从地图信息提取在本车辆接近中的十字路口设置的信号机的信号机坐标D12以及车辆行进方向的道路信息D2。
信号机位置估计单元13根据从地图信息单元12得到的信号机坐标D12，估计信号机相对本车辆的相对位置。信号机位置估计单元13进一步根据信号机的相对位置，设定被估计为信号机存在的可能性高的区域作为信号机搜索区域。可以根据车辆位置D11的检测精度等，在规定的范围内适当设定信号机搜索区域。
在接近中的十字路口存在多个信号机的情况下，信号机位置估计单元13对多个信号机的每一个设定信号机搜索区域。进而，信号机位置估计单元13按照规定的优先顺序，从多个信号机搜索区域中，选择并设定一个或者多个信号机搜索区域作为信号机的检测对象区域。而且，也可以不按照规定的优先顺序，从多个信号机搜索区域缩小选择信号机的检测对象区域，而对全部多个信号机搜索区域，暂时尝试信号机的检测后，将检测出信号机的信号机搜索区域缩小选择作为信号机的检测对象区域。
作为规定的优先顺序，例如，与位于本车道侧的信号机相比，将位于相向车道侧的信号机的优先顺序设定得高。位于本车道侧的信号机被前行车辆、路肩的行道树等持续地遮蔽的可能性高。另一方面，位于相向车道侧的信号机，仅被相向车辆暂时地遮蔽短时间的可能性高。因此，通过使位于相向车道侧的信号机优先，可以提高信号机的检测准确率。
而且，作为规定的优先顺序，在相同的车道侧存在多个信号机的情况下，与离本车辆远的信号机相比，离本车辆近的信号机的优先顺序被设定得高。由于离本车辆越近的信号机，越大地映入图像，所以可以容易地检测信号机。
而且，在前行车辆追随控制中，将位于相向车道侧的信号机的信号机搜索区域优先地选择并设定为信号机的检测对象区域。在前行车辆追随控制中，本车道侧的信号机因前行车辆而被持续遮蔽。因此，通过选择位于相向车道侧的信号机的信号机搜索区域，可以提高信号机的检测效率。规定的优先顺序除了上述的以外，也可以适当设定。规定的优先顺序也可以被预先存储在存储器中。
进而，信号机位置估计单元13根据从遮蔽估计系统2输出的遮蔽信息D4选择信号机搜索区域。例如，在当前设定的信号机的信号机搜索区域未被遮蔽，或者虽然被遮蔽但是是暂时的，估计被消除的情况下，信号机位置估计单元13进行维持当前设定的信号机搜索区域的选择。另一方面，当前设定的信号机的信号机搜索区域当前被遮蔽，或者估计将来被遮蔽的情况、并且估计其为被持续遮蔽的情况下，进行将信号机的检测对象区域从当前设定的信号机搜索区域切换到其它信号机的信号机搜索区域的选择。换言之，选择从信号机的检测对象区域除去当前设定的信号机搜索区域，选择其它信号机的信号机搜索区域设定作为新的信号机的检测对象区域。信号机位置估计单元13输出包含作为信号机的检测对象区域选择出的信号机搜索区域的信号机区域信息D3。而且，在当前设定的信号机搜索区域有多个的情况下，在一部分信号机搜索区域当前被遮蔽，或者估计为将来被遮蔽的情况、并且估计其为持续的遮蔽的情况下，选择从信号机的检测对象区域除去被估计持续的遮蔽的信号机搜索区域，继续选择其它的信号机搜索区域作为信号机的检测对象区域。
如图3所示，遮蔽估计系统2包括物体检测单元21以及遮蔽估计单元22。
物体检测单元21根据包含至车辆周围存在的物体的距离的传感器信息D5以及车辆周围的白线、黄线等包含限制信息的影像信号D6，检测车辆周围存在的物体。作为被检测的物体，例如设想前行车辆或相向车辆、行道树、广告牌，标识等。物体检测单元21还对检测到的物体每一个，计算物体相对本车辆的相对位置、移动方向以及移动速度，作为物体位置D21输出。
遮蔽估计单元22根据从物体检测单元21输出的物体位置D21和从信号机位置估计单元13输出的信号机区域信息D3，从信号机搜索区域以及物体的位置关系，判断从本车辆观察时信号机搜索区域是否当前被物体遮蔽。这时，在信号机搜索区域被物体完全遮蔽的情况下可以判定为被遮蔽着，或者，也可以在信号机搜索区域被物体部分地遮蔽的情况下，也判定为被遮蔽着。而且，在从信号机检测系统3输出的信号机检测结果D7表示不能检测信号机的情况下，遮蔽估计单元22也可以判定为信号机搜索区域被遮蔽着。
遮蔽估计单元22进而根据从物体检测单元21输出的物体位置D21和从信号机位置估计单元13输出的信号机区域信息D3，由本车辆、信号机搜索区域以及物体的相对位置、移动方向以及移动速度，判定(估计)信号机搜索区域是否将来被物体遮蔽。
在判定为信号机搜索区域当前被遮蔽着或者将来被遮蔽的情况下，遮蔽估计单元22进一步判定是持续的遮蔽，或者是暂时的遮蔽。所谓持续的遮蔽，例如设想本车道侧的信号机一直被行道树遮蔽的状况、存在前行车辆，每当车间距离变窄时本车道侧的信号机被遮蔽的情况。所谓暂时的遮蔽，例如设想虽然相向车道侧的信号机被相向车辆暂时地遮蔽，但是由于本车辆和相向车辆错车，遮蔽被消除的情况。
作为是否为持续的遮蔽，或者是否为暂时的遮蔽的判定方法的一例，遮蔽估计单元22由本车辆、物体以及信号机搜索区域的相对位置、移动方向以及移动速度等，计算信号机搜索区域的遮蔽时间(换言之，至遮蔽消除为止的时间)。如果计算出的遮蔽时间为规定时间(阈值)以下，则遮蔽估计单元22进一步判定为暂时的遮蔽。另一方面，如果遮蔽时间比规定时间(阈值)长，则判定为持续的遮蔽。用于与遮蔽时间比较的阈值能够通过遮蔽估计单元22等适当设定。阈值例如设定为，在该阈值以下，则车辆可能减速，在十字路口的停止位置停车的时间。例如可以从本车辆的位置、直至十字路口的停止位置的距离、本车辆的车速、允许的减速度计算本车辆必须开始减速控制的时间来设定该情况下的阈值。而且，也可以在物体以及信号机搜索区域至少向相同的方向移动的情况下，遮蔽估计单元22判定为持续的遮蔽。
如图4所示，信号机检测系统3包括摄像单元31以及信号机检测单元32。摄像单元31例如为CCD摄像机或CMOS摄像机等数字摄像机，拍摄车辆周围的风景，取得周围的图像。摄像单元31的视角既可以被固定，也能够根据影像信号D6等在垂直方向以及水平方向适当调整。
信号机检测单元32将摄像单元31拍摄的图像D31与从信号机位置估计单元13输出的信号机区域信息D3相关联，在图像D31上设定信号机搜索区域。信号机检测单元32进一步搜索图像D31上的信号机搜索区域，检测信号机。作为信号机的检测方法，例如能够采用基于商用电源的交流周期的同步检波处理、色相以及形状的类似判定处理、以及其他公知的算法。在检测出信号机的情况下，信号机检测单元32输出包含信号机的灯光的颜色信息的信号机检测结果D7。在未检测出信号机的情况下，信号机检测单元32输出包含未能检测出信号机的信号机检测结果D7。
如图5所示，车辆控制系统4包括车辆信号获取单元41、车间以及停止位置计算单元42以及车辆控制单元43。车辆信号获取单元41获取车辆信号D8，从车辆信号D8提取包含本车辆的车速的车速信息D41。
在从遮蔽估计单元22输出的遮蔽信息D4表示被前行车辆遮蔽着的情况下，车辆间以及停止位置计算单元42根据车速信息D41等，计算前行车辆与本车辆的车间距离。而且，不限于前行车辆，车间以及停止位置计算单元42还对能够成为前进道路上的障碍物的物体，计算直至碰撞的时间。
车间及停止位置计算单元42根据从地图信息单元12输出的道路信息D2，在下一个十字路口有停止线等应停止的位置(停止位置)的情况下，计算从本车辆的位置至停止位置的距离。车间以及停止位置计算单元42的计算结果作为车间以及停止位置信息D42输出。
车辆控制单元43根据从信号机检测单元32输出的信号机检测结果D7和从车间以及停止位置计算单元42输出的车间以及停止位置信息D42，选择接近十字路口时的车辆控制方法，作为控制信息D9输出。
例如，在遮蔽信息D4虽然表示信号机被前行车辆持续地遮蔽着，但是根据车间及停止位置信息D42判断为在以通常的减速度减速了的情况下可以停车在停止线跟前的情况下，车辆控制单元43选择追随前行车辆。而且，在遮蔽信息D4表示信号机被前行车辆持续地遮蔽，并且根据车间以及停止位置信息D42判断为不能以通常的减速度在停止位置之前停车的情况下，车辆控制单元43选择减速。
而且，在遮蔽信息D4表示信号机未被遮蔽，信号机检测结果D7中包含的信号机的灯光的颜色是绿色的情况下，车辆控制单元43选择维持当前的车速。而且，在遮蔽信息D4表示信号机未被遮蔽，信号机检测结果D7中包含的信号机的灯光的颜色为红色，并且从当前的车速以通常的减速度停车在停止位置的情况下，车辆控制单元43选择减速。而且，在遮蔽信息D4表示信号机未被遮蔽，信号机检测结果D7中包含的信号机的灯光的颜色从红色在减速中变为了绿色的情况下，车辆控制单元43选择用于将速度恢复至限制速度的加速。
而且，在遮蔽信息D4表示信号机被遮蔽的情况下，车辆控制单元43也可以根据本车辆、物体以及信号机的相对的位置关系，向消除信号机的遮蔽的位置关系来控制车辆(例如转向或者加减速等)。例如，在本车道侧的信号机被前行车辆遮蔽的情况下，通过减速来扩大与前行车辆的车间距离，可以容易检测信号机。而且，通过转向控制，以在车道内靠近左右的一方，可以容易检测信号机。
[信号机检测方法]
接着，参照图6～图10的流程图，说明一例本发明的实施方式的信号机检测方法。本发明的实施方式的信号机检测方法的一连串的处理可以以规定的间隔反复执行。
图6表示信号机检测方法的全体处理的流程。在图6的步骤S1中，主要是位置估计系统1估计车辆接近中的十字路口中设置的信号机的位置。在图7的流程图中表示该细节。在步骤S11中，车辆位置检测单元11根据位置信息D1以及道路信息D2检测本车辆的位置以及姿态，作为车辆位置D11输出。在步骤S12中，地图信息单元12根据车辆位置D11，输出车辆接近中的十字路口中设定的信号机的信号机坐标D12。
在步骤S13中，信号机位置估计单元13从车辆位置D11以及信号机坐标D12判定有无在接近中的十字路口设置的信号机。在判定为没有信号机的情况下完成处理。另一方面，在判定为有信号机的情况下，转移至步骤S14。在步骤S14中，信号机位置估计单元13从车辆位置D11以及信号机坐标D12，估计信号机相对本车辆的相对位置。信号机位置估计单元13还将估计信号机存在的可能性高的区域设定作为信号机搜索区域。在有多个信号机搜索区域的情况下，信号机位置估计单元13还按照规定的优先顺序选择并设定1个或者多个信号机搜索区域作为信号机的检测对象区域。
返回图6，在步骤S2中，主要是遮蔽估计系统2估计物体造成的信号机的遮蔽状态。图8的流程图中表示该细节。在步骤S21中，物体检测单元21根据包含至车辆周围的物体的距离的传感器信息D5以及影像信号D6等，检测车辆周围的物体。物体检测单元21还对检测到的物体的每一个，计算物体相对本车辆的相对位置、移动方向以及移动速度。
在步骤S23中，遮蔽估计单元22根据信号机搜索区域以及物体的位置关系，判定信号机搜索区域是否被物体遮蔽着。进而，遮蔽估计单元22根据信号机搜索区域以及物体的位置、移动方向以及移动速度，判定信号机是否将来被物体遮蔽。在判定为信号机当前和将来都不被遮蔽的情况下，转移至步骤S29，信号机位置估计单元13不切换而维持当前设定的信号机搜索区域。另一方面，在步骤S23中判定为信号机当前被遮蔽、或者将来被遮蔽的情况下，转移至步骤S24。
在步骤S24中，遮蔽估计单元22根据信号机搜索区域以及物体的位置、移动方向以及移动速度，计算至信号机搜索区域的遮蔽消除的时间(遮蔽时间)。在步骤S25中，遮蔽估计单元22从存储器读出阈值，判定遮蔽时间是否为阈值以上。在遮蔽时间为阈值以下的情况下，判定为暂时的遮蔽，转移至步骤S29，信号机位置估计单元13不切换当前设定的信号机搜索区域而维持。另一方面，在步骤S25中，至遮蔽消除为止的时间比阈值长的情况下，判定为持续的遮蔽，转移至步骤S26。
在步骤S26中，信号机位置估计单元13判定有无当前设定的信号机搜索区域的信号机的其它信号机的候选。在判定为有其它信号机的候选的情况下，转移至步骤S27，将信号机的检测对象切换至与其它信号机对应的信号机搜索区域。另一方面，在步骤S26中判定为没有其它信号机的候选的情况下，转移至步骤S28，进行车辆控制，以便即使信号机被遮蔽也能够确保安全。
返回图6，在步骤S3中，主要是信号机检测系统3检测车辆周围的信号机。图9的流程图表示该细节。在步骤S31中，摄像单元31获取图像D31。在步骤S32中，信号机检测单元32将图像D31和信号机搜索区域相关联，在图像D31上设定信号机搜索区域。在步骤S33中，信号机检测单元32搜索图像D31上的信号机搜索区域，检测信号机。
返回图6，在步骤S4中，主要是车辆控制系统4根据信号机的遮蔽状态控制车辆。图10的流程图表示该细节。在步骤S41中，车辆信号获取单元41获取车辆信号D8，提取车辆信号D8中包含的车速信息D41。在步骤S42中，车间及停止位置计算单元42根据道路信息D2等，计算本车辆与前行车辆的车间距离、从本车辆的位置至十字路口的停车位置的距离。在步骤S43中，车辆控制单元43根据遮蔽信息D4、信号机检测结果D7、车间及停车位置信息D42等选择车辆控制方法，作为控制信息D9输出。车辆上安装的ECU按照控制信息进行车辆控制。
[第1实施例]
接着，作为本发明的第1实施例，使用图11以及图12，说明信号机被信号机附近的行道树或广告牌持续地遮蔽的情况。
如图11(a)所示，在车辆前方的十字路口，设置本车道侧的信号机101以及相向车道侧的信号机102。本车道侧的信号机101的信号机搜索区域A11被路肩的行道树100部分地遮蔽。如图11(b)所示，即使车辆前进，本车道侧的信号机101的信号机搜索区域A11也被行道树100持续地遮蔽。另一方面，相向车道侧的信号机102的信号机搜索区域A12不被遮蔽地映入图像。
在这样状况中，图12(a)表示至车辆的停止位置的距离的时间变化，图12(b)表示车速的时间变化，图12(c)表示物体(行道树)100以及信号机搜索区域A11、A12相对前方图像中的消失点的位置(车宽方向的重心位置)的时间变化，图12(d)表示信号机搜索区域A11、A12相对物体(行道树)100的相对位置(车宽方向的重心位置)的时间变化。
将时刻t10作为当前时刻，如图12(c)以及图12(d)所示，遮蔽估计单元22判定为信号机搜索区域A11以及行道树100的位置接近，信号机搜索区域A11被行道树100遮蔽。进而，由于时刻t10以后，信号机搜索区域A11以及行道树100一边接近一边向大致同一方向以大致同一速度移动，并且遮蔽时间比规定时间(阈值)T1长，所以遮蔽估计单元22估计为持续的遮蔽。
因此，在信号机搜索区域A11被选择作为信号机的检测对象的情况下，信号机位置估计单元13将其它信号机102的信号机搜索区域A12切换为信号机的检测对象。
信号机检测单元32从信号机搜索区域A12检测信号机102。在信号机检测单元32检测到信号机102的灯光为红色的情况下，如图12(a)以及图12(b)所示，在时刻t11中开始减速，在时刻t12在十字路口的停止位置停车。
[第2实施例]
接着，作为本发明的第2实施例，使用图13以及图14，说明被前行车辆持续地遮蔽的情况。
图13(a)是追随前行车辆200的状态，在车辆前方的十字路口有本车道侧的信号机201以及相向车道侧的信号机202。如图13(b)所示，在前行车辆200减速了的情况或由于红灯信号而停车了的情况下，本车辆与前行车辆200的车间距离变窄，本车道侧的信号机201的信号机搜索区域A21被遮蔽的状况变多，称为持续的遮蔽状态。
在这样状况中，图14(a)表示至停止位置的距离的时间变化，图14(b)表示车速的时间变化，图14(c)表示物体(前行车辆)200以及信号机搜索区域A21、A22相对前方图像中的消失点的位置(车宽方向的重心位置)的时间变化，图14(d)表示信号机搜索区域A21、A22相对物体(前行车辆)200的相对位置(车宽方向的重心位置)的时间变化。
将时刻t20作为当前时刻，如图14(c)以及图14(d)所示，遮蔽估计单元22判定为在将来的时刻t21中信号机搜索区域A21被前行车辆200遮蔽。进而，因为前行车辆200的估计位置不太变化，遮蔽时间比规定时间(阈值)T2长，所以遮蔽估计单元22估计为前行车辆200造成的持续的遮蔽。
在信号机搜索区域A21被设定作为信号机的检测对象的情况下，信号机位置估计单元13将相向车道侧的信号机202的信号机搜索区域A22切换为信号机的检测对象。而且，从信号机搜索区域A21至信号机搜索区域A22的切换，既可以在时刻t20马上进行，也可以在时刻t21信号机搜索区域A21被遮蔽时进行。
信号机检测单元32从作为检测对象所选择的信号机搜索区域A22中检测信号机202。在通过信号机检测单元32检测到信号机202的灯光为红色的情况下，如图14(a)以及图14(b)所示，在时刻t22中开始减速，在时刻t23中在十字路口的停止位置停车。
[第3实施例]
接着，作为本发明的第3实施例，使用图15以及图16，说明有前行车辆，在十字路口停车的情况。
图15(a)是表示在十字路口中本车辆与前行车辆300一起停车的状态，图15(b)是表示前行车辆300开动后的状态。如图15(a)以及图15(b)所示，在车辆前方的本车道侧有信号机301，在相向车道侧有信号机302。
在这样状况中，图16(a)表示离停止位置的距离的时间变化，图16(b)表示车速的时间变化，图16(c)表示前行车辆300的位置(重心位置)和信号机搜索区域A31、A32相对前方图像的消失点的位置(车宽方向的重心位置)的时间变化，图16(d)表示信号机搜索区域A31、A32相对前行车辆300的相对位置(车宽方向的重心位置)的时间变化。
在时刻t30～t31中，如图16(a)以及图16(b)所示，本车辆以及前行车辆300在停车中，抑制本车辆的开动。而且，设为预先选择信号机搜索区域A32作为信号机的检测对象。
在时刻t31中，如图16(c)以及图16(d)所示，遮蔽估计单元22判定为前行车辆300开动，信号机搜索区域A31的遮蔽已消除。之后，在时刻t32中，如图16(a)以及图16(b)所示，本车辆开动。
在时刻t33中，如图16(c)以及图16(d)所示，信号机搜索区域A32成为视角之外。因此，在此之前的时刻t32中，将信号机的检测对象区域从信号机搜索区域A32切换设定为遮蔽被消除了的信号机搜索区域A31。
[第4实施例]
接着，作为本发明的第4实施例，使用图17以及图18，说明相向车辆等造成的暂时的遮蔽的情况。
图17(a)表示有相向车辆400，信号机搜索区域A41被遮蔽的状况，图17(b)表示由于移动，使得本车辆以及相向车辆400错车，与信号机搜索区域A41对应的信号机401映入的状况。
在这样状况中，图18(a)表示至停止位置的距离的时间变化，图18(b)表示车速的时间变化，图18(c)表示物体(相向车辆)400以及信号机搜索区域A41相对前方图像中的消失点的位置(车宽方向的重心位置)的时间变化，图18(d)表示信号机搜索区域A41相对物体(相向车辆)400的相对位置(车宽方向中的重心位置)的时间变化。
将时刻t40作为当前时刻，如图18(c)以及图18(d)所示，遮蔽估计单元22根据为在将来的时刻t41中信号机搜索区域A41被相向车辆400遮蔽。
遮蔽估计单元22进一步从相向车辆400相对信号机搜索区域A41的移动方向以及移动速度，计算遮蔽时间T41。遮蔽估计单元22进一步将遮蔽时间T4与减速、停车所需要的规定时间(阈值)T42进行比较。遮蔽时间T41为规定时间T42以下，所以估计为暂时的遮蔽。
即使在同一十字路口内存在其它信号机的候选，信号机位置估计单元13也维持当前设定的信号机搜索区域A41，等待信号机搜索区域A41的遮蔽的消除。在时刻t42中遮蔽消除时，信号机检测单元32搜索信号机搜索区域A41，检测信号机。
[本发明的效果]
按照本发明的实施方式，估计信号机的物体造成的当前以及将来的遮蔽状态，根据估计出的遮蔽状态选择并设定信号机搜索区域，从而可以适当地选择成为信号机的检测对象的信号机搜索区域。其结果，可以高精度地检测十字路口的信号机。
而且，在信号机当前被遮蔽着或者将来被遮蔽的情况下，估计信号机的遮蔽时间，在估计出的遮蔽时间为阈值以下的情况下，通过维持设定的信号机搜索区域，可以在暂时的遮蔽消除后检测信号机，不对信号机搜索区域进行不需要的切换即可。其结果，可以减轻信号机检测装置10的负担。
而且，在车辆的周围存在多个信号机，并且估计出的遮蔽时间比阈值长的情况下，通过从设定的信号机搜索区域切换到其它信号机的信号机搜索区域，可以适当地选择可检测信号机的信号机搜索区域。
而且，通过从车辆以及多个信号机的位置关系设定优先顺序，按照优先顺序选择其它信号机的信号机搜索区域，可以从多个信号机中适当地选择更容易检测的信号机的信号机搜索区域。
而且，通过在前行车辆追随控制中，选择位于相向车道侧的信号机的信号机搜索区域，可以提高信号机的检测效率。
而且，通过根据本车辆、物体以及信号机的相对的位置关系，向消除信号机的遮蔽的位置关系控制车辆，可以容易检测信号机。
如上述那样记载了本发明的实施方式，但是成为该公开的一部分的论述以及附图不应理解为限定本发明。对本领域的技术人员来说，从该公开显而易见各种代替实施方式、实施例以及运用技术。
标号说明
1 位置估计系统
2 遮蔽估计系统
3 信号机检测系统
4 车辆控制系统
10 信号机检测装置
11 车辆位置检测单元
12 地图信息单元
13 信号机位置估计单元
21 物体检测单元
22 遮蔽估计单元
31 摄像单元
32 信号机检测单元
41 车辆信号获取单元
42 车间以及停止位置计算单元
43 车辆控制单元

Claims (7)

1.一种信号机检测装置，其特征在于，包括：
摄像单元，被安装在车辆上，拍摄周围的图像；
车辆位置检测单元，检测所述车辆的位置；
地图信息单元，存储地图信息；
信号机位置估计单元，从所述车辆的位置以及所述地图信息，估计所述车辆周围的信号机的位置，设定被估计为存在所述信号机的信号机搜索区域；
信号机检测单元，在所述图像上搜索所述信号机搜索区域，检测所述信号机；以及
遮蔽估计单元，估计在所述信号机搜索区域中所述信号机是否为持续被遮蔽的遮蔽持续状态，
在由所述遮蔽估计单元估计为所述遮蔽持续状态的情况下，所述信号机位置估计单元根据所述遮蔽持续状态选择所述信号机搜索区域。
2.如权利要求1所述的信号机检测装置，其特征在于，
在所述信号机当前被遮蔽着或者将来被遮蔽的情况下，所述遮蔽估计单元估计所述信号机的遮蔽时间，
在所述设定的信号机搜索区域中所述估计的遮蔽时间为阈值以下的情况下，所述信号机位置估计单元维持所述设定的信号机搜索区域。
3.如权利要求2所述的信号机检测装置，其特征在于，
在所述车辆周围的信号机存在多个，并且所述估计的遮蔽时间比所述阈值长的情况下，所述信号机位置估计单元从所述设定的信号机搜索区域切换到其它信号机的信号机搜索区域。
4.如权利要求3所述的信号机检测装置，其特征在于，
所述信号机位置估计单元从所述车辆以及所述多个信号机的位置关系设定优先顺序，按照所述优先顺序选择所述其它信号机的信号机搜索区域。
5.如权利要求1至4的任意一项所述的信号机检测装置，其特征在于，
在前行车辆追随控制中，所述信号机位置估计单元选择位于相向车道侧的信号机的信号机搜索区域。
6.如权利要求1至5的任意一项所述的信号机检测装置，其特征在于，
根据所述车辆、物体以及所述信号机的相对的位置关系，向所述信号机的遮蔽被消除的位置关系，控制所述车辆。
7.一种信号机检测方法，其特征在于，包括：
通过车辆上安装的摄像单元拍摄周围的图像的步骤；
从所述车辆的位置以及地图信息，估计所述车辆周围的信号机的位置的步骤；
设定被估计为存在所述信号机的信号机搜索区域的步骤；
在所述图像上搜索所述信号机搜索区域，检测所述信号机的步骤；
估计在所述信号机搜索区域中所述信号机是否为被持续遮蔽的遮蔽持续状态的步骤；以及
在估计为所述遮蔽持续状态的情况下，根据所述遮蔽持续状态选择所述信号机搜索区域的步骤。
CN201480080421.8A 2014-07-08 2014-07-08 信号机检测装置以及信号机检测方法 Active CN106663374B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/068105 WO2016006029A1 (ja) 2014-07-08 2014-07-08 信号機検出装置及び信号機検出方法

Publications (2)

Publication Number Publication Date
CN106663374A true CN106663374A (zh) 2017-05-10
CN106663374B CN106663374B (zh) 2018-08-28

Family

ID=55063706

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480080421.8A Active CN106663374B (zh) 2014-07-08 2014-07-08 信号机检测装置以及信号机检测方法

Country Status (8)

Country Link
US (1) US9922259B2 (zh)
EP (1) EP3168823B1 (zh)
JP (1) JP6256611B2 (zh)
CN (1) CN106663374B (zh)
BR (1) BR112017000267B1 (zh)
MX (1) MX354764B (zh)
RU (1) RU2634852C1 (zh)
WO (1) WO2016006029A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110869988A (zh) * 2017-07-13 2020-03-06 宝马股份公司 用于自动化地纵向引导机动车直至停止的系统和方法
JP2020042815A (ja) * 2018-09-07 2020-03-19 バイドゥ オンライン ネットワーク テクノロジー （ベイジン） カンパニー リミテッド 交通信号機の認識方法、装置、機器、記憶媒体及び車両
CN112141176A (zh) * 2020-09-30 2020-12-29 青岛海信微联信号有限公司 一种可移动设备搜索的方法及设备

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107615351B (zh) * 2015-06-05 2018-10-30 日产自动车株式会社 信号机检测装置及信号机检测方法
DE102015224112A1 (de) * 2015-12-02 2017-06-08 Bayerische Motoren Werke Aktiengesellschaft System zur Beeinflussung von Fahrzeugsystemen durch Berücksichtigung relevanter Signalgeber
US10124804B2 (en) * 2017-04-12 2018-11-13 GM Global Technology Operations LLC Method and apparatus for traffic control device detection optimization
JP6866934B2 (ja) 2017-12-05 2021-04-28 日産自動車株式会社 車両の制御方法及び制御装置
JP7067067B2 (ja) 2018-01-11 2022-05-16 トヨタ自動車株式会社 信号機認識装置、及び自動運転システム
US11760280B2 (en) 2018-01-12 2023-09-19 Uatc, Llc Systems and methods for streaming processing for autonomous vehicles
JP7003735B2 (ja) * 2018-02-28 2022-01-21 トヨタ自動車株式会社 運転支援装置
US10884424B2 (en) * 2018-09-07 2021-01-05 GM Global Technology Operations LLC Traffic light occlusion detection for autonomous vehicle
JP2020106961A (ja) * 2018-12-26 2020-07-09 トヨタ自動車株式会社 信号機判定装置
JP7347193B2 (ja) * 2019-12-18 2023-09-20 トヨタ自動車株式会社 運転支援装置
US20210211568A1 (en) * 2020-01-07 2021-07-08 Motional Ad Llc Systems and methods for traffic light detection
WO2021153051A1 (ja) * 2020-01-29 2021-08-05 日立Astemo株式会社 車両制御装置、車両制御方法またはプログラム
JP7409257B2 (ja) 2020-08-07 2024-01-09 株式会社デンソー 信号機認識装置、信号機認識方法、車両制御装置
US11681780B2 (en) 2020-09-30 2023-06-20 Nissan North America, Inc. Annotation and mapping for vehicle operation in low-confidence object detection conditions
CN112699773B (zh) * 2020-12-28 2023-09-01 阿波罗智联(北京)科技有限公司 交通灯识别方法、装置及电子设备
KR102652486B1 (ko) * 2021-09-24 2024-03-29 (주)오토노머스에이투지 라이다를 이용한 신호등 정보 예측 방법 및 이를 이용한 서버
CN116071945A (zh) * 2021-10-29 2023-05-05 通用汽车环球科技运作有限责任公司 交通灯可见性检测和增强显示

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007320458A (ja) * 2006-06-01 2007-12-13 Toyota Motor Corp 車間距離制御装置
CN101395645A (zh) * 2006-03-06 2009-03-25 丰田自动车株式会社 图像处理系统及方法
JP2013171489A (ja) * 2012-02-22 2013-09-02 Fuji Heavy Ind Ltd 車外環境認識装置および車外環境認識方法
CN103680176A (zh) * 2012-09-18 2014-03-26 中国移动通信集团公司 基于位置信息的信号灯识别系统

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4577655B2 (ja) 2005-12-27 2010-11-10 アイシン・エィ・ダブリュ株式会社 地物認識装置
JP2007257299A (ja) 2006-03-23 2007-10-04 Honda Motor Co Ltd 車外認識装置
WO2008038370A1 (en) * 2006-09-28 2008-04-03 Pioneer Corporation Traffic information detector, traffic information detecting method, traffic information detecting program, and recording medium
JP2008149786A (ja) * 2006-12-14 2008-07-03 Mazda Motor Corp 車両用運転支援装置及び車両用運転支援システム
JP4915281B2 (ja) 2007-05-24 2012-04-11 アイシン・エィ・ダブリュ株式会社 信号機検出装置、信号機検出方法及びプログラム
JP4852482B2 (ja) * 2007-06-25 2012-01-11 日立オートモティブシステムズ株式会社 車両走行支援制御装置
US8576069B2 (en) * 2009-10-22 2013-11-05 Siemens Corporation Mobile sensing for road safety, traffic management, and road maintenance
JP5591613B2 (ja) * 2010-07-27 2014-09-17 株式会社小糸製作所 車両検出装置
RU2469410C1 (ru) * 2011-04-04 2012-12-10 Общество с ограниченной ответственностью "СПбГАСУ-ТУДД" Система управления движением на многополосных перекрестках
RU116258U1 (ru) * 2011-11-15 2012-05-20 Игорь Юрьевич Мацур Система регулирования движения транспортных средств

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101395645A (zh) * 2006-03-06 2009-03-25 丰田自动车株式会社 图像处理系统及方法
JP2007320458A (ja) * 2006-06-01 2007-12-13 Toyota Motor Corp 車間距離制御装置
JP2013171489A (ja) * 2012-02-22 2013-09-02 Fuji Heavy Ind Ltd 車外環境認識装置および車外環境認識方法
CN103680176A (zh) * 2012-09-18 2014-03-26 中国移动通信集团公司 基于位置信息的信号灯识别系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110869988A (zh) * 2017-07-13 2020-03-06 宝马股份公司 用于自动化地纵向引导机动车直至停止的系统和方法
US11235740B2 (en) 2017-07-13 2022-02-01 Bayerische Motoren Werke Aktiengesellschaft System and method for automatically longitudinally guiding a motor vehicle to a standstill
CN110869988B (zh) * 2017-07-13 2022-05-03 宝马股份公司 用于自动化地纵向引导机动车直至停止的系统和方法
JP2020042815A (ja) * 2018-09-07 2020-03-19 バイドゥ オンライン ネットワーク テクノロジー （ベイジン） カンパニー リミテッド 交通信号機の認識方法、装置、機器、記憶媒体及び車両
US11126876B2 (en) 2018-09-07 2021-09-21 Baidu Online Network Technology (Beijing) Co., Ltd. Method for recognizing traffic light, device, and vehicle
CN112141176A (zh) * 2020-09-30 2020-12-29 青岛海信微联信号有限公司 一种可移动设备搜索的方法及设备

Also Published As

Publication number Publication date
BR112017000267B1 (pt) 2021-12-28
JPWO2016006029A1 (ja) 2017-05-25
JP6256611B2 (ja) 2018-01-10
WO2016006029A1 (ja) 2016-01-14
RU2634852C1 (ru) 2017-11-07
EP3168823A1 (en) 2017-05-17
CN106663374B (zh) 2018-08-28
US9922259B2 (en) 2018-03-20
EP3168823B1 (en) 2020-05-13
EP3168823A4 (en) 2018-01-03
US20180012088A1 (en) 2018-01-11
MX354764B (es) 2018-03-21
BR112017000267A2 (pt) 2017-10-31
MX2017000063A (es) 2017-04-27

Similar Documents

Publication Publication Date Title
CN106663374B (zh) 信号机检测装置以及信号机检测方法
US11216675B2 (en) Systems and methods for detecting an object
US20200312127A1 (en) Method and Apparatus for Determining Driving Strategy of a Vehicle
US11713042B2 (en) Systems and methods for navigating a vehicle among encroaching vehicles
KR101997436B1 (ko) 차량 모션 데이터를 사용하는 자동차 카메라에 의한 오브젝트 위치 측정
US10339805B2 (en) Traffic light recognition device and traffic light recognition method
US9665781B2 (en) Moving body detection device and moving body detection method
US11749112B2 (en) Warning device, warning method, and warning program
CN106463051B (zh) 信号机识别装置以及信号机识别方法
CN108473131A (zh) 停车辅助方法和装置
US20130215270A1 (en) Object detection apparatus
JP2020125033A (ja) 表示制御装置および表示制御プログラム
CN107111741A (zh) 用于具有摄像机的机动车的方法，设备和系统
KR102074209B1 (ko) 운전 주의 정보 안내 장치 및 방법
EP3287940A1 (en) Intersection detection system for a vehicle
JP6174884B2 (ja) 車外環境認識装置および車外環境認識方法
JP7226583B2 (ja) 信号機認識方法及び信号機認識装置
JP7255707B2 (ja) 信号機認識方法及び信号機認識装置
EP4060639B1 (en) Traffic signal recognition method and traffic signal recognition device
KR101739163B1 (ko) 차량 카메라의 영상 보정 방법 및 이를 이용하는 영상 처리 장치
WO2020249558A1 (en) Method for detecting a railroad signal
KR20240081060A (ko) 영상속 객체의 시각적 표지를 보정하는 방법 및 그 장치
KR20240081059A (ko) 영상속 객체의 큐보이드 획득 방법 및 그 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant