CN103718124A - 传感器域选择 - Google Patents

传感器域选择 Download PDF

Info

Publication number
CN103718124A
CN103718124A CN201180071321.5A CN201180071321A CN103718124A CN 103718124 A CN103718124 A CN 103718124A CN 201180071321 A CN201180071321 A CN 201180071321A CN 103718124 A CN103718124 A CN 103718124A
Authority
CN
China
Prior art keywords
vehicle
sensor
control strategy
change
sensors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201180071321.5A
Other languages
English (en)
Other versions
CN103718124B (zh
Inventor
纳撒尼尔·费尔菲尔德
朱佳俊
德米特里·A·多尔戈夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Giant Holdings Ltd.
Waymo LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN103718124A publication Critical patent/CN103718124A/zh
Application granted granted Critical
Publication of CN103718124B publication Critical patent/CN103718124B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • G05D1/024Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors in combination with a laser
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0255Control of position or course in two dimensions specially adapted to land vehicles using acoustic signals, e.g. ultra-sonic singals

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Automation & Control Theory (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本公开的方面总体上涉及对自主车辆的安全和高效使用。更具体地,自主车辆(301、501)能够检测在其的在传感器域(410、411、430、431、420A-423A、420B-423B、570-75、580)内的周围环境中的物体。响应于检测到物体,计算机(110)可以调整自主车辆的速度或改变方向。然而,在一些示例中,传感器域可以基于在车辆的周围环境中的物体或其他特征而改变或变得不那么可靠。结果,车辆的计算机(110)可以计算传感器减弱区域(620、720)的大小和形状以及基于该减弱区域的新的传感器域。响应于识别传感器减弱区域或新的传感器域,车辆的计算机可以改变车辆的控制策略。

Description

传感器域选择
相关申请的交叉引用
本申请要求于2011年6月1日提交的、题为“Sensor FieldSelection”的美国专利申请No.13/150,385的权益,特此通过引用将其公开内容合并入本文。
背景技术
自主车辆使用各种计算系统来帮助将乘客从一个位置运送到另一个位置。一些自主车辆可能需要来自诸如飞行员、驾驶员或乘客的操作者的一些初始输入或连续输入。例如自动驾驶仪系统的其他系统可以仅在该系统已被启用时才被使用,其允许操作者从手动模式(其中操作者实行对车辆的移动的高度控制)切换到自主模式(其中车辆本质上自行驾驶)到介于两者之间的模式。
这样的车辆装备有各种类型的传感器,以便检测在周围环境中的物体。例如,自主车辆可以包括激光器、声呐器、雷达、相机以及扫描并记录来自车辆的周围环境的数据的其他设备。这些设备相组合(以及在一些情况下,单独)可以用来构建在车辆的周围环境中检测到的物体的3D模型。
发明内容
本公开的一个方面提供了用于控制具有自主操作模式的车辆的方法。该方法包括通过处理器基于第一控制策略来控制车辆的操作;基于车辆的一个或多个传感器的视场来识别传感器域;从一个或多个传感器中的所选择的传感器接收传感器数据;基于传感器数据来识别一个或多个传感器的传感器感知力的改变,传感器感知力的改变包括检测在传感器域内的物体的减弱的能力;基于该改变来确定第二控制策略;以及通过处理器基于第二控制策略来控制车辆的操作。
在一个示例中,该方法还包括基于所接收的传感器数据来检测物体和该物体在传感器域中的位置,并且识别该改变基于物体的位置。在另一个示例中,识别传感器感知力的改变包括基于物体在传感器域中的位置来计算减弱的传感器感知力的区域,并且确定第二控制策略基于减弱的传感器感知力的区域。在另一个示例中,识别传感器感知力的改变包括基于物体在传感器域中的位置来计算当前传感器域,并且确定第二控制策略基于当前传感器域。在另一个示例中,物体是另一个车辆。在另一个示例中,该方法还包括确定传感器数据指示一个或多个传感器中的给定一个正在提供不可靠信息;以及识别改变基于所确定的指示。在另一个示例中,不可靠信息包括一个或多个相机图像。在另一个示例中,该方法还包括基于传感器数据来确定不再存在一个或多个传感器的传感器感知力的改变;基于不再存在改变的所述确定,控制车辆的操作进一步基于第一控制策略。在另一个示例中,基于第一控制策略来控制车辆的操作包括朝第一方向操纵车辆,以及基于第二控制策略来控制车辆的操作包括朝与第一方向不同的第二方向操纵车辆。在另一个示例中,基于第一控制策略来控制车辆的操作包括以第一速度操纵车辆,以及其中基于第二控制策略来控制车辆的操作包括以与第一速度不同的第二速度操纵车辆。
本公开的另一个方面提供了用于控制具有自主操作模式的车辆的设备。该设备包括用于检测在车辆的周围环境中的物体的一个或多个传感器以及被耦接到该一个或多个传感器的处理器。该处理器可操作来基于第一控制策略来控制车辆的操作;基于车辆的一个或多个传感器的视场来识别传感器域;从一个或多个传感器中的所选择的传感器接收传感器数据;基于传感器数据来识别一个或多个传感器的传感器感知力的改变,传感器感知力的改变包括检测在传感器域内的物体的减弱的能力;基于该改变来确定第二控制策略;以及基于第二控制策略来控制车辆的操作。
在一个示例中,该处理器可进一步操作来基于所接收的传感器数据来检测物体和该物体在传感器域中的位置,并且该处理器基于物体的位置来识别该改变。在另一个示例中,该处理器可操作来通过基于物体在传感器域中的位置来计算减弱的传感器感知力的区域来识别传感器感知力的改变,并且确定第二控制策略基于减弱的传感器感知力的区域。在另一个示例中,该处理器可操作来通过基于物体在传感器域中的位置来计算当前传感器域来识别传感器感知力的改变,并且确定第二控制策略基于当前传感器域。在另一个示例中,该处理器可进一步操作来将物体识别为另一个车辆。在另一个示例中,该处理器可进一步操作来确定传感器数据指示一个或多个传感器中的给定一个正在提供不可靠信息,并且该处理器基于所确定的指示来识别改变。在另一个示例中,不可靠信息包括一个或多个相机图像。在另一个示例中,该处理器还可操作来基于传感器数据来确定不再存在一个或多个传感器的传感器感知力的改变;并且基于不再存在改变的确定,基于第一控制策略来控制车辆的操作。在另一个示例中,该处理器还可操作来通过朝第一方向操纵车辆,来基于第一控制策略控制车辆的操作,以及通过朝与第一方向不同的第二方向操纵车辆,来基于第二控制策略控制车辆的操作。在另一个示例中,该处理器还可操作来通过以第一速度操纵车辆,来基于第一控制策略控制车辆的操作,以及通过以与第一速度不同的第二速度操纵车辆,来基于第二控制策略控制车辆的操作。
本公开的又另一个方面提供了其上存储有程序的计算机可读指令的有形的计算机可读存储介质,所述指令当由处理器执行时,促使该处理器执行控制具有自主操作模式的车辆的方法。该方法包括通过处理器基于第一控制策略来控制车辆的操作;基于车辆的一个或多个传感器的视场来识别传感器域,传感器感知力的改变包括检测在传感器域内的物体的减弱的能力;从一个或多个传感器中的所选择的传感器接收传感器数据;基于传感器数据来识别一个或多个传感器的传感器感知力的改变;基于该改变来确定第二控制策略;以及通过处理器基于第二控制策略来控制车辆的操作。
在一个示例中,该方法还包括基于所接收的传感器数据来检测物体和该物体在传感器域中的位置,并且识别该改变基于物体的位置。在另一个示例中,识别传感器感知力的改变包括基于物体在传感器域中的位置来计算减弱的传感器感知力的区域,并且确定第二控制策略基于减弱的传感器感知力的区域。在另一个示例中,识别传感器感知力的改变包括基于物体在传感器域中的位置来计算当前传感器域,并且确定第二控制策略基于当前传感器域。在另一个示例中,物体是另一个车辆。在另一个示例中,该方法还包括确定传感器数据指示一个或多个传感器中的给定一个正在提供不可靠信息;以及识别改变基于所确定的指示。在另一个示例中,不可靠信息包括一个或多个相机图像。在另一个示例中,该方法还包括基于传感器数据来确定不再存在一个或多个传感器的传感器感知力的改变;基于不再存在改变的所述确定,控制车辆的操作进一步基于第一控制策略。在另一个示例中,基于第一控制策略来控制车辆的操作包括朝第一方向操纵车辆,以及基于第二控制策略来控制车辆的操作包括朝与第一方向不同的第二方向操纵车辆。在另一个示例中,基于第一控制策略来控制车辆的操作包括以第一速度操纵车辆,以及其中基于第二控制策略来控制车辆的操作包括以与第一速度不同的第二速度操纵车辆。
附图说明
图1是与示例性实施例一致的系统的功能图。
图2是与示例性实施例一致的自主车辆的内部。
图3是与示例性实施例一致的自主车辆的外部。
图4A-D是与示例性实施例一致的自主车辆的图。
图5A-B是与示例性实施例一致的自主车辆的图。
图6A-B是与示例性实施例一致的自主车辆的图。
图7A-B是与示例性实施例一致的自主车辆的图。
图8A-B是与示例性实施例一致的自主车辆的图。
图9是与示例性实施例一致的流程图。
图10是与示例性实施例一致的流程图。
图11是与示例性实施例一致的流程图。
具体实施方式
如图1中所示,与本公开的一个方面一致的自主驾驶系统100包括带有各种组件的车辆101。虽然本公开的某些方面结合特定类型的车辆尤其有用,然而,车辆可以是任何类型的车辆,包括但不限于:汽车、卡车、摩托车、公共汽车、船、飞机、直升机、剪草机、娱乐车辆、游乐园车辆、农场用具、施工设备、电车、高尔夫球车、火车以及手推车。车辆可以具有一个或多个计算机,诸如包含处理器120、存储器130和典型地存在于通用计算机中的其他组件的计算机110。
存储器130存储处理器120可访问的信息,包括可以由处理器120执行或另外使用的指令132和数据134。存储器130可以是能够存储处理器可访问的信息的任何类型的,包括计算机可读介质或存储可以借助于电子设备读取的数据的其他介质,诸如硬盘驱动器、存储器卡、ROM、RAM、DVD或其他光盘,以及其他能写和只读存储器。系统和方法可以包括前述的不同组合,借此,指令和数据的不同部分被存储在不同类型的介质上。
指令132可以是待由处理器直接(诸如,机器码)或间接(诸如,脚本)执行的任何指令集。例如,指令可以作为计算机代码被存储在计算机可读介质上。在这方面,可以在本文中交替地使用词语“指令”和“程序”。指令可以以目标代码格式被存储以供处理器直接处理,或以任何其他计算机语言,包括根据需求被解释或预先被编译的脚本或独立源代码模块集合,被存储。在下面更详细地说明了指令的功能、方法和例程。
依据指令132,数据134可以由处理器120检索、存储或修改。例如,尽管所主张的主题不受任何特定数据结构限制,然而,数据可以是被存储在计算机寄存器中、作为具有多个不同字段和记录的表在关系数据库中、在XML文档或平面文件中。还可以以任何计算机可读格式对数据进行格式化。仅作为进一步示例,图像数据可以被存储为由像素网格组成的位图,其依据压缩或非压缩、无损(例如,BMP)或有损(例如,JPEG)、和基于位图或矢量(例如,SVG)的格式以及用于绘制图形的计算机指令被存储。数据可以包括足以识别相关信息的任何信息,诸如号码、描述文本、专有代码、对存储在同一存储器的其他区域或不同存储器(包括其他网络位置)中的数据的引用或功能使用来计算相关数据的信息。
处理器120可以是任何常规处理器,诸如商用CPU。替选地,处理器可以是专用设备,诸如ASIC或其他基于硬件的处理器。尽管图1将计算机110的处理器、存储器和其他元件在功能上图示为在同一块内,然而,本领域技术人员应当理解的是,处理器、计算机或存储器实际上可以包括可以或可以不被存储在同一物理外壳内的多个处理器、计算机或存储器。例如,存储器可以是位于与计算机110的外壳不同的外壳中的硬盘驱动器或其他存储介质。因此,对处理器或计算机的引用应当被理解为包括对可以或可以不并行操作的处理器或计算机或存储器集合的引用。组件中的部分,诸如转向组件和减速组件,每一个可以具有仅执行与该组件的特定功能有关的计算的其自身处理器,而不是使用单个处理器来执行在本文所述的步骤。
在本文所述的各个方面中,处理器可以位于远离车辆的地方并且与车辆无线地通信。在其他方面中,在本文所述的处理中的部分在被布置在车辆内的处理器上执行,并且其他的由远程处理器执行,包括采取执行单个操纵所需的步骤。
计算机110可以包括通常结合计算机使用的所有组件,诸如中央处理单元(CPU)、存储数据134和指令——诸如web浏览器——的存储器(例如,RAM和内部硬盘驱动器)、电子显示器142(例如,具有屏幕的监视器、小型LCD触摸屏或可操作来显示信息的任何其他电子设备)、用户输入140(例如,鼠标、键盘、触摸屏和/或麦克风)以及用于采集关于人的状态和期望的显式(例如,手势)或隐式(例如“人睡着了”)信息的各种传感器(例如,摄像机)。
在一个示例中,计算机110可以是并入车辆101中的自主驾驶计算系统。图2描绘了自主车辆的内部的示例性设计。该自主车辆可以包括非自主车辆的所有特征,例如:转向装置,诸如方向盘210;导航显示装置,诸如导航显示器215;以及齿轮选择器装置,诸如变速杆220。车辆还可以具有各种用户输入设备,诸如变速杆220、触摸屏217或按钮输入219,其用于激活或失活一个或多个自主驾驶模式以及用于使驾驶员或乘客290能够向自主驾驶计算机110提供诸如导航目的地的信息。
车辆101可以包括一个或多个另外的显示器。例如,车辆可以包括显示器225,其用于显示与自主车辆或其计算机的状态有关的信息。在另一个示例中,车辆可以包括用来指示车辆101的当前状态的状态指示装置138(参见图1),诸如状态栏230。在图2的示例中,状态栏230显示“D”和“2mph”,其指示该车辆目前处于驾驶模式并且正以每小时2英里移动。在这方面,车辆可以在电子显示器上显示文本、照亮车辆101的部分,诸如方向盘210、或提供各种其他类型的指示。
自主驾驶计算系统可以能够与车辆的各种组件进行通信。例如,返回到图1,计算机110可以与车辆的中央处理器160通信,并且可以发送并接收信息到/自车辆101的各种系统,例如制动180、加速182、发信号184和导航186系统,以便控制车辆101的移动、速度等。另外,当被启用时,计算机110可以控制车辆101的这些功能中的部分或全部,因此,是完全或仅仅部分自主的。应当理解的是,尽管各种系统和计算机110被示出在车辆101内,然而,这些元件可以在车辆101外部或在物理上分隔较大距离。
车辆还可以包括与计算机110通信的地理定位组件144,其用于确定设备的地理位置。例如,定位组件可以包括用来确定设备的纬度、经度和/或海拔位置的GPS接收器。也可以使用其他定位系统,诸如基于激光器的定位系统、惯性辅助GPS或基于相机的定位,来识别车辆的位置。车辆的位置可以包括绝对地理位置,诸如纬度、经度和海拔,以及相对位置信息,诸如相对于直接环绕该车辆的其他汽车的位置,其通常可以被确定具有比绝对物理位置更小的噪声。
车辆还可以包括与计算机110通信的其他设备,诸如用来确定车辆的方向和速度或对其的改变的加速计、陀螺仪或另一个方向/速度检测设备146。仅作为示例,加速设备146可以确定其相对于重力的方向或垂直于此的平面的俯仰、偏航或滚转(或对此的改变)。设备还可以跟踪速度的增加或减小以及这样的改变的方向。可以向用户、计算机110、其他计算机以及前述的组合自动提供如在本文所阐述的设备的对位置和取向数据的供给。
计算机110可以通过控制各种组件来控制车辆的方向和速度。作为示例,如果车辆正处于完全自主模式下操作,则计算机110可以促使车辆加速(例如,通过增加向发动机提供的燃料或其他能源)、减速(例如,通过减少向发动机供应的燃料或通过应用制动)以及改变方向(例如,通过使两个前轮变向)。
车辆还可以包括用于检测在车辆外部的物体——诸如其他车辆、道路中的障碍物、交通信号灯、标志、树等——的组件。检测系统可以包括激光器、声呐器、雷达、相机或记录可以由计算机110处理的数据的任何其他检测设备。例如,如果车辆是小客车,则该汽车可以包括安装在顶部或其他便利位置的激光器。
如图3中所示,小客车301可以包括分别安装在车辆的前面和顶部的激光器310和311。激光器310可以具有大约150米、三十度垂直视场以及大约三十度水平视场的范围。激光器311可以具有大约50-80米、三十度垂直视场以及360度水平视场的范围。激光器可以向车辆提供计算机可以使用来识别各种物体的位置和距离的范围和强度信息。在一个方面中,激光器可以通过绕着其轴旋转并且改变其俯仰来测量在车辆和面向车辆的物体表面之间的距离。
车辆还可以包括各种雷达检测单元,诸如用于自适应巡航控制系统的那些。雷达检测单元可以位于汽车的前面和后面以及前保险杠的任一侧。如图3的示例中所示,车辆301包括位于车辆的侧面(仅一个侧面被示出)、前面和后部的雷达检测单元320-323。这些雷达检测单元中的每一个可以具有大约200米、达大约18度视场的范围,以及大约60米、达大约56度视场的范围。
在另一个示例中,可以将多种相机安装在车辆上。可以以预先确定的距离安装相机,以使可以使用来自2个或更多个相机的图像的视差来计算距各个物体的距离。如图3中所示,车辆301可以包括安装在挡风玻璃340下面后视镜(未示出)附近的2个相机330-331。相机330可以包括大约200米和大约30度水平视场的范围,而相机331可以包括大约100米和大约60度水平视场的范围。
每一个传感器可以与其中可以使用该传感器来检测物体的特定传感器域相关联。图4A是各种传感器的近似传感器域的自上而下视图。图4B基于这些传感器的视场,分别描绘了激光器310和311的近似传感器域410和411。例如,传感器域410包括大约30度水平视场,达大约150米,以及传感器域411包括360度水平视场,达大约80米。
图4C基于这些传感器的视场,分别描绘了雷达检测单元320-323的近似传感器域420A-423B。例如,雷达检测单元320包括传感器域420A和420B。传感器域420A包括大约18度水平视场,达大约200米,以及传感器域420B包括大约56度水平视场,达大约80米。类似地,雷达检测单元321-323包括传感器域421A-423A和421B-423B。传感器域421A-423A包括大约18度水平视场,达大约200米,以及传感器域421B-423B包括大约56度水平视场,达大约80米。传感器域421A和422A延伸,经过了图4A和4C的边缘。
图4D基于这些传感器的视场,分别描绘了相机330-331的近似传感器域430-431。例如,相机330的传感器域430包括大约30度、达大约200米的视场,以及相机430的传感器域431包括大约60度、达大约100米的视场。
在另一个示例中,自主车辆可以包括声呐设备、立体相机、定位相机、激光器和雷达检测单元,其每一个具有不同的视场。声呐器可以具有大约60度的水平视场,达大约6米的最大距离。立体相机可以具有与大约50度的水平视场、大约10度的垂直视场以及大约30米的最大距离的重叠区。定位相机可以具有大约75度的水平视场、大约90度的垂直视场以及大约10米的最大距离。激光器可以具有大约360度的水平视场、大约30度的垂直视场以及100米的最大距离。雷达可以具有针对近光束的60度的水平视场,针对远光束的30度的水平视场,以及200米的最大距离。
在一个示例中,车辆101可以是小车,诸如高尔夫球车。图5A-5B是小车510以及组成该小车的传感器域的示例性视场集的侧面和自上而下视图。小车501可以包括诸如声呐器、立体相机和定位相机的传感器。定位相机可以用来将车辆在地图信息的地图上定位到厘米精度。这些传感器中的每一个可以导致在某一水平和垂直度数延伸某一距离的视场。例如,小车501可以包括安装在该小车前面的定位相机,其导致具有范围在小车前面大约1.5至7米的大约35度的水平视场的传感器域560。该小车还可以具有跨小车前面安装的多个声呐检测设备。这些声呐设备可以用来通过以频率范围的特定频率发射并接收声波来检测物体。这些设备中的每一个可以导致传感器域,诸如传感器域570-575,每一个具有范围在小车前面大约3米的大约35度的水平视场。小车501还可以包括安装在小车前面的立体相机。该立体相机可以导致传感器域580,每一个具有范围自小车前面大约10米的大约30度的水平视场。
在另一个示例中,其中小车包括定位相机、立体相机和一个或多个声呐检测设备,该小车的定位相机可以包括大约75度的水平视场、大约90度的垂直视场以及大约10米的范围。立体相机的重叠区可以包括大约50度的水平视场、大约10度的垂直视场以及大约30米的范围。声呐检测设备每一个可以具有大约60度的水平视场和大约6米的范围。
前述传感器可以允许车辆对其环境进行评估并且潜在地对其环境作出响应,以便为乘客以及在该环境中的物体或人最大程度上保障安全。应当理解的是,车辆类型、传感器的数量和类型、传感器位置、传感器视场和传感器的传感器域只是示例性的。也可以利用各种其他配置。
除上述传感器外,计算机还可以使用来自典型非自主车辆的传感器的输入。例如,这些传感器可以包括胎压传感器、发动机温度传感器、制动器热量传感器、刹车片状态传感器、轮胎面传感器、燃料传感器、油位和质量传感器、空气质量传感器(用于检测温度、湿度或空气中的微粒)等。
许多这些传感器实时提供由计算机处理的数据,即,传感器可以在或超过一定范围的时间持续更新其输出来反映被感知的环境,并且持续或根据需求向计算机提供该更新的输出,以使计算机能够响应于所感知的环境,确定车辆的当时方向或速度是否应当被更改。
除处理各种传感器所提供的数据外,计算机还可以依赖在先前时间点获取并且预期持续,而不管车辆的在环境中的存在的环境数据。例如,返回到图1,数据134可以包括详细的地图信息136,例如,识别道路的形状和高度、车道线、交叉路口、人行横道、速度限制、交通信号灯、建筑物、标志、实时交通信息、或其他这样的物体和信息的高度详细的地图。例如,地图信息可以包括与各种道路段相关联的明确速度限制信息。速度限制数据可以被手动输入或使用例如光学字符识别从先前拍摄的速度限制标志的图像扫描。地图信息可以包括纳入上面列出的物体中的一个或多个的三维地形地图。例如,车辆可以基于实时数据(例如,使用其传感器来确定另一辆汽车的当前GPS位置)和其他数据(例如,将该GPS位置与先前存储的特定于车道的地图数据进行比较来确定另一辆汽车是否在变向车道内),来确定另一辆汽车预期变向。
再次,尽管地图信息在本文被描绘为基于图像的地图,然而,地图信息不必完全基于图像的(例如,光栅)。例如,地图信息可以包括一个或多个道路图或诸如道路、车道、交叉路口和在这些特征之间的连接的信息的图网。每一个特征可以被存储为图数据并且可以与信息相关联,所述信息诸如地理位置和其是否被链接到其他相关特征,例如,停车标志可以被链接到道路和交叉路口等。在一些示例中,相关联的数据可以包括道路图的基于网格的索引,用来允许对某些道路图特征的高效查找。
除上面描述并且在附图中图示的操作外,现将描述各种操作。应当理解的是,下面的操作不必按照下述精确顺序来执行。相反,可以按照不同的顺序或同时处理各步骤,并且还可以添加或删去步骤。
自主车辆可以通过遵循路线来在两个位置之间运送其自身、乘客和/或货物。例如,驾驶员可以输入目的地并且激活车辆的自主模式。作为响应,车辆的计算机可以基于道路图、其当前位置和目的地来计算路线。基于该路线(或作为路线生成的部分),车辆可以确定用于控制车辆沿着路线到目的地的控制策略。例如,控制策略可以包括何处变向、以什么速度行进、何处查看交通信号灯、何处因交叉路口或停车标志而停车等。
如在上面所说明的,在遵循路线时,车辆可以检测在其的在传感器域内的周围环境中的物体。响应于检测到物体,计算机可以调整自主车辆的速度或改变方向。然而,在一些示例中,传感器域可以基于在车辆的周围环境中的物体或其他特征而改变或变得不那么可靠。
物体可以占据车辆的传感器域的部分。例如,如图6A中所示,车辆301可能正沿着诸如牵引车拖车610的另一个较大、移动物体侧面驾驶。如图6B中所示,牵引车拖车610占据了在车辆301的传感器域内的区域620。在图7A中所示的另一个示例中,车辆301正沿着建筑物710侧面驾驶并且接近道路的弯道处。这些建筑物占据了在车辆301的传感器域内的区域720。
当物体占据了车辆的传感器域的部分时,该物体的存在可以例如通过限制对其他物体的感知来改变一个或多个传感器的感知力。车辆的计算机可能不再能够准确地检测在该物体后面或不在传感器的检测线内的区域中的其他物体。在一些示例中,如果该物体是半透明或透明的,诸如玻璃,则传感器可以能够检测“通过”一些物体,但是具有比如果该物体不存在少得多的准确性。因此,可能减弱了车辆的传感器域的大小和准确性。结果,车辆的计算机可以计算传感器减弱区域的大小和形状以及基于该减弱区域的新的或当前传感器域。
例如,返回到图6B,计算机可以将牵引车拖车610识别为物体并且计算区域620的大小和形状、在区域620内的传感器域的大小和形状、和/或不在区域620内的传感器域的大小和形状。在区域620内的任何物体不再是车辆301的传感器可检测的。该区域表示近似“盲”区。计算机可以能够基于来自道路图的信息、或例如如果计算机正在跟踪目前已进入该区域的物体,来估计物体的位置。例如,声呐器、激光器或相机传感器将不能够收集在区域620内的数据,因为牵引车拖车不透明。这阻止传感器“越过”卡车收集信息。
返回到图7的示例,车辆的传感器域受建筑物影响。车辆的计算机可以将建筑物识别为物体并且计算区域720的大小和形状、在区域720内的传感器域的大小和形状、和/或不在区域720内的传感器域的大小和形状。在该示例中,车辆不能检测到沿着建筑物710侧面但是在区域720内停放的卡车730。例如,在图7B的区域720内也示出了车辆730的位置。
除物体外,其他情况也可以通过减少或禁止一个或多个传感器的对车辆的周围环境的感知来影响自主车辆的传感器域。例如,在明亮阳光下,相机图像可以变得饱和并且不那么可靠。因此,小车501的传感器域被减弱,因为亮光影响了相机的有效性。因此,如图8a中所指示,由于亮光880,相机传感器的视场560和580不再能够检测物体。因此,以虚线示出了这些视场。正如上述物体示例,可能减弱了小车的传感器域的大小和准确性。小车的计算机然后可以例如仅基于声呐检测设备570或576来计算新的传感器域或可以仅仅确定小车可以仅依赖来自声呐设备的视场的传感器域。
在另一个示例中,图8B的声音890以或接近小车的声呐设备所使用的频率或频率范围。例如,所述声音可以由在车辆附近的其他声呐设备或噪声生成。这些声音可以导致使声呐数据变得对检测物体不那么可靠的反馈。因此,声呐检测设备的视场570-575不再能够检测物体。因此,以虚线示出了这些视场。小车的计算机可以例如仅基于相机设备560和580来计算新的传感器域或可以仅仅确定小车可以仅依赖其的来自相机的视场的传感器域。
响应于识别传感器域的改变,车辆的计算机可以改变车辆的控制策略。例如,车辆的计算机可以使车辆减速、维持车道、加速(但是考虑速度限制)或采取其他响应动作,而不是维持车辆的速度和方向。在另一个示例中,计算机可以使车辆减速到第二、低得多的速度,而不是减速到第一速度以采取路线所需的动作,诸如变向。在一些示例中,车辆可以不必采取任何特定动作,而是可以维持其当前速度和方向。
在一个示例中,返回到图6A,车辆301可能正沿着需要其向左(朝向牵引车拖车610)移动一个或多个车道的路线。通常,如果车辆行进得比牵引车拖车快,则车辆301可以等待直到其已越过牵引车拖车610来改变车道。然而,在车辆的计算机已确定了传感器减弱区域或当前传感器域之后,计算机可以使车辆减速,以使其落在牵引车拖车后面,以便增加传感器域,以使车辆301可以检测在牵引车拖车610左边的物体。
返回到图7A,在另一个示例中,车辆301可能正沿着需要其遵循围绕建筑物的道路的路线。通常,如果车辆正绕弯道处行进,则计算机可以维持车辆的速度。然而,在车辆的计算机已确定了传感器减弱区域或当前传感器域之后,计算机可以使车辆显著地减速,以使当车辆的传感器域能够检测位于卡车730附近的物体时,车辆可以有足够的时间来采取避开该物体的任何必需动作。
类似地,在图8A的示例中,如果小车不再能够依赖相机传感器,则其可以显著地减速,使得如果在声呐器视场的大约3米范围内检测到物体,则小车501有足够的时间来停止或绕着该物体移动。如果小车的传感器域被限制在相机视场,如图8B中所示,则小车501可以在转弯之前再次显著地减速。在该示例中,如果小车在声呐检测设备的有效性已变得减弱之前本来会维持其速度,则小车501可以继续维持其速度、稍微减速或甚至增加其速度。
自主车辆的计算机可以持续或周期性地确定其传感器域是否已改变并且相应地采取动作或改变其控制策略。例如,返回到图7A,如果车辆301已移动绕过了道路中的弯道并且经过了卡车710,则车辆的计算机可以再次返回到原始控制策略并且增加其速度。类似地,如果(图8A的)小车501移动入其中光880不再对相机传感器具有相同影响的阴影区域,则小车的计算机可以再次依赖相机来检测物体、返回到原始控制策略并且增加其速度。这种对速度和操纵的调整以及改变控制策略的循环可以基于车辆的减弱区域或当前传感器域来持续发生。
图9的流程图900是如上所述的控制自主车辆的另一个示例。在块910,车辆的计算机基于控制策略来控制自主车辆。在块920,基于自主车辆的传感器中的一个或多个的一个或多个视场来识别传感器域。在块930,检测物体和其的在传感器域中的位置。例如,车辆的计算机可以接收并处理来自一个或多个传感器的数据,以便识别物体及其位置。在块940,基于物体的相对于传感器域的位置来计算减弱的传感器感知力的区域。在块950,然后,基于当前传感器域来识别新的控制策略。在块960,计算机然后可以基于减弱的传感器感知力的区域来控制车辆的方向和速度。在块970,计算机然后确定传感器域是否继续被减弱。如果传感器域继续被减弱,则在块980,计算机可以维持新的控制策略或根据需要调整控制策略,然后返回到块970。一旦车辆的传感器域被确定为不再被减弱,则在块990,计算机再次基于原始控制策略来控制自主车辆,并且在新的物体被识别时返回到块930。
图10的流程图1000是如上所述的控制自主车辆的又另一个示例。在块1010,车辆的计算机基于控制策略来控制自主车辆。在块1020,基于自主车辆的传感器中的一个或多个的一个或多个视场来识别传感器域。在块1030,检测物体和其在传感器域中的位置。例如,车辆的计算机可以接收并处理来自一个或多个传感器的数据,以便识别物体及其位置。在块1040,基于物体的相对于传感器域的位置来计算当前传感器域。在块1050,然后,基于当前传感器域来识别新的控制策略。在块1060,计算机然后可以基于新的控制策略来控制车辆的方向和速度。在块1070,计算机然后确定传感器域是否继续被减弱。如果传感器域继续被减弱,则在块1080,计算机可以维持新的控制策略或根据需要调整控制策略,然后返回到块1070。一旦车辆的传感器域被确定为不再被减弱,则在块1090,计算机再次基于原始控制策略来控制自主车辆,并且在新的物体被识别时返回到块1030。
图11的流程图1100是如上所述的控制自主车辆的进一步示例。在块1110,车辆的计算机基于控制策略来控制自主车辆。在块1120,基于自主车辆的传感器中的一个或多个的一个或多个视场来识别传感器域。在块1130,识别一个或多个传感器的感知力的改变。例如,车辆的计算机可以接收并处理来自一个或多个传感器的数据,其指示来自传感器中的一个或多个的数据不可靠。在块1140,然后,基于该改变来识别新的控制策略。在块1150,计算机然后可以基于新的控制策略来控制车辆的方向和速度。在块1160,计算机然后例如通过从传感器接收另外数据来确定改变是否仍然生效。如果改变持续,则在块1170,计算机可以维持新的控制策略或根据需要调整控制策略,然后返回到块1160。一旦计算机确定不再存在改变,则在块1180,计算机再次基于原始控制策略来控制自主车辆,并且在新的物体被识别时返回到块1130。
因为在不背离权利要求所限定的主题的情况下,可以利用上述特征的这些和其他变体及组合,因此,示例性实施例的前面描述应当被当作对权利要求所限定的主题的说明而不是限制。还应当理解的是,在本文所述的示例的提供(以及表述为“诸如”、“例如”“包括”等的子句)不应当被解释为将所主张的主题限制在特定示例;相反,示例意在说明许多可能方面的仅仅部分。
工业实用性
本发明享有宽泛工业实用性,包括但不限于对具有自主操作模式的车辆的使用。

Claims (21)

1.一种用于控制具有自主操作模式的车辆的方法,所述方法包括:
通过处理器基于第一控制策略来控制所述车辆的操作;
基于所述车辆的一个或多个传感器的视场来识别传感器域;
从所述一个或多个传感器中的所选择的传感器接收传感器数据;
基于所述传感器数据来识别所述一个或多个传感器的传感器感知力的改变,所述传感器感知力的所述改变包括检测在所述传感器域内的物体的减弱的能力;
基于所述改变来确定第二控制策略;以及
通过所述处理器基于所述第二控制策略来控制所述车辆的所述操作。
2.根据权利要求1所述的方法,进一步包括:
基于所接收的传感器数据来检测物体和所述物体在所述传感器域中的位置;以及
其中识别所述改变基于所述物体的所述位置。
3.根据权利要求2所述的方法,其中识别所述传感器感知力的改变包括基于所述物体在所述传感器域中的所述位置来计算减弱的传感器感知力的区域,并且确定所述第二控制策略基于所述减弱的传感器感知力的区域。
4.根据权利要求2所述的方法,其中识别所述传感器感知力的改变包括基于所述物体在所述传感器域中的所述位置来计算当前传感器域,并且确定所述第二控制策略基于所述当前传感器域。
5.根据权利要求2所述的方法,其中所述物体是另一个车辆。
6.根据权利要求1所述的方法,进一步包括:
确定所述传感器数据指示所述一个或多个传感器中的给定一个正在提供不可靠信息;以及
其中识别所述改变基于所确定的指示。
7.根据权利要求5所述的方法,其中所述不可靠信息包括一个或多个相机图像。
8.根据权利要求1所述的方法,进一步包括:
基于所述传感器数据来确定不再存在所述一个或多个传感器的传感器感知力的改变;
其中,基于不再存在改变的所述确定,控制所述车辆的所述操作进一步基于所述第一控制策略。
9.根据权利要求1所述的方法,其中基于所述第一控制策略来控制所述车辆的所述操作包括朝第一方向操纵所述车辆,以及基于所述第二控制策略来控制所述车辆的所述操作包括朝与所述第一方向不同的第二方向操纵所述车辆。
10.根据权利要求1所述的方法,其中基于所述第一控制策略来控制所述车辆的所述操作包括以第一速度操纵所述车辆,以及其中基于所述第二控制策略来控制所述车辆的所述操作包括以与所述第一速度不同的第二速度操纵所述车辆。
11.一种用于控制具有自主操作模式的车辆的设备,所述设备包括:
一个或多个传感器,所述一个或多个传感器用于检测在所述车辆的周围环境中的物体;以及
耦接到所述一个或多个传感器的处理器,所述处理器可操作来:
基于第一控制策略来控制所述车辆的操作;
基于所述车辆的所述一个或多个传感器的视场来识别传感器域;
从所述一个或多个传感器中的所选择的传感器接收传感器数据;
基于所述传感器数据来识别所述一个或多个传感器的传感器感知力的改变,所述传感器感知力的所述改变包括检测在所述传感器域内的物体的减弱的能力;
基于所述改变来确定第二控制策略;以及
基于所述第二控制策略来控制所述车辆的所述操作。
12.根据权利要求11所述的设备,其中所述处理器可进一步操作来基于所接收的传感器数据来检测物体和所述物体在所述传感器域中的位置,并且所述处理器基于所述物体的所述位置来识别所述改变。
13.根据权利要求12所述的设备,其中所述处理器可操作来通过基于所述物体在所述传感器域中的所述位置来计算减弱的传感器感知力的区域来识别所述传感器感知力的改变,并且确定所述第二控制策略基于所述减弱的传感器感知力的区域。
14.根据权利要求12所述的设备,其中所述处理器可操作来通过基于所述物体在所述传感器域中的所述位置来计算当前传感器域来识别所述传感器感知力的改变,并且确定所述第二控制策略基于所述当前传感器域。
15.根据权利要求12所述的设备,其中所述处理器可进一步操作来将所述物体识别为另一个车辆。
16.根据权利要求11所述的设备,其中所述处理器可进一步操作来确定所述传感器数据指示所述一个或多个传感器中的给定一个正在提供不可靠信息,并且所述处理器基于所确定的指示来识别所述改变。
17.根据权利要求15所述的设备,其中所述不可靠信息包括一个或多个相机图像。
18.根据权利要求11所述的设备,其中所述处理器可进一步操作来:
基于所述传感器数据来确定不再存在所述一个或多个传感器的传感器感知力的改变;以及
基于不再存在改变的所述确定,基于所述第一控制策略来控制所述车辆的所述操作。
19.根据权利要求11所述的设备,其中所述处理器可进一步操作来:
通过朝第一方向操纵所述车辆,来基于所述第一控制策略控制所述车辆的所述操作;以及
通过朝与所述第一方向不同的第二方向操纵所述车辆,来基于所述第二控制策略控制所述车辆的所述操作。
20.根据权利要求11所述的设备,其中所述处理器可进一步操作来:
通过以第一速度操纵所述车辆,来基于所述第一控制策略控制所述车辆的所述操作;以及
通过以与所述第一速度不同的第二速度操纵所述车辆,来基于所述第二控制策略控制所述车辆的所述操作。
21.一种其上存储有程序的计算机可读指令的有形的计算机可读存储介质,所述指令当由处理器执行时,促使所述处理器执行控制具有自主操作模式的车辆的方法,所述方法包括:
基于第一控制策略来控制车辆的操作;
基于所述车辆的一个或多个传感器的视场来识别传感器域;
从所述一个或多个传感器中的所选择的传感器接收传感器数据;
基于所述传感器数据来识别所述一个或多个传感器的传感器感知力的改变,所述传感器感知力的所述改变包括检测在所述传感器域内的物体的减弱的能力;
基于所述改变来确定第二控制策略;以及
基于所述第二控制策略来控制所述车辆的所述操作。
CN201180071321.5A 2011-06-01 2011-09-30 传感器域选择 Active CN103718124B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/150,385 2011-06-01
US13/150,385 US8589014B2 (en) 2011-06-01 2011-06-01 Sensor field selection
PCT/US2011/054157 WO2012166170A1 (en) 2011-06-01 2011-09-30 Sensor field selection

Publications (2)

Publication Number Publication Date
CN103718124A true CN103718124A (zh) 2014-04-09
CN103718124B CN103718124B (zh) 2016-07-13

Family

ID=47259698

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180071321.5A Active CN103718124B (zh) 2011-06-01 2011-09-30 传感器域选择

Country Status (6)

Country Link
US (1) US8589014B2 (zh)
EP (1) EP2771751B1 (zh)
JP (1) JP6468839B2 (zh)
KR (2) KR20140039243A (zh)
CN (1) CN103718124B (zh)
WO (1) WO2012166170A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107450529A (zh) * 2016-05-06 2017-12-08 优步技术公司 用于自动驾驶车辆的改进的物体检测
CN108700878A (zh) * 2016-03-31 2018-10-23 英特尔公司 在自主设备中实现自动传感器发现
TWI645242B (zh) * 2018-03-29 2018-12-21 鴻海精密工業股份有限公司 拍攝裝置
CN109715442A (zh) * 2016-09-15 2019-05-03 株式会社小糸制作所 照明系统
CN110341719A (zh) * 2018-04-03 2019-10-18 通用汽车环球科技运作有限责任公司 控制车辆以调节感知系统能量使用的方法
CN110874063A (zh) * 2018-08-09 2020-03-10 赫尔环球有限公司 用于道路的差异策略实施的方法、装置和计算机程序产品
CN111417557A (zh) * 2017-12-06 2020-07-14 罗伯特·博世有限公司 对摩托车的行为进行控制的控制装置和控制方法
CN111433096A (zh) * 2017-12-06 2020-07-17 罗伯特·博世有限公司 控制车道间行驶中的摩托车的行为的控制装置和控制方法
CN111459155A (zh) * 2019-01-18 2020-07-28 百度(美国)有限责任公司 用于自主驾驶应用的动态确定车辆有效传感器覆盖的方法

Families Citing this family (85)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AT508634B1 (de) * 2009-08-28 2011-05-15 Riegl Laser Measurement Sys Laserscanvorrichtung zur montage am dachträger eines fahrzeugs
JP5503419B2 (ja) * 2010-06-03 2014-05-28 株式会社日立製作所 無人搬送車および走行制御方法
US9381916B1 (en) 2012-02-06 2016-07-05 Google Inc. System and method for predicting behaviors of detected objects through environment representation
US9760092B2 (en) 2012-03-16 2017-09-12 Waymo Llc Actively modifying a field of view of an autonomous vehicle in view of constraints
US8942881B2 (en) * 2012-04-02 2015-01-27 Google Inc. Gesture-based automotive controls
US8700251B1 (en) * 2012-04-13 2014-04-15 Google Inc. System and method for automatically detecting key behaviors by vehicles
US9062979B1 (en) 2013-07-08 2015-06-23 Google Inc. Pose estimation using long range features
US9719801B1 (en) 2013-07-23 2017-08-01 Waymo Llc Methods and systems for calibrating sensors using road map data
GB2516629B (en) * 2013-07-26 2020-04-08 Randoll Electrical Ltd Interactive vehicles
US10318823B2 (en) * 2013-10-14 2019-06-11 Mobileye Vision Technologies Ltd. Forward-facing multi-imaging system for navigating a vehicle
KR101491622B1 (ko) * 2014-02-17 2015-02-11 연세대학교 산학협력단 자율 주행형 차량의 주행 제어 장치 및 방법
EP2921363A1 (en) * 2014-03-18 2015-09-23 Volvo Car Corporation Vehicle, vehicle system and method for increasing safety and/or comfort during autonomous driving
EP2921362B1 (en) 2014-03-18 2020-08-12 Volvo Car Corporation Vehicle, vehicle system and method for increasing safety and/or comfort during autonomous driving
TWI630130B (zh) * 2014-07-30 2018-07-21 鴻海精密工業股份有限公司 智能尋車系統及交通工具之控制方法
JP6260544B2 (ja) 2015-01-19 2018-01-17 トヨタ自動車株式会社 自動運転装置
US9493157B2 (en) 2015-01-29 2016-11-15 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle operation in obstructed occupant view and sensor detection environments
US9649979B2 (en) 2015-01-29 2017-05-16 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle operation in view-obstructed environments
US9139199B2 (en) 2015-02-01 2015-09-22 Thomas Danaher Harvey Methods for dense parking of remotely controlled or autonomous vehicles
US10216196B2 (en) 2015-02-01 2019-02-26 Prosper Technology, Llc Methods to operate autonomous vehicles to pilot vehicles in groups or convoys
WO2016126321A1 (en) 2015-02-06 2016-08-11 Delphi Technologies, Inc. Method and apparatus for controlling an autonomous vehicle
WO2016126317A1 (en) 2015-02-06 2016-08-11 Delphi Technologies, Inc. Method of automatically controlling an autonomous vehicle based on electronic messages from roadside infrastructure of other vehicles
JP6222137B2 (ja) 2015-03-02 2017-11-01 トヨタ自動車株式会社 車両制御装置
US9963155B2 (en) 2015-05-29 2018-05-08 Clearpath Robotics, Inc. Method, system and apparatus for path control in unmanned vehicles
US9594378B2 (en) 2015-07-31 2017-03-14 Delphi Technologies, Inc. Variable object detection field-of-focus for automated vehicle control
US10183667B2 (en) * 2015-09-15 2019-01-22 Deere & Company Human presence detection on a mobile machine
US10267908B2 (en) * 2015-10-21 2019-04-23 Waymo Llc Methods and systems for clearing sensor occlusions
US9720415B2 (en) * 2015-11-04 2017-08-01 Zoox, Inc. Sensor-based object-detection optimization for autonomous vehicles
DE102015224553A1 (de) * 2015-12-08 2017-06-08 Robert Bosch Gmbh Verfahren, Computerprogramm, Speichermedium und Elektronische Steuereinheit zum Betreiben eines Fahrzeugs
US10101747B2 (en) 2015-12-11 2018-10-16 Uber Technologies, Inc. Formatting sensor data for use in autonomous vehicle communications platform
US9537956B1 (en) 2015-12-11 2017-01-03 Uber Technologies, Inc. System for acquiring time-synchronized sensor data
US9596666B1 (en) 2015-12-11 2017-03-14 Uber Technologies, Inc. System for processing asynchronous sensor data
US9785150B2 (en) * 2015-12-11 2017-10-10 Uber Technologies, Inc. Formatting sensor data for use in autonomous vehicle communications platform
JP2017114155A (ja) * 2015-12-21 2017-06-29 三菱自動車工業株式会社 運転支援装置
US9915951B2 (en) 2015-12-27 2018-03-13 Toyota Motor Engineering & Manufacturing North America, Inc. Detection of overhanging objects
US10029682B2 (en) 2016-01-22 2018-07-24 Toyota Motor Engineering & Manufacturing North America, Inc. Surrounding vehicle classification and path prediction
US10328949B2 (en) * 2016-01-28 2019-06-25 Toyota Motor Engineering & Manufacturing North America, Inc. Sensor blind spot indication for vehicles
US10114103B2 (en) * 2016-03-31 2018-10-30 Uber Technologies, Inc. System and method for sensor triggering for synchronized operation
US10245730B2 (en) * 2016-05-24 2019-04-02 Asustek Computer Inc. Autonomous mobile robot and control method thereof
JP6712906B2 (ja) * 2016-05-31 2020-06-24 株式会社小松製作所 作業機械の管理装置、作業機械、及び作業機械の管理システム
US10078335B2 (en) 2016-06-28 2018-09-18 Toyota Motor Engineering & Manufacturing North America, Inc. Ray tracing for hidden obstacle detection
US9910442B2 (en) 2016-06-28 2018-03-06 Toyota Motor Engineering & Manufacturing North America, Inc. Occluded area detection with static obstacle maps
US10137890B2 (en) 2016-06-28 2018-11-27 Toyota Motor Engineering & Manufacturing North America, Inc. Occluded obstacle classification for vehicles
CN106323288A (zh) * 2016-08-01 2017-01-11 杰发科技(合肥)有限公司 一种交通工具的定位和搜寻方法、装置以及移动终端
US10471904B2 (en) 2016-08-08 2019-11-12 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for adjusting the position of sensors of an automated vehicle
US10712746B2 (en) * 2016-08-29 2020-07-14 Baidu Usa Llc Method and system to construct surrounding environment for autonomous vehicles to make driving decisions
WO2018042444A1 (en) * 2016-09-04 2018-03-08 Otonomo Technologies Ltd. Method and system for implementing a policy based central orchestration for autonomous vehicles to meet local regulations and requirements
FR3058514B1 (fr) * 2016-10-26 2019-08-09 Valeo Schalter Und Sensoren Gmbh Procede d'evaluation d'un risque d'eblouissement d'un capteur d'image et unite electronique associee
US10482559B2 (en) 2016-11-11 2019-11-19 Uatc, Llc Personalizing ride experience based on contextual ride usage data
US10802484B2 (en) 2016-11-14 2020-10-13 Baidu Usa Llc Planning feedback based decision improvement system for autonomous driving vehicle
US10377380B2 (en) 2017-01-09 2019-08-13 Denso International America, Inc. Vehicle safety system
US10585440B1 (en) 2017-01-23 2020-03-10 Clearpath Robotics Inc. Systems and methods for using human-operated material-transport vehicles with fleet-management systems
US10286906B2 (en) 2017-01-24 2019-05-14 Denso International America, Inc. Vehicle safety system
US11097736B2 (en) 2017-02-28 2021-08-24 Clearpath Robotics Inc. Systems and methods for traction detection and control in a self-driving vehicle
US10338594B2 (en) * 2017-03-13 2019-07-02 Nio Usa, Inc. Navigation of autonomous vehicles to enhance safety under one or more fault conditions
US10423162B2 (en) 2017-05-08 2019-09-24 Nio Usa, Inc. Autonomous vehicle logic to identify permissioned parking relative to multiple classes of restricted parking
US10377377B2 (en) * 2017-06-08 2019-08-13 GM Global Technology Operations LLC Active lane positioning for blind zone mitigation
US10386856B2 (en) 2017-06-29 2019-08-20 Uber Technologies, Inc. Autonomous vehicle collision mitigation systems and methods
US10369974B2 (en) 2017-07-14 2019-08-06 Nio Usa, Inc. Control and coordination of driverless fuel replenishment for autonomous vehicles
US10710633B2 (en) 2017-07-14 2020-07-14 Nio Usa, Inc. Control of complex parking maneuvers and autonomous fuel replenishment of driverless vehicles
US10065638B1 (en) 2017-08-03 2018-09-04 Uber Technologies, Inc. Multi-model switching on a collision mitigation system
US20190041859A1 (en) * 2017-08-04 2019-02-07 Aptiv Technologies Limited Sensor failure compensation system for an automated vehicle
JP6747405B2 (ja) 2017-08-25 2020-08-26 トヨタ自動車株式会社 自車位置自信度演算装置
KR102400555B1 (ko) 2017-09-04 2022-05-20 삼성전자주식회사 주행 차량을 제어하는 방법 및 장치
JP6791106B2 (ja) * 2017-12-06 2020-11-25 株式会社デンソー 周辺認識装置及び周辺認識方法
US20190179317A1 (en) 2017-12-13 2019-06-13 Luminar Technologies, Inc. Controlling vehicle sensors using an attention model
JP7067067B2 (ja) 2018-01-11 2022-05-16 トヨタ自動車株式会社 信号機認識装置、及び自動運転システム
US11022971B2 (en) 2018-01-16 2021-06-01 Nio Usa, Inc. Event data recordation to identify and resolve anomalies associated with control of driverless vehicles
US11454970B2 (en) 2018-05-21 2022-09-27 Cummins Inc. Adjustment of autonomous vehicle control authority
US11326888B2 (en) * 2018-07-25 2022-05-10 Uatc, Llc Generation of polar occlusion maps for autonomous vehicles
US11390277B2 (en) 2018-11-30 2022-07-19 Clearpath Robotics Inc. Systems and methods for self-driving vehicle collision prevention
WO2020181019A1 (en) * 2019-03-05 2020-09-10 Waymo Llc Methods and systems for detecting degraded lidar range measurement accuracy
US11280897B2 (en) * 2019-03-31 2022-03-22 Waymo Llc Radar field of view extensions
GB2602207B (en) * 2019-04-29 2023-02-08 Motional Ad Llc Systems and methods for implementing an autonomous vehicle response to sensor failure
US11585934B2 (en) * 2019-04-30 2023-02-21 Lg Electronics Inc. Cart robot having auto-follow function
US20200348669A1 (en) * 2019-05-02 2020-11-05 Hyundai Motor Company Autonomous driving control apparatus, vehicle including autonomous driving control apparatus, and method of controlling vehicle
US11285941B2 (en) * 2019-07-16 2022-03-29 Lg Electronics Inc. Electronic device for vehicle and operating method thereof
US11649147B2 (en) 2019-09-20 2023-05-16 Clearpath Robotics Inc. Autonomous material transport vehicles, and systems and methods of operating thereof
DE102019129263A1 (de) 2019-10-30 2021-05-06 Wabco Europe Bvba Verfahren zur Überwachung einer momentanen Fahrzeugumgebung eines Fahrzeuges sowie Überwachungssystem
KR20210051601A (ko) * 2019-10-31 2021-05-10 엘지전자 주식회사 인공지능 무빙 에이전트
US20210191399A1 (en) * 2019-12-23 2021-06-24 Waymo Llc Real-Time Adjustment Of Vehicle Sensor Field Of View Volume
DE102020111486A1 (de) 2020-04-28 2021-10-28 Daimler Ag Verkehrsregelkonforme Entscheidungsfindung in dynamischen Verkehrsszenarien
KR102472448B1 (ko) 2020-11-24 2022-12-01 (주)유엠로직스 다차원 함수를 이용한 화상회의에서의 보안자료 공유 시스템 및 그 방법
KR20220074494A (ko) * 2020-11-27 2022-06-03 주식회사 넥스트칩 초음파 센서를 이용하여 다채널 영상들을 효율적으로 저장하는 전자 장치 및 그 동작방법
DE102021005311A1 (de) 2021-10-26 2023-04-27 Mercedes-Benz Group AG Verfahren zur automatischen Regelung einer Längsbewegung eines Fahrzeuges
US20240124028A1 (en) * 2022-10-14 2024-04-18 Aurora Operations, Inc Autonomous vehicle blind spot management

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5163002A (en) * 1990-05-18 1992-11-10 Nissan Motor Co., Ltd. Method and apparatus for automatic steering control of automobile
KR20020095584A (ko) * 2001-06-15 2002-12-27 현대자동차주식회사 타이밍벨트의 교환시기 감지장치와 그 제어방법
CN1416033A (zh) * 2002-10-30 2003-05-07 徐州重型机械厂 高空消防车支腿控制装置
US20050017860A1 (en) * 2002-07-31 2005-01-27 Hiroyuki Tsuji ID registration method for tire air pressure sensor, ID registration system, tire air pressure monitoring system, tire air pressure sensor, and smart control system
CN1777527A (zh) * 2003-04-24 2006-05-24 罗伯特·博世有限公司 用于校准图象传感器的装置及方法
US20060137483A1 (en) * 2002-12-13 2006-06-29 Uwe Zimmermann Method and device for object detection
CN1843789A (zh) * 2005-04-06 2006-10-11 肖国 利用车轮与车身之间振动提供动力的汽车避震方法及系统
CN1920704A (zh) * 2005-08-25 2007-02-28 比亚迪股份有限公司 一种纯电动汽车四轮驱动控制系统
CN201096539Y (zh) * 2007-08-09 2008-08-06 苏州工业园区美尔冷却系统有限公司 车用温度传感器
CN101484344A (zh) * 2006-07-03 2009-07-15 罗伯特·博世有限公司 用于支持车辆停车过程的方法
US20100106356A1 (en) * 2008-10-24 2010-04-29 The Gray Insurance Company Control and systems for autonomously driven vehicles

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1031799A (ja) * 1996-07-15 1998-02-03 Toyota Motor Corp 自動走行制御装置
EP0913751B1 (de) 1997-11-03 2003-09-03 Volkswagen Aktiengesellschaft Autonomes Fahrzeug und Verfahren zur Steuerung eines autonomen Fahrzeuges
JP2001034898A (ja) * 1999-07-21 2001-02-09 Toyota Central Res & Dev Lab Inc 探査不能領域推定装置及び運転支援システム
DE19945268A1 (de) * 1999-09-21 2001-03-22 Bosch Gmbh Robert Verfahren und Vorrichtung zur Zustandserkennung bei einem System zur automatischen Längs- und/oder Querregelung bei einem Kraftfahrzeug
DE19947766A1 (de) 1999-10-02 2001-05-10 Bosch Gmbh Robert Einrichtung zur Überwachung der Umgebung eines einparkenden Fahrzeugs
DE19948254C2 (de) * 1999-10-07 2002-07-11 Bayerische Motoren Werke Ag Verfahren zur Erkennung einer Verschmutzung und/oder Blindheit bei einem nach dem Radar- oder Lidarprinzip arbeitenden Sensor
DE19948252C2 (de) * 1999-10-07 2002-06-13 Bayerische Motoren Werke Ag Verfahren zur Erkennung einer Verschmutzung und/oder Blindheit bei einem nach dem Radar- oder Lidarprinzip arbeitenden Sensor
DE10114187A1 (de) * 2001-03-23 2002-09-26 Bosch Gmbh Robert Verfahren und Vorrichtung zur Unterstützung eines Überholvorgangs bei Kraftfahrzeugen
US6771208B2 (en) 2002-04-24 2004-08-03 Medius, Inc. Multi-sensor system
JP2003329773A (ja) * 2002-05-10 2003-11-19 Hitachi Ltd 複数の距離検知センサを設置した車両制御装置
US20060100783A1 (en) 2004-10-21 2006-05-11 Sick Ag Monitoring the surroundings of a vehicle
US7499804B2 (en) 2004-10-22 2009-03-03 Irobot Corporation System and method for multi-modal control of an autonomous vehicle
DE102005050310A1 (de) 2004-10-22 2006-06-08 Irobot Corp., Burlington Systeme und Verfahren zum Steuern eines Fahrzeuges
US7610123B2 (en) * 2005-01-04 2009-10-27 Deere & Company Vision-aided system and method for guiding a vehicle
US8150574B2 (en) * 2005-01-04 2012-04-03 Deere & Company Method and system for guiding a vehicle with vision-based adjustment
US7233683B2 (en) * 2005-01-04 2007-06-19 Deere & Company Method and system for guiding a vehicle with vision-based adjustment
JP4517393B2 (ja) * 2005-02-16 2010-08-04 株式会社デンソー 運転支援装置
JP2006260217A (ja) * 2005-03-17 2006-09-28 Advics:Kk 車両用走行支援装置
JP4400584B2 (ja) * 2006-03-01 2010-01-20 トヨタ自動車株式会社 障害物検出方法及び障害物検出装置
US9302678B2 (en) * 2006-12-29 2016-04-05 Robotic Research, Llc Robotic driving system
JP2008293099A (ja) * 2007-05-22 2008-12-04 Mazda Motor Corp 車両の運転支援装置
JP2009086788A (ja) * 2007-09-28 2009-04-23 Hitachi Ltd 車両周辺監視装置
JP2009093431A (ja) * 2007-10-09 2009-04-30 Toyota Motor Corp 速度規制システム
US8090489B2 (en) 2007-11-09 2012-01-03 Bruno Delean Computerized driverless vehicles and traffic control system
US8160811B2 (en) * 2008-06-26 2012-04-17 Toyota Motor Engineering & Manufacturing North America, Inc. Method and system to estimate driving risk based on a hierarchical index of driving
JP5319255B2 (ja) * 2008-12-03 2013-10-16 綜合警備保障株式会社 自律移動体および速度制御方法
JP5146292B2 (ja) * 2008-12-08 2013-02-20 トヨタ自動車株式会社 進路評価装置
US20100194593A1 (en) * 2009-02-05 2010-08-05 Paccar Inc Neural network for intelligent transportation systems
JP5613398B2 (ja) * 2009-10-29 2014-10-22 富士重工業株式会社 交差点運転支援装置
US8761990B2 (en) * 2011-03-30 2014-06-24 Microsoft Corporation Semi-autonomous mobile device driving with obstacle avoidance

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5163002A (en) * 1990-05-18 1992-11-10 Nissan Motor Co., Ltd. Method and apparatus for automatic steering control of automobile
KR20020095584A (ko) * 2001-06-15 2002-12-27 현대자동차주식회사 타이밍벨트의 교환시기 감지장치와 그 제어방법
US20050017860A1 (en) * 2002-07-31 2005-01-27 Hiroyuki Tsuji ID registration method for tire air pressure sensor, ID registration system, tire air pressure monitoring system, tire air pressure sensor, and smart control system
CN1416033A (zh) * 2002-10-30 2003-05-07 徐州重型机械厂 高空消防车支腿控制装置
US20060137483A1 (en) * 2002-12-13 2006-06-29 Uwe Zimmermann Method and device for object detection
CN1777527A (zh) * 2003-04-24 2006-05-24 罗伯特·博世有限公司 用于校准图象传感器的装置及方法
CN1843789A (zh) * 2005-04-06 2006-10-11 肖国 利用车轮与车身之间振动提供动力的汽车避震方法及系统
CN1920704A (zh) * 2005-08-25 2007-02-28 比亚迪股份有限公司 一种纯电动汽车四轮驱动控制系统
CN101484344A (zh) * 2006-07-03 2009-07-15 罗伯特·博世有限公司 用于支持车辆停车过程的方法
CN201096539Y (zh) * 2007-08-09 2008-08-06 苏州工业园区美尔冷却系统有限公司 车用温度传感器
US20100106356A1 (en) * 2008-10-24 2010-04-29 The Gray Insurance Company Control and systems for autonomously driven vehicles

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108700878A (zh) * 2016-03-31 2018-10-23 英特尔公司 在自主设备中实现自动传感器发现
CN108700878B (zh) * 2016-03-31 2021-11-02 英特尔公司 在自主设备中实现自动传感器发现
CN107450529A (zh) * 2016-05-06 2017-12-08 优步技术公司 用于自动驾驶车辆的改进的物体检测
CN109715442A (zh) * 2016-09-15 2019-05-03 株式会社小糸制作所 照明系统
CN111417557A (zh) * 2017-12-06 2020-07-14 罗伯特·博世有限公司 对摩托车的行为进行控制的控制装置和控制方法
CN111433096A (zh) * 2017-12-06 2020-07-17 罗伯特·博世有限公司 控制车道间行驶中的摩托车的行为的控制装置和控制方法
CN111417557B (zh) * 2017-12-06 2023-10-03 罗伯特·博世有限公司 对摩托车的行为进行控制的控制装置和控制方法
CN111433096B (zh) * 2017-12-06 2024-03-26 罗伯特·博世有限公司 控制车道间行驶中的摩托车的行为的控制装置和控制方法
TWI645242B (zh) * 2018-03-29 2018-12-21 鴻海精密工業股份有限公司 拍攝裝置
CN110341719A (zh) * 2018-04-03 2019-10-18 通用汽车环球科技运作有限责任公司 控制车辆以调节感知系统能量使用的方法
CN110874063A (zh) * 2018-08-09 2020-03-10 赫尔环球有限公司 用于道路的差异策略实施的方法、装置和计算机程序产品
CN111459155A (zh) * 2019-01-18 2020-07-28 百度(美国)有限责任公司 用于自主驾驶应用的动态确定车辆有效传感器覆盖的方法
CN111459155B (zh) * 2019-01-18 2023-04-07 百度(美国)有限责任公司 用于自主驾驶应用的动态确定车辆有效传感器覆盖的方法

Also Published As

Publication number Publication date
WO2012166170A8 (en) 2014-01-03
JP2014515527A (ja) 2014-06-30
KR102219593B1 (ko) 2021-02-25
EP2771751A1 (en) 2014-09-03
US20120310466A1 (en) 2012-12-06
KR20140039243A (ko) 2014-04-01
US8589014B2 (en) 2013-11-19
EP2771751A4 (en) 2015-09-16
KR20190003800A (ko) 2019-01-09
CN103718124B (zh) 2016-07-13
JP6468839B2 (ja) 2019-02-13
EP2771751B1 (en) 2019-08-21
WO2012166170A1 (en) 2012-12-06

Similar Documents

Publication Publication Date Title
US11327501B1 (en) Detecting sensor degradation by actively controlling an autonomous vehicle
CN103718124B (zh) 传感器域选择
US10037039B1 (en) Object bounding box estimation
US9255805B1 (en) Pose estimation using long range features
CN103339010B (zh) 车辆及操纵车辆的方法和系统
US9646497B1 (en) System and method for determining position and distance of objects using road fiducials
US8874372B1 (en) Object detection and classification for autonomous vehicles
US8612135B1 (en) Method and apparatus to localize an autonomous vehicle using convolution
CN104094177A (zh) 基于感知不确定性的车辆控制
US8755967B1 (en) Estimating road lane geometry using lane marker observations
US20130253753A1 (en) Detecting lane markings
US11852492B1 (en) Method and apparatus to transition between levels using warp zones
CN105009175A (zh) 基于传感器盲点和局限性来修改自主车辆的行为
US10380757B2 (en) Detecting vehicle movement through wheel movement
US12001217B1 (en) Detecting sensor degradation by actively controlling an autonomous vehicle

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20170704

Address after: California, USA

Patentee after: Weimo Co.,Ltd.

Address before: California, USA

Patentee before: Giant Holdings Ltd.

Effective date of registration: 20170704

Address after: California, USA

Patentee after: Giant Holdings Ltd.

Address before: California, USA

Patentee before: Google Inc.