JP7071271B2 - 自律車両の方向性を示すためのアクティブ化照明を構成するシステム - Google Patents

自律車両の方向性を示すためのアクティブ化照明を構成するシステム Download PDF

Info

Publication number
JP7071271B2
JP7071271B2 JP2018543267A JP2018543267A JP7071271B2 JP 7071271 B2 JP7071271 B2 JP 7071271B2 JP 2018543267 A JP2018543267 A JP 2018543267A JP 2018543267 A JP2018543267 A JP 2018543267A JP 7071271 B2 JP7071271 B2 JP 7071271B2
Authority
JP
Japan
Prior art keywords
autonomous vehicle
location
data
vehicle
data representing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018543267A
Other languages
English (en)
Other versions
JP2018536955A5 (ja
JP2018536955A (ja
Inventor
デイビッド ケントリー-クレイ ティモシー
ユーセフ ガマラ ラシャド
Original Assignee
ズークス インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US14/756,994 external-priority patent/US9701239B2/en
Priority claimed from US14/932,962 external-priority patent/US9630619B1/en
Application filed by ズークス インコーポレイテッド filed Critical ズークス インコーポレイテッド
Priority claimed from PCT/US2016/060183 external-priority patent/WO2017079349A1/en
Publication of JP2018536955A publication Critical patent/JP2018536955A/ja
Publication of JP2018536955A5 publication Critical patent/JP2018536955A5/ja
Priority to JP2022076675A priority Critical patent/JP2022119791A/ja
Application granted granted Critical
Publication of JP7071271B2 publication Critical patent/JP7071271B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/0029Spatial arrangement
    • B60Q1/0035Spatial arrangement relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60NSEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2/00Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
    • B60N2/24Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles for particular purposes or particular vehicles
    • B60N2/42Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles for particular purposes or particular vehicles the seat constructed to protect the occupant from the effect of abnormal g-forces, e.g. crash or safety seats
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/06Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle
    • B60Q1/08Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically
    • B60Q1/085Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights adjustable, e.g. remotely-controlled from inside vehicle automatically due to special conditions, e.g. adverse weather, type of road, badly illuminated road signs or potential dangers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/2611Indicating devices mounted on the roof of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/2661Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic mounted on parts having other functions
    • B60Q1/268Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic mounted on parts having other functions on windscreens or windows
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/44Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating braking action or preparation for braking, e.g. by detection of the foot approaching the brake pedal
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/44Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating braking action or preparation for braking, e.g. by detection of the foot approaching the brake pedal
    • B60Q1/442Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating braking action or preparation for braking, e.g. by detection of the foot approaching the brake pedal visible on the front side of the vehicle, e.g. for pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/507Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking specific to autonomous vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/525Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking automatically indicating risk of collision between vehicles in traffic or with pedestrians, e.g. after risk assessment using the vehicle sensor data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated
    • B60Q5/006Arrangement or adaptation of acoustic signal devices automatically actuated indicating risk of collision between vehicles or with pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/34Protecting non-occupants of a vehicle, e.g. pedestrians
    • B60R21/36Protecting non-occupants of a vehicle, e.g. pedestrians using airbags
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/056Detecting movement of traffic to be counted or controlled with provision for distinguishing direction of travel
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/167Driving aids for lane monitoring, lane changing, e.g. blind spot detection
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/20Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles
    • G08G1/202Dispatching vehicles on the basis of a location, e.g. taxi dispatching
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/18Methods or devices for transmitting, conducting or directing sound
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/18Methods or devices for transmitting, conducting or directing sound
    • G10K11/26Sound-focusing or directing, e.g. scanning
    • G10K11/34Sound-focusing or directing, e.g. scanning using electrical steering of transducer arrays, e.g. beam steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2300/00Indexing codes for automatically adjustable headlamps or automatically dimmable headlamps
    • B60Q2300/40Indexing codes relating to other road users or special conditions
    • B60Q2300/45Special conditions, e.g. pedestrians, road signs or potential dangers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2400/00Special features or arrangements of exterior signal lamps for vehicles
    • B60Q2400/40Welcome lights, i.e. specific or existing exterior lamps to assist leaving or approaching the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q2400/00Special features or arrangements of exterior signal lamps for vehicles
    • B60Q2400/50Projected symbol or information, e.g. onto the road or car body
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Acoustics & Sound (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Lighting Device Outwards From Vehicle And Optical Signal (AREA)

Description

本出願の実施形態は、全般的にロボット車両における安全システムのための方法、システム、および装置に関する。
関連出願の相互参照
本PCT国際出願は、2015年11月4日に出願された「Autonomous Vehicle Fleet Service and System」と題されている米国特許出願第14/756,994号明細書、2015年11月4日に出願された「Active Lighting Control for Communicating a State of an Autonomous Vehicle to Entities in a Surrounding Environment」と題されている米国特許出願第14/932,948号明細書、および2015年11月4日に出願された「Robotic Vehicle Active Safety Systems and Methods」と題されている米国特許出願第14/932,962号明細書の継続出願であり、これは、2015年11月4日に出願された「Autonomous Vehicle Fleet Service And System」と題されている米国特許出願第14/932,959号明細書、2015年11月4日に出願された「Adaptive Mapping To Navigate Autonomous Vehicles Responsive To Physical Environment Changes」と題されている米国特許出願第14/932,963号明細書に関連しており、これらのすべては、すべての目的のためにそれらの全体が参照によって本明細書に組み込まれている。
都市環境において搭乗者を移送するように構成されているタイプなどの自律車両は、たとえば、自律車両が運転を行っている、または運転を行っているであろう方向など、その車両の動作意図をその自律車両が人、車両などに通知すべきである多くの状況に遭遇する場合がある。その上、自律車両の搭乗者は、どの自律車両が彼らの移送ニーズにサービス提供することを割り当てられているかを決定することに関していくらかの不確かさを経験する場合がある。たとえば、目の前に多くの自律車両がある場合に、それらの自律車両のうちの1台に乗ることをスケジュールしている搭乗者は、どの自律車両が自分用に意図されているかを容易に区別したい場合がある。
したがって、ロボット車両の動作ステータスおよび意図を実施するためのシステム、装置、および方法に対する必要性がある。
以降の詳細な説明および添付の図面においては、さまざまな実施形態または例(「例」)が開示されている。
自律車両におけるアクティブ安全システムを実施するためのシステムの一例を示す図である。 自律車両におけるアクティブ安全システムを実施するための流れ図の一例を示す図である。 自律車両におけるアクティブ安全システムを実施するための流れ図の別の例を示す図である。 自律車両におけるアクティブ安全システムを実施するための流れ図のさらに別の例を示す図である。 自律車両におけるアクティブ安全システムを実施するためのシステムの一例を示す図である。 自律車両におけるアクティブ安全システムを実施するためのシステムの別の例を示す図である。 自律車両における知覚システムを実施するための流れ図の一例を示す図である。 自律車両におけるプランナーシステムによるオブジェクト優先順位付けの一例を示す図である。 自律車両におけるアクティブ安全システムにおけるしきい値ロケーションおよび関連付けられている段階的に高まるアラートの一例の上部平面図である。 自律車両におけるプランナーシステムを実施するための流れ図の一例を示す図である。 自律車両におけるシステムのブロック図の一例を示す図である。 自律車両の外部安全システムにおける音響ビームステアリングアレイの一例の上面図である。 センサカバレッジの2つの例の上部平面図である。 センサカバレッジの別の2つの例の上部平面図である。 自律車両の外部安全システムにおける音響ビームステアリングアレイの一例を示す図である。 自律車両における音響ビームステアリングを実施するための流れ図の一例を示す図である。 音響アラートに関連付けられている音響エネルギーを自律車両がオブジェクトへ誘導することの一例の上部平面図である。 自律車両の外部安全システムにおける光エミッタの一例を示す図である。 自律車両の外部安全システムにおける光エミッタの例の輪郭図である。 オブジェクトに対する自律車両の配向に基づく光エミッタアクティブ化の一例の上部平面図である。 オブジェクトに対する自律車両の配向に基づく光エミッタアクティブ化の一例の輪郭図である。 自律車両における光エミッタからの視覚的アラートを実施するための流れ図の一例を示す図である。 視覚的アラートを実施するために光を放射する自律車両の光エミッタの一例の上部平面図である。 自律車両の外部安全システムにおけるブラッダシステムの一例を示す図である。 自律車両の外部安全システムにおけるブラッダの例を示す図である。 自律車両におけるブラッダ展開の例を示す図である。 自律車両の内部安全システムにおけるシートベルトテンショニングシステムの一例を示す図である。 自律車両の内部安全システムにおけるシートアクチュエータシステムの一例を示す図である。 自律車両における運転システムの一例を示す図である。 自律車両における障害物回避操縦の一例を示す図である。 自律車両における障害物回避操縦の別の例を示す図である。 自律車両の光エミッタからの視覚的アラートを使用した、環境におけるオブジェクトとの視覚的通信の例を示す図である。 自律車両における光エミッタからの視覚的アラートを実施するための流れ図の別の例を示す図である。 自律車両の光エミッタからの視覚的アラートを使用した、環境におけるオブジェクトとの視覚的通信の例を示す図である。 自律車両における光エミッタからの視覚的アラートを実施するための流れ図のさらに別の例を示す図である。 自律車両の外部に配置されている光エミッタのその他の例の輪郭図である。 自律車両の外部に配置されている光エミッタのさらに他の例の輪郭図である。 自律車両の光エミッタの例を示す図である。 自律車両の光エミッタに関連付けられている光パターンを表すデータの例を示す図である。 自律車両における方向性の視覚的表示を実施するための流れ図の一例を示す図である。 自律車両における情報の視覚的表示を実施するための流れ図の一例を示す図である。 自律車両の光エミッタによる走行の方向性の視覚的表示の例を示す図である。 自律車両の光エミッタによる走行の方向性の視覚的表示のその他の例を示す図である。 自律車両の光エミッタによる走行の方向性の視覚的表示のさらに他の例を示す図である。 自律車両の光エミッタによる走行の方向性の視覚的表示のさらなる例を示す図である。 自律車両の光エミッタによる情報の視覚的表示の例を示す図である。 自律車両における光エミッタ配置の一例を示す図である。 自律車両における光エミッタ配置の一例を示す図である。
上述されている図面は、本発明のさまざまな例を示しているが、本発明は、示されている例によって限定されるものではない。図面においては、同様の参照番号は、同様の構造的な要素を指しているということを理解されたい。また、図面は必ずしも縮尺どおりになっていないということが理解される。
さまざまな実施形態または例が、システム、プロセス、方法、装置、ユーザインターフェース、ソフトウェア、ファームウェア、ロジック、回路、または、非一時的コンピュータ可読メディアにおいて具体化される一連の実行可能なプログラム命令としてなど、多くの方法で実施されることが可能である。プログラム命令は、光学的な、電子的な、またはワイヤレスの通信リンクを介して送信され、非一時的コンピュータ可読メディア内に格納されるか、またはその他の形で固定される。非一時的コンピュータ可読メディアの例は、たとえば、電子メモリ、RAM、DRAM、SRAM、ROM、EEPROM、フラッシュメモリ、ソリッドステートメモリ、ハードディスクドライブ、および不揮発性メモリを含むが、それらには限定されない。1つまたは複数の非一時的コンピュータ可読メディアが、複数のデバイスにわたって分散されることが可能である。一般には、開示されているプロセスのオペレーションは、任意の順序で実行されることが可能である(ただし、特許請求の範囲においてその他の形で提供されている場合は除く)。
1つまたは複数の例の詳細な説明が、添付の図とともに以降で提供されている。この詳細な説明は、そのような例に関連して提供されているが、いかなる特定の例にも限定されない。範囲は、特許請求の範囲によってのみ限定され、多くの代替形態、修正形態、および均等形態が包含される。以降の説明においては、徹底的な理解を提供するために多くの具体的な詳細が示されている。これらの詳細は、例の目的で提供されており、記述されている技術は、これらの具体的な詳細のうちのいくつかまたはすべてを伴わずに特許請求の範囲に従って実施されることが可能である。明確にするために、例に関連している技術分野において知られている技術項目は、説明を不必要にわかりにくくすることを回避するために、詳細に記述されていない。
図1は、自律車両におけるアクティブ安全システムを実施するためのシステムの一例を示している。図1においては、(上部平面図において示されている)自律車両100が、自律車両100の外部の環境190内を軌道105に沿って走行している場合がある。説明の目的のために、環境190は、自律車両100と潜在的に衝突する可能性がある1つもしくは複数のオブジェクト、たとえば静的なおよび/もしくは動的なオブジェクト、または自律車両100内に乗っている搭乗者(図示せず)におよび/もしくは自律車両100にその他の何らかの危険をもたらすオブジェクトを含む場合がある。たとえば、図1においては、オブジェクト180(たとえば、自動車)が、軌道185を有するものとして示されており、この軌道185は、(たとえば、軌道を変えること、減速することなどによって)変更されない場合には、(たとえば、自律車両100に追突することによる)自律車両100との潜在的な衝突187をもたらす可能性がある。
自律車両100は、(たとえば、パッシブセンサおよび/またはアクティブセンサを使用して)環境190を感知するためにセンサシステム(図示せず)を使用してオブジェクト180を検知することができ、自律車両100とのオブジェクト180の潜在的な衝突を緩和または防止するためにアクションを取ることができる。自律車両システム101が、センサシステムからのセンサデータ132を受信することができ、(たとえば、自律車両100のローカライザシステムにおいて実装されている)自律車両ロケーションデータ139を受信することができる。センサデータ132は、センサ信号(たとえば、センサシステムのセンサによって生成される信号)を表すデータを含むことができるが、それらには限定されない。センサ信号を表すデータは、自律車両100の外部の環境190を示すことができる。自律車両ロケーションデータ139は、環境190における自律車両100のロケーションを表すデータを含むことができるが、それらには限定されない。一例として、自律車両100のロケーションを表すデータは、位置および配向データ(たとえば、ローカル位置または局所的位置)、(たとえば、1つまたは複数のマップタイルからの)マップデータ、グローバルポジショニングシステム(GPS)によって生成されるデータ、および慣性測定ユニット(IMU)によって生成されるデータを含むことができる。いくつかの例においては、自律車両100のセンサシステムは、グローバルポジショニングシステム、慣性測定ユニット、または両方を含むことができる。
自律車両システム101は、経路カリキュレータ112、(たとえば、自律車両100の知覚システムにおいて実装される)オブジェクトデータカリキュレータ114、衝突プレディクタ116、オブジェクト分類デタミネータ118、およびキネマティクスカリキュレータ115を実装するために、ハードウェア、ソフトウェア、ファームウェア、ロジック、回路、非一時的コンピュータ可読メディアにおいて具体化されるコンピュータ実行可能命令、または前述のものの任意の組合せを含むことができるが、それらには限定されない。自律車両システム101は、オブジェクトタイプデータストア119を含むがそれには限定されない1つまたは複数のデータストアにアクセスすることができる。オブジェクトタイプデータストア119は、環境190において検知されたオブジェクトに関するオブジェクト分類に関連付けられているオブジェクトタイプを表すデータを含むことができる(たとえば、「座っている」、「立っている」、または「走っている」などのさまざまな歩行者オブジェクトタイプは、歩行者として分類されるオブジェクトに関連付けられることが可能である)。
経路カリキュレータ112は、たとえば、環境190における自律車両100のロケーションを表すデータ、およびその他のデータ(たとえば、車両ロケーションデータ139に含まれている局所的位置データ)を使用して、自律車両100の軌道(たとえば、軌道105)を表すデータを生成するように構成されることが可能である。経路カリキュレータ112は、たとえば、自律車両100によって実行されることになる今後の軌道を生成するように構成されることが可能である。いくつかの例においては、経路カリキュレータ112は、自律車両100のプランナーシステム内に、または自律車両100のプランナーシステムの一部として埋め込まれることが可能である。その他の例においては、経路カリキュレータ112および/またはプランナーシステムは、環境におけるオブジェクトの予測される動きに関連付けられるデータを計算することができ、オブジェクトの予測される動きに関連付けられる予測されるオブジェクト経路を決定することができる。いくつかの例においては、オブジェクト経路は、予測されるオブジェクト経路を構成することが可能である。その他の例においては、オブジェクト経路は、予測されるオブジェクト軌道を構成することが可能である。さらに他の例においては、(たとえば、環境における)オブジェクト経路は、予測されるオブジェクト軌道と同じまたは同様である場合がある予測されるオブジェクト軌道を構成することが可能である。
オブジェクトデータカリキュレータ114は、環境190に配置されているオブジェクト180のロケーションを表すデータ、オブジェクト180に関連付けられているオブジェクトトラックを表すデータ、およびオブジェクト180に関連付けられているオブジェクト分類を表すデータなどを計算するように構成されることが可能である。オブジェクトデータカリキュレータ114は、たとえば、センサデータ132に含まれているセンサ信号を表すデータを使用して、オブジェクトのロケーションを表すデータ、オブジェクトトラックを表すデータ、およびオブジェクト分類を表すデータを計算することができる。いくつかの例においては、オブジェクトデータカリキュレータ114は、センサ信号(たとえば、センサシステムからのセンサ信号)を表すデータを受信するように構成されて、知覚システムもしくはその一部分において実装されることが可能であり、または知覚システムもしくはその一部分を構成することが可能である。
オブジェクト分類デタミネータ118は、オブジェクトタイプ119(たとえば、オブジェクト分類の種類、オブジェクト分類のサブクラス、またはオブジェクト分類のサブセット)を表すデータにアクセスするように構成されることが可能であり、オブジェクトトラックを表すデータおよびオブジェクト分類を表すデータを、オブジェクトタイプ119を表すデータと比較して、オブジェクトタイプ(たとえば、オブジェクト分類の種類またはサブクラス)を表すデータを決定するように構成されることが可能である。一例として、「車」というオブジェクト分類を有する検知されたオブジェクトは、「セダン」、「クーペ」、「トラック」、または「スクールバス」というオブジェクトタイプを有することができる。たとえば、駐車されている「スクールバス」が、「静的な」というさらなるサブクラス(たとえば、そのスクールバスは動いていない)、または「動的な」というさらなるサブクラス(たとえば、そのスクールバスは動いている)を有することができるなど、オブジェクトタイプは、さらなるサブクラスまたはサブセットを含むことができる。
衝突プレディクタ116は、オブジェクトタイプを表すデータ、オブジェクトの軌道を表すデータ、および自律車両の軌道を表すデータを使用して、たとえば、自律車両100とオブジェクト180との間における衝突(たとえば、187)を予測するように構成されることが可能である。
キネマティクスカリキュレータ115は、たとえば、速度、スピード、加速度、減速度、運動量、局所的位置、および力を含むがそれらには限定されない、環境190におけるオブジェクト180の動きに関連付けられている1つまたは複数のスカラ量および/またはベクトル量を表すデータを算出するように構成されることが可能である。キネマティクスカリキュレータ115からのデータは、たとえば、オブジェクト180と自律車両100との間における衝撃までの推定される時間を表すデータ、およびオブジェクト180と自律車両100との間における距離を表すデータを含むがそれらには限定されないその他のデータを算出するために使用されることが可能である。いくつかの例においては、キネマティクスカリキュレータ115は、環境190におけるその他のオブジェクト(たとえば、車、歩行者、自転車、オートバイなど)が、警戒したもしくはコントロールのきく状態にある可能性、または警戒していない、コントロールのきかない、もしくは酒に酔った状態にある可能性などを予測するように構成されることが可能である。一例として、キネマティクスカリキュレータ115は、その他のエージェント(たとえば、その他の車両の運転手またはライダー)が合理的に行動している確率(たとえば、彼らが運転しているもしくは乗っているオブジェクトの動きに基づく)(これは、自律車両100の行動を決定づける場合がある)、または非合理的に行動している確率(たとえば、彼らが乗っているもしくは運転しているオブジェクトの常軌を逸した動きに基づく)を推定するように構成されることが可能である。合理的なまたは非合理的な行動は、自律車両100の現在のまたは今後の軌道に対するオブジェクトの今後のロケーションを推定または予測するために使用されることが可能である経時的に受信されるセンサデータに基づいて推測されることが可能である。したがって、自律車両100のプランナーシステムは、たとえば、特別に用心深い車両操縦を実施するように、および/または自律車両100の安全システムをアクティブ化するように構成されることが可能である。
安全システムアクティベータ120は、衝突プレディクタ116によって衝突が予測される場合に、および/またはその他の安全関連事象(たとえば、急ブレーキ、急加速等など、車両100による緊急時操縦)の発生時に自律車両100の1つまたは複数の安全システムをアクティブ化するように構成されることが可能である。安全システムアクティベータ120は、内部安全システム122、外部安全システム124、運転システム126(たとえば、衝突を回避するために緊急時操縦を運転システム126に実行させる)、または前述のものの任意の組合せをアクティブ化するように構成されることが可能である。たとえば、運転システム126は、車両100の軌道を軌道105から衝突回避軌道105aへ変更することをステアリングシステム(たとえば、ホイールに関するステアリング角またはステアリングベクトルを設定する)および推進システム(たとえば、電気モータへ供給される電力)に行わせるように構成されているデータを受信することができる。
図2Aは、自律車両100におけるアクティブ安全システムを実施するための流れ図200の一例を示している。流れ図200においては、ステージ202において、自律車両100の外部の環境(たとえば、環境190)における自律車両100の軌道203を表すデータが受信されること(たとえば、自律車両100のプランナーシステムにおいて実装されること)が可能である。
ステージ204において、環境(たとえば、環境190)に配置されているオブジェクト(たとえば、自動車180)に関連付けられているオブジェクトデータが計算されることが可能である。オブジェクトデータを計算するためにステージ204においてセンサデータ205がアクセスされることが可能である。オブジェクトデータは、環境におけるオブジェクトロケーション、オブジェクトに関連付けられているオブジェクトトラック(たとえば、動いていないオブジェクトに関しては静的な、および動いているオブジェクトに関しては動的な)、ならびにオブジェクト(たとえば、歩行者、犬、猫、自転車、オートバイ、自動車、トラックなど)に関連付けられているオブジェクト分類(たとえば、ラベル)を表すデータを含むことができるが、それらには限定されない。ステージ204は、環境におけるオブジェクトロケーション207を表すデータ、オブジェクトトラック209を表すデータ、およびオブジェクト分類211を表すデータを含むがそれらには限定されない、オブジェクトに関連付けられている1つまたは複数のタイプのデータを出力することができる。
ステージ206において、環境におけるオブジェクトの予測されるオブジェクト経路が計算されることが可能である。一例として、ステージ206は、オブジェクトロケーション207を表すデータを受信することができ、そのデータを処理して、予測されるオブジェクト経路213を表すデータを生成することができる。
ステージ208において、オブジェクトタイプ215を表すデータがアクセスされることが可能であり、ステージ210において、オブジェクトトラック209を表すデータ、オブジェクト分類211を表すデータ、およびオブジェクトタイプ215を表すデータに基づいて、オブジェクトタイプ217を表すデータが決定されることが可能である。オブジェクトタイプの例は、ほんのいくつかの例を挙げれば、静的なオブジェクトトラック(たとえば、歩行者が動いていない)を有する歩行者オブジェクトタイプ、動的なオブジェクトトラック(たとえば、自動車が動いている)を有する自動車オブジェクトタイプ、および静的なオブジェクトトラック(たとえば、交通標識、レーンマーカ、消火栓)を有するインフラストラクチャーオブジェクトタイプなどを含むことができるが、それらには限定されない。ステージ210は、オブジェクトタイプ217を表すデータを出力することができる。
ステージ212において、決定されたオブジェクトタイプ217、自律車両軌道203、および予測されるオブジェクト経路213に基づいて、自律車両とオブジェクトとの間における衝突が予測されることが可能である。一例として、動的であるオブジェクトトラック(たとえば、オブジェクトが環境において動いている)を有するオブジェクト、自律車両の軌道と潜在的な対立状態にあるオブジェクトの軌道(たとえば、それらの軌道が、互いに交差するかまたはその他の形で干渉する可能性がある)、およびオブジェクトが衝突脅威である可能性が高いということを示す(たとえば、オブジェクトタイプ217を算出する際に使用された)オブジェクト分類211を有するオブジェクト(たとえば、そのオブジェクトが、自動車、スケートボーダー、自転車運転者、オートバイなどとして分類されている)に起因して、決定されたオブジェクトタイプ217に部分的に基づいて衝突が予測されることが可能である。
(たとえば、ステージ212において)衝突が予測される場合には、ステージ214において、自律車両の安全システムがアクティブ化されることが可能である。ステージ214は、たとえば、1つもしくは複数の内部安全システム、1つもしくは複数の外部安全システム、1つもしくは複数の運転システム(たとえば、ステアリング、推進、制動など)、または前述のものの組合せなど、自律車両の1つまたは複数の安全システムをアクティブ化することができる。ステージ214は、自律車両100の安全システムのうちの1つまたは複数をアクティブ化することを(たとえば、データおよび/または信号を通信することによって)安全システムアクティベータ220に行わせることができる。
図2Bは、自律車両100におけるアクティブ安全システムを実施するための流れ図250の別の例を示している。流れ図250においては、ステージ252において、自律車両100の外部の環境(たとえば、環境190)における自律車両100の軌道253を表すデータが(たとえば、自律車両100のプランナーシステムから)受信されることが可能である。
ステージ254において、環境におけるオブジェクトのロケーションが決定されることが可能である。環境257におけるオブジェクトロケーションを表すデータを決定するために、(たとえば、知覚システムによって)センサデータ255が処理されることが可能である。環境(たとえば、環境190)におけるオブジェクトに関連付けられているデータ(たとえば、オブジェクト180に関連付けられているオブジェクトデータ)が、ステージ254において決定されることが可能である。ステージ254においてアクセスされたセンサデータ255は、オブジェクトデータを決定するために使用されることが可能である。オブジェクトデータは、環境におけるオブジェクトのロケーション、オブジェクトに関連付けられているオブジェクトトラック(たとえば、動いていないオブジェクトに関しては静的な、および動いているオブジェクトに関しては動的な)、オブジェクト(たとえば、歩行者、犬、猫、自転車、オートバイ、自動車、トラックなど)に関連付けられているオブジェクト分類、ならびにオブジェクトに関連付けられているオブジェクトタイプを表すデータを含むことができるが、それらには限定されない。ステージ254は、環境におけるオブジェクトロケーション257を表すデータ、オブジェクトに関連付けられているオブジェクトトラック261を表すデータ、オブジェクトに関連付けられているオブジェクト分類263を表すデータ、およびオブジェクトに関連付けられているオブジェクトタイプ259を表すデータを含むがそれらには限定されない、オブジェクトに関連付けられている1つまたは複数のタイプのデータを出力することができる。
ステージ256において、環境におけるオブジェクトの予測されるオブジェクト経路が計算されることが可能である。一例として、ステージ256は、オブジェクトロケーション257を表すデータを受信することができ、そのデータを処理して、予測されるオブジェクト経路265を表すデータを生成することができる。いくつかの例においては、ステージ256において生成された、予測されるオブジェクト経路265を表すデータは、流れ図250の別のステージにおける、たとえばステージ258におけるデータ入力として使用されることが可能である。その他の例においては、ステージ256が迂回されることが可能であり、流れ図250は、ステージ254からステージ258へ遷移することができる。
ステージ258において、自律車両軌道253およびオブジェクトロケーション265に基づいて、自律車両とオブジェクトとの間における衝突が予測されることが可能である。オブジェクトロケーション257は、環境におけるオブジェクトの動きに起因して第1のロケーションから次のロケーションへ変わることが可能である。たとえば、別々の時点において、オブジェクトは、動いている場合があり(たとえば、動的な「D」というオブジェクトトラックを有し)、動いていない場合があり(たとえば、静的な「S」というオブジェクトトラックを有し)、または両方である場合がある。しかしながら、知覚システムは、それらの別々の時点の間に(たとえば、センサシステムからのセンサデータを使用して)オブジェクトを継続的に追跡把握して、それらの別々の時点におけるオブジェクトロケーション257を決定することができる。オブジェクトの動きの方向における変化、および/またはオブジェクトの動いている状態と動いていない状態との間における切り替えに起因して、ステージ256において計算される予測されるオブジェクト経路265は、決定することが困難である場合があり、したがって、予測されるオブジェクト経路265は、ステージ258におけるデータ入力として使用される必要はない。
ステージ258は、たとえば、オブジェクトタイプ259および予測されるオブジェクト経路265など、図2Bにおいて示されていないデータを使用して衝突を予測することができる。第1の例として、ステージ258において、自律車両軌道253、オブジェクトロケーション257、およびオブジェクトタイプ259に基づいて、自律車両とオブジェクトとの間における衝突が予測されることが可能である。第2の例として、ステージ258において、自律車両軌道253および予測されるオブジェクト経路265に基づいて、自律車両とオブジェクトとの間における衝突が予測されることが可能である。第3の例として、ステージ258において、自律車両軌道253、予測されるオブジェクト経路265、およびオブジェクトタイプ259に基づいて、自律車両とオブジェクトとの間における衝突が予測されることが可能である。
(たとえば、ステージ258において)衝突が予測される場合には、ステージ260において、自律車両の安全システムがアクティブ化されることが可能である。ステージ260は、たとえば、1つもしくは複数の内部安全システム、1つもしくは複数の外部安全システム、1つもしくは複数の運転システム(たとえば、ステアリング、推進、制動など)、または前述のものの組合せなど、自律車両の1つまたは複数の安全システムをアクティブ化することができる。ステージ260は、自律車両の安全システムのうちの1つまたは複数をアクティブ化することを(たとえば、データおよび/または信号を通信することによって)安全システムアクティベータ269に行わせることができる。
図2Cは、自律車両におけるアクティブ安全システムを実施するための流れ図270のさらに別の例を示している。ステージ272において、自律車両100の外部の環境(たとえば、環境190)における自律車両100の軌道273を表すデータが(たとえば、自律車両100のプランナーシステムから)受信されることが可能である。
ステージ274において、たとえばセンサデータ275を使用して、(たとえば、知覚システムによって)環境におけるオブジェクトのロケーションが決定されることが可能である。ステージ274は、オブジェクトロケーション279を表すデータを生成することができる。オブジェクトロケーション279を表すデータは、環境におけるオブジェクトのロケーションに対するオブジェクトの動き281の予測される進度を表すデータを含むことができる。たとえば、環境における動きがないことを示す静的なオブジェクトトラックをオブジェクトが有している場合には、動き281の予測進度はゼロであり得る。しかしながら、オブジェクトのオブジェクトトラックが動的であり、オブジェクト分類が自動車である場合には、動き281の予測される進度はゼロではないものであり得る。
ステージ276において、動き281の予測される進度に基づいて、環境におけるオブジェクトの予測される次のロケーションが計算されることが可能である。ステージ276は、予測される次のロケーション283を表すデータを生成することができる。
ステージ278において、予測される次のロケーション283および自律車両軌道273に基づいて、オブジェクトと自律車両との間における衝撃の確率が予測されることが可能である。ステージ278は、衝撃の確率285を表すデータを生成することができる。
ステージ280において、自律車両の安全システムのサブセットのさまざまな段階的に高まる機能をアクティブ化するためのしきい値のサブセット(たとえば、環境におけるロケーションまたは距離)が、衝撃の確率285に基づいて計算されることが可能である。しきい値の少なくとも1つのサブセットは、自律車両の安全システムのさまざまな段階的に高まる機能のアクティブ化に関連付けられている。ステージ280は、1つまたは複数のしきい値サブセット287を表すデータを生成することができる。いくつかの例においては、しきい値のサブセットは、自律車両に対するロケーションを構成することができ、または自律車両に対する距離を構成することができる。たとえば、しきい値は、基準ロケーション(たとえば、自律車両)に対するロケーションまたは一連のロケーションの関数であることが可能である。さらに、しきい値は、オブジェクトおよび自律車両に対する距離、または予測されるオブジェクトロケーション間における距離を含む、任意のオブジェクトもしくはオブジェクトロケーション間における距離の関数であることが可能である。
ステージ282において、関連付けられている予測される確率に基づいて、安全システムのさまざまな段階的に高まる機能のうちの1つまたは複数がアクティブ化されることが可能である(たとえば、今にも起こりそうな衝突を示す衝撃の確率の予測されるセットに基づくブラッダのアクティブ化)。ステージ282は、衝突の確率の対応する1つまたは複数のセットに基づいて自律車両の安全システムのうちの1つまたは複数をアクティブ化することを(たとえば、データおよび/または信号を通信することによって)安全システムアクティベータ289に行わせることができる。
図3Aは、自律車両におけるアクティブ安全システムを実施するためのシステムの一例300を示している。図3Aにおいては、自律車両システム301が、センサシステム320を含むことができ、センサシステム320は、(たとえば、リアルタイムで、またはほぼリアルタイムで)環境390を感知してセンサデータ332および334(たとえば、センサ信号を表すデータ)を(たとえば、リアルタイムで)生成するように構成されているセンサ328を含む。
自律車両システム301は、知覚システム340を含むことができ、知覚システム340は、環境390におけるオブジェクトを検知し、オブジェクトに関するオブジェクトトラックを決定し、オブジェクトを分類し、環境390におけるオブジェクトのロケーションを追跡把握し、たとえば、交通標識/信号、ロードマーキング、レーンマーキング等など、環境390における特定のタイプのオブジェクトを検知するように構成されている。知覚システム340は、センサシステム320からのセンサデータ334を受信することができる。
自律車両システム301は、環境390における自律車両のロケーションを決定するように構成されているローカライザシステム330を含むことができる。ローカライザシステム330は、センサシステム320からのセンサデータ332を受信することができる。いくつかの例においては、ローカライザシステム330によって受信されるセンサデータ332は、知覚システム340によって受信されるセンサデータ334と同じではない場合がある。たとえば、知覚システム330は、ライダ(LIDAR)(たとえば、2D、3D、カラーライダ)、レーダ(RADAR)、およびカメラ(たとえば、イメージ取り込みデバイス)を含むがそれらには限定されないセンサからのデータ334を受信することができ、その一方でローカライザシステム330は、グローバルポジショニングシステム(GPS)データ、慣性測定ユニット(IMU)データ、マップデータ、ルートデータ、ルートネットワーク定義ファイル(RNDF)データ、およびマップタイルデータを含むがそれらには限定されないデータ332を受信することができる。ローカライザシステム330は、データストア、データリポジトリ、メモリ等など、センサシステム320以外のソースからデータを受信することができる。その他の例においては、ローカライザシステム330によって受信されるセンサデータ332は、知覚システム340によって受信されるセンサデータ334と同じである場合がある。さまざまな例においては、ローカライザシステム330および知覚システム340は、同様のもしくは同等のセンサ、または同様のもしくは同等のタイプのセンサを実装することが可能であり、または実装しないことも可能である。さらに、ローカライザシステム330および知覚システム340はそれぞれ、互いに独立して任意のタイプのセンサデータ332を実装することができる。
知覚システム340は、センサデータ334を処理して、オブジェクトデータ349を生成することができ、オブジェクトデータ349は、プランナーシステム310によって受信されることが可能である。オブジェクトデータ349は、環境390において検知されるオブジェクトに関連付けられているデータを含むことができ、それらのデータは、たとえば、オブジェクト分類、オブジェクトタイプ、オブジェクトトラック、オブジェクトロケーション、予測されるオブジェクト経路、予測されるオブジェクト軌道、およびオブジェクト速度を表すデータを含むことができるが、それらには限定されない。
ローカライザシステム330は、センサデータ334、および任意選択でその他のデータを処理して、位置および配向データ、局所的位置データ339を生成することができ、それらのデータは、プランナーシステム310によって受信されることが可能である。局所的位置データ339は、たとえば、環境390における自律車両のロケーションを表すデータ、GPSデータ、IMUデータ、マップデータ、ルートデータ、ルートネットワーク定義ファイル(RNDF)データ、オドメトリデータ、ホイールエンコーダデータ、およびマップタイルデータを含むことができるが、それらには限定されない。
プランナーシステム310は、オブジェクトデータ349および局所的位置データ339を処理して、環境390を通る自律車両のための経路(たとえば、自律車両の軌道)を算出することができる。算出された経路は、たとえば、自律車両に対する障害物を生じさせる可能性がある、および/または自律車両に対する衝突脅威をもたらす可能性がある、環境390におけるオブジェクトによって部分的に決定される。
プランナーシステム310は、1つまたは複数の車両コントローラ350との間でコントロールおよびデータ317を通信するように構成されることが可能である。コントロールおよびデータ317は、運転システム326を介して自律車両の運転操作(たとえば、ステアリング、制動、推進、シグナリングなど)をコントロールして、自律車両の1つまたは複数の内部安全システム322をアクティブ化し、自律車両の1つまたは複数の外部安全システム324をアクティブ化するように構成されている情報を含むことができる。運転システム326は、たとえば衝突回避操縦など、自律車両の能動的な安全に関連付けられているさらなる機能を実行することができる。
車両コントローラ350は、コントロールおよびデータ317を受信し、コントロールおよびデータ317に基づいて、内部データ323、外部データ325、および運転データ327を、たとえばコントロールおよびデータ317によって決定されたとおりに、それぞれ内部安全システム322、外部安全システム324、および運転システム326へ通信するように構成されることが可能である。一例として、プランナーシステム310が、環境390におけるオブジェクトのいくつかのアクションに基づいて、内部安全システム322がアクティブ化されるべきであるということを決定した場合には、コントロールおよびデータ317は、内部安全システム322の1つまたは複数の機能をアクティブ化するための内部データ323を車両コントローラ350に生成させるように構成されている情報を含むことができる。
自律車両システム301、ならびにその関連付けられているシステム310、320、330、340、350、322、324、および326は、データストア311(たとえば、データリポジトリ)からのデータ315、および/または外部リソース313(たとえば、クラウド、インターネット、ワイヤレスネットワーク)からのデータ312にアクセスするように構成されることが可能である。自律車両システム301、ならびにその関連付けられているシステム310、320、330、340、350、322、324、および326は、図3Aにおいて示されているものを含むがそれらには限定されないさまざまなシステムおよび/またはデータソースからのデータにリアルタイムでアクセスするように構成されることが可能である。一例として、ローカライザシステム330および知覚システム340は、センサデータ332およびセンサデータ334にリアルタイムでアクセスするように構成されることが可能である。別の例として、プランナーシステム310は、オブジェクトデータ349、局所的位置データ339、ならびにコントロールおよびデータ317にリアルタイムでアクセスするように構成されることが可能である。その他の例においては、プランナーシステム310は、データストア311および/または外部リソース313にリアルタイムでアクセスするように構成されることが可能である。
図3Bは、自律車両におけるアクティブ安全システムを実施するためのシステムの別の例399を示している。例399においては、センサシステム320におけるセンサ328は、たとえば、光検出および測距センサ371(ライダ)、イメージ取り込みセンサ373(たとえば、カメラ)、無線検出および測距センサ375(レーダ)、音取り込みセンサ377(たとえば、マイクロフォン)、グローバルポジショニングシステムセンサ(GPS)、および/または慣性測定ユニットセンサ(IMU)379、ならびに環境センサ372(たとえば、温度、バロメータ圧)のうちの1つまたは複数を含むことができるが、それらには限定されない。ローカライザシステム330および知覚システム340は、センサデータ332および/またはセンサデータ334をそれぞれセンサ328のうちの1つまたは複数から受信することができる。たとえば、知覚システム340は、ライダ371、カメラ373、レーダ375、環境372、およびマイクロフォン377からのセンサデータなど、環境390におけるオブジェクトに関連付けられている情報を決定することに関連しているセンサデータ334を受信することができ、その一方でローカライザシステム330は、GPS/IMU379からなど、環境390における自律車両のロケーションに関連付けられているセンサデータ332を受信することができる。さらに、ローカライザシステム330は、たとえば、マップデータ、マップタイルデータ、ルートデータ、ルートネットワーク定義ファイル(RNDF)データ、データストア、データリポジトリ等など、センサシステム320以外のソースからデータを受信することができる。いくつかの例においては、ローカライザシステム330によって受信されるセンサデータ(332、334)は、知覚システム340によって受信されるセンサデータ(332、334)と同じである場合がある。その他の例においては、ローカライザシステム330によって受信されるセンサデータ(332、334)は、知覚システム340によって受信されるセンサデータ(332、334)と同じではない場合がある。センサデータ332および334はそれぞれ、センサシステム320における1つまたは複数のセンサまたはセンサタイプの任意の組合せからのデータを含むことができる。センサデータ332および334の数量およびタイプは、他方から独立していることが可能であり、同様もしくは同等であることが可能であり、または同様もしくは同等ではないことも可能である。
一例として、ローカライザシステム330は、自律車両100の位置における経時的な変化を推定するためのモーションセンサからのオドメトリデータ336、(たとえば、推進システム368による)ホイール回転に基づいて自律車両100の動き、距離、およびその他のメトリックを計算するためのホイールエンコーダ337、マップタイルを表すデータ、ルートデータ、ルートネットワーク定義ファイル(RNDF)データ、および/またはその他のデータからのマップデータ335、ならびに、自律車両100の(たとえば、シミュレーション、取り込まれたデータなどからの)車両動態のモデルに基づいて車両ロケーションデータを計算するために使用されることが可能である自律車両(AV)モデル338を表すデータなど、センサデータ(332、334)以外のソースからのデータに対して受信および/またはアクセスを行うことができる。ローカライザシステム330は、局所的位置データ339を表すデータを生成するために示されているデータリソースのうちの1つまたは複数を使用することができる。
別の例として、知覚システム340は、センサデータ(332、334)を解析もしくはその他の形で分析、処理、または操作して、オブジェクト検知341、オブジェクトトラック343(たとえば、どの検知されたオブジェクトが静的であるか(動いていないか)およびどれが動的であるか(動いているか)を決定すること)、オブジェクト分類345(たとえば、車、オートバイ、自転車、歩行者、スケートボーダー、郵便ポスト、建物、街灯など)、オブジェクト追跡把握347(たとえば、環境390におけるオブジェクトのロケーションにおける変化に基づいてオブジェクトを追跡把握すること)、ならびに交通信号/標識検知342(たとえば、停止信号、停止標識、踏切、レーンマーカ、横断歩道など)を実施することができる。
さらに別の例として、プランナーシステム310は、局所的位置データ339およびオブジェクトデータ349を受信することができ、データ(局所的位置データ339、オブジェクトデータ349)を解析もしくはその他の形で分析、処理、または操作して、たとえば、軌道計算381、しきい値ロケーション推定386、オーディオ信号選択389、光パターン選択382、キネマティクス計算384、オブジェクトタイプ検知387、衝突予測385、およびオブジェクトデータ計算383を含むがそれらには限定されない機能を実施することができる。プランナーシステム310は、軌道およびコントロールデータ317を車両コントローラ350へ通信することができる。車両コントローラ350は、車両コントロールおよびデータ317を処理して、運転システムデータ327、内部安全システムデータ323、および外部安全システムデータ325を生成することができる。運転システムデータ327は、運転システム326へ通信されることが可能である。運転システム326は、運転システムデータ327を制動システム364、ステアリングシステム366、推進システム368、およびシグナルシステム362(たとえば、ターンシグナル、ブレーキシグナル、ヘッドライト、および走行用ライト)へ通信することができる。たとえば、運転システムデータ327は、ステアリングシステム366のためのステアリング角データ(たとえば、ホイールに関するステアリング角)、ブレーキシステム364のための制動データ(たとえば、ブレーキパッドに加えられることになるブレーキ力)、および推進システム368のための推進データ(たとえば、モータに加えられることになる電圧、電流、または電力)を含むことができる。破線377は、車両軌道処理レイヤと車両物理的実行レイヤとの間における境界を表すことができ、車両軌道処理レイヤにおいて処理されるデータは、運転システム326、内部安全システム322、または外部安全システム324のうちの1つまたは複数によって実装される。一例として、内部安全システム322の1つまたは複数の部分は、衝突および/またはその他の極端な事象(たとえば、自律車両100による衝突回避操縦)の場合に自律車両100における搭乗者の安全を高めるように構成されることが可能である。別の例として、外部安全システム324の1つまたは複数の部分は、上述の衝突および/または極端な事象の衝撃力またはマイナスの影響を低減するように構成されることが可能である。
内部安全システム322は、シートアクチュエータシステム363およびシートベルトテンショニングシステム361を含むがそれらには限定されないシステムを有することができる。外部安全システム324は、音響アレイシステム365、光エミッタシステム367、およびブラッダシステム369を含むがそれらには限定されないシステムを有することができる。運転システム326は、制動システム364、シグナルシステム362、ステアリングシステム366、および推進システム368を含むがそれらには限定されないシステムを有することができる。外部安全システム324におけるシステムは、光エミッタシステム367における1つまたは複数の光エミッタ(図示せず)を使用して光を環境390へと放射すること、音響ビームステアリングアレイ365における1つまたは複数の音響ビームステアリングアレイ(図示せず)を使用して音響エネルギー(たとえば、音)の誘導されるビームを環境390へと放射することによって、またはブラッダシステム369における1つまたは複数のブラッダ(図示せず)を、展開されていない位置から、展開された位置へ膨張させることによって、または前述のものの任意の組合せによって環境390とのインターフェースを取るように構成されることが可能である。さらに、音響ビームステアリングアレイ365は、たとえば、トランスデューサ、エアホーン、または共鳴器を使用して、音響エネルギーを環境へと放射することができる。音響エネルギーは、無指向性であることが可能であり、または誘導されるビーム、もしくはその他の形で焦点を絞られた音(たとえば、超音波源の指向性の音響源、フェーズドアレイ、パラメトリックアレイ、大型ラジエータ)を構成することができる。したがって、外部安全システム324におけるシステムは、自律車両100の外部表面に関連付けられているロケーション(たとえば、図1における100e)など、それらのシステムが環境390とのインターフェースを取ることを可能にするように構成されている自律車両100の1つまたは複数のロケーションに配置されることが可能である。内部安全システム322におけるシステムは、自律車両100の内部に関連付けられている1つまたは複数のロケーション(たとえば、図1における100i)に配置されることが可能であり、座席、ベンチシート、フロア、レール、ブラケット、支柱、またはその他の構造など、自律車両100の1つまたは複数の構造に接続されることが可能である。シートベルトテンショニングシステム361およびシートアクチュエータシステム363は、たとえば、衝突、車両加速、車両減速、回避操縦、急旋回、急ブレーキなどに起因して生じる可能性がある機械的負荷を支持するように構成されている1つまたは複数の構造と結合されることが可能である。
図4は、自律車両における知覚システムを実施するための流れ図400の一例を示している。図4においては、知覚システム440によって受信される(たとえば、センサシステム420における1つまたは複数のセンサによって生成された)センサデータ434が、センサデータ434a~434c(たとえば、LIDARデータ、カラーライダデータ、3D ライダデータ)として視覚的に示されている。ステージ402において、センサデータ434が、検知されたオブジェクトを表すデータを含んでいるか否かに関して決定が行われることが可能である。NO分岐が取られた場合には、流れ図400は、ステージ402へ戻って、環境におけるオブジェクトを検知するためにセンサデータ434の分析を続けることができる。YES分岐が取られた場合には、流れ図400は、ステージ404へ続くことができ、ステージ404では、検知されたオブジェクトを表すデータが、交通標識または信号を表すデータを含んでいるか否かに関して決定が行われることが可能である。YES分岐が取られた場合には、流れ図400は、ステージ406へ遷移することができ、ステージ406では、検知されたオブジェクトを表すデータが分析されて、たとえば、交通信号(たとえば、赤色、黄色、および緑色)、または停止標識(たとえば、形状、文字、および色に基づいて)など、検知された信号/標識オブジェクトのタイプを分類することが可能である。ステージ406における分析は、交通オブジェクトデータストア424にアクセスすることを含むことができ、交通オブジェクトデータストア424では、交通分類を表すデータの例が、検知されたオブジェクトを表すデータと比較されて、交通分類を表すデータ407を生成することが可能である。ステージ406は次いで、ステージ412など、別のステージへ遷移することができる。いくつかの例においては、ステージ404は、任意選択であることが可能であり、ステージ402は、ステージ408へ遷移することができる。
ステージ404からNO分岐が取られた場合には、流れ図400は、ステージ408へ遷移することができ、ステージ408では、検知されたオブジェクトを表すデータが分析されて、分類されることになるその他のオブジェクトタイプを決定することが可能である。YES分岐が取られた場合には、流れ図400は、ステージ410へ遷移することができ、ステージ410では、検知されたオブジェクトを表すデータが分析されて、オブジェクトのタイプを分類することが可能である。オブジェクト分類を表すデータの格納されている例を、検知されたオブジェクトを表すデータと比較して、オブジェクト分類を表すデータ411を生成するために、オブジェクトデータストア426がアクセスされることが可能である。ステージ410は次いで、ステージ412など、別のステージへ遷移することができる。ステージ408からNO分岐が取られた場合には、ステージ408は、ステージ402へ戻るなど、別のステージへ遷移することができる。
ステージ412において、ステージ406および/または410において分類されたオブジェクトデータが分析されて、検知されたオブジェクトを表すデータに関連付けられている動きをセンサデータ434が示しているかどうかを決定することが可能である。動きが示されていない場合には、ステージ414へのNO分岐が取られることが可能であり、ステージ414では、検知されたオブジェクトに関するオブジェクトトラックを表すデータが静的()に設定されることが可能である。ステージ416において、オブジェクト(たとえば、静的なオブジェクト)のロケーションを表すデータが追跡把握されることが可能である。たとえば、時間t0において検知された静止しているオブジェクトが、その後の時間t1において動いて、動的なオブジェクトになる場合がある。その上、そのオブジェクトのロケーションを表すデータが、プランナーシステム(たとえば、図3Bにおけるプランナーシステム310)によって受信されるデータに含まれることが可能である。プランナーシステムは、そのオブジェクトのロケーションを表すデータを使用して、そのオブジェクトの座標(たとえば、自律車両100に関する座標)を決定することができる。
その一方で、検知されたオブジェクトにおいて動きが示されている場合には、ステージ418へのYES分岐が取られることが可能であり、ステージ418では、検知されたオブジェクトに関するオブジェクトトラックを表すデータが動的()に設定されることが可能である。ステージ419において、オブジェクト(たとえば、動的なオブジェクト)のロケーションを表すデータが追跡把握されることが可能である。プランナーシステムは、オブジェクトトラックを表すデータ、および/またはオブジェクトのロケーションを表すデータを分析して、検知されたオブジェクト(静的なまたは動的な)が潜在的に、自律車両に関して対立する軌道を有する可能性があるかどうか、および/または自律車両の付近に近づきすぎる可能性があるかどうかを決定することができ、それによって(たとえば、光エミッタからの、および/または音響ビームステアリングアレイからの)アラートが使用されて、オブジェクトおよび/またはそのオブジェクトをコントロールしている人の
行動を変更することが可能である。
ステージ422において、オブジェクト分類を表すデータ、オブジェクトトラックを表すデータ、およびオブジェクトのロケーションを表すデータのうちの1つまたは複数が、オブジェクトデータ449(たとえば、プランナーシステムによって受信されたオブジェクトデータ)とともに含まれることが可能である。一例として、センサデータ434aは、オブジェクト(たとえば、スケートボードに乗っている人)を表すデータを含むことができる。ステージ402は、センサデータ434aにおいてそのオブジェクトを検知することができる。ステージ404において、検知されたオブジェクトが交通標識/信号ではないということが決定されることが可能である。ステージ408は、検知されたオブジェクトが別のクラスのものであるということを決定することができ、ステージ410において、オブジェクトデータストア426からアクセスされたデータに基づいて、オブジェクトを表すデータを分析して、分類が、スケートボードに乗っている人にマッチするということを決定し、オブジェクト分類411を表すデータを出力することができる。ステージ412において、検知されたオブジェクトが動いているという決定が行われることが可能であり、ステージ418において、オブジェクトトラックが動的(D)に設定されることが可能であり、オブジェクトのロケーションが、ステージ419において(たとえば、検知されたオブジェクトのロケーションにおける変化を探してセンサデータ434aを引き続き分析することによって)追跡把握されることが可能である。ステージ422において、センサデータ434に関連付けられているオブジェクトデータは、たとえば、分類(たとえば、スケートボードに乗っている人)、オブジェクトトラック(たとえば、オブジェクトが動いている)、自律車両の外部の環境におけるオブジェクト(たとえば、スケートボーダー)のロケーション、およびオブジェクトトラッキングデータを含むことができる。
同様に、センサデータ434bに関しては、流れ図400は、たとえば、オブジェクト分類が歩行者であり、その歩行者は動いており(たとえば、歩いており)、動的なオブジェクトトラックを有しているということを決定することができ、環境におけるオブジェクト(たとえば、歩行者)のロケーションを追跡把握することができる。最後に、センサデータ434cに関しては、流れ図400は、オブジェクト分類が消火栓であり、その消火栓は動いておらず、静的なオブジェクトトラックを有しているということを決定することができ、消火栓のロケーションを追跡把握することができる。いくつかの例においては、センサデータ434a、434b、および434cに関連付けられているオブジェクトデータ449は、たとえば、オブジェクトトラック、オブジェクト分類、およびオブジェクトのロケーションを含むがそれらには限定されないファクタに基づいてプランナーシステムによってさらに処理されることが可能であるということに留意されたい。一例として、スケートボーダーおよび歩行者のケースにおいては、オブジェクトデータ449は、プランナーシステムが、そのスケートボーダーおよび/または歩行者のために(たとえば、外部安全システムによる)アラートを実施することを決定する事象において、軌道計算、しきい値ロケーション推定、動き予測、ロケーション比較、およびオブジェクト座標のうちの1つまたは複数のために使用されることが可能である。しかしながら、プランナーシステムは、消火栓に関するオブジェクトデータをその静的なオブジェクトトラックに起因して無視することを決定する可能性がある。なぜなら、たとえば、消火栓は、自律車両と対立することになる動きを有する可能性が低い(たとえば、それは動かない)からであり、ならびに/または消火栓は、生き物ではない(たとえば、自律車両の外部安全システムによって生成された放射される光および/もしくはビーム式に誘導される音などのアラートに応答することまたは気づくことができない)からである。
図5は、自律車両におけるプランナーシステムによるオブジェクト優先順位付けの一例500を示している。例500は、自律車両100のセンサシステム(たとえば、図3Bのセンサシステム320)によって感知される自律車両100の外部の環境590の視覚化を示している。自律車両100の知覚システムからのオブジェクトデータは、自動車581d、自転車ライダー583d、歩いている歩行者585d、および2台の駐車されている自動車587sおよび589sを含むがそれらには限定されない、環境590におけるいくつかのオブジェクトを検知することができる。この例においては、知覚システムが、(たとえば、図3Bのセンサデータ334に基づいて)動的な「D」オブジェクトトラックをオブジェクト581d、583d、および585dに割り振っておくことが可能であり、したがってラベル「d」は、それらのオブジェクトに関する参照番号に関連付けられている。知覚システムはまた、(たとえば、図3Bのセンサデータ334に基づいて)静的な「S」オブジェクトトラックをオブジェクト587sおよび589sに割り振っておくことが可能であり、したがってラベル「s」は、それらのオブジェクトに関する参照番号に関連付けられている。
自律車両のローカライザシステムが、環境590における自律車両100のロケーションに関する局所的位置データ539(たとえば、車両100についてのロケーションに対するX、Y、Z座標、またはその他のメトリックもしくは座標系)を決定することができる。いくつかの例においては、局所的位置データ539は、自律車両100の重心(図示せず)またはその他の基準ポイントに関連付けられることが可能である。さらに自律車両100は、矢印によって示されているように軌道Tavを有することができる。2台の駐車されている自動車587sおよび589sは静的であり、示されている軌道を有していない。自転車ライダー583dは、軌道Tavの方向とほぼ逆の方向にある軌道Tbを有しており、自動車581dは、軌道Tavとほぼ平行で同じ方向にある軌道Tmvを有している。歩行者585dは、車両100の軌道Tavと交差すると予測される軌道Tpを有している。環境590における歩行者585dまたは環境590におけるその他のオブジェクトの動きおよび/または位置は、たとえば、オブジェクトロケーション、予測されるオブジェクトの動き、オブジェクト座標、オブジェクトのロケーションに対する動きの予測進度、およびオブジェクトの予測される次のロケーションを含むがそれらには限定されない、軌道以外のメトリックを使用して追跡把握されるかまたはその他の形で決定されることが可能である。環境590における歩行者585dまたは環境590におけるその他のオブジェクトの動きおよび/または位置は、少なくとも部分的に確率に起因して決定されることが可能である。確率は、たとえば、オブジェクト分類、オブジェクトトラック、オブジェクトロケーション、およびオブジェクトタイプを表すデータに基づくことが可能である。いくつかの例においては、確率は、類似のロケーションにおける類似のオブジェクトに関する以前に観察されたデータに基づくことが可能である。さらに確率は、時刻もしくは曜日、またはその他の時間単位などによっても影響される場合がある。一例として、プランナーシステムは、平日の午後3:00頃と午後4:00頃との間に所与の交差点における歩行者たちが特定の方向に通りを渡る可能性が85%であるということを知ることができる。
プランナーシステムは、静的なオブジェクト587sおよび589sならびに動的なオブジェクト583dのロケーションを追跡把握することに対して、より低い優先順位を置くことができる。なぜなら、静的なオブジェクト587sおよび589sは、軌道Tavから外れて配置されており(たとえば、オブジェクト587sおよび589sは、駐車されており)、動的なオブジェクト583d(たとえば、自転車運転者として識別されているオブジェクト)は、自律車両100から遠ざかる方向に移動しており、それによって、オブジェクト583dの軌道Tbが自律車両100の軌道Tavと対立するかもしれない可能性を低減または除外するからである。
しかしながら、プランナーシステムは、歩行者585dのロケーションを追跡把握することに対して、その潜在的に対立する軌道Tpに起因して、より高い優先順位を置くことができ、自動車581dのロケーションを追跡把握することに対しては、わずかに低い優先順位を置くことができる。なぜなら、その軌道Tmvは、現在は軌道Tavと対立していないが、その後の時間に(たとえば、レーンの変更またはその他の車両操縦に起因して)対立する可能性があるからである。したがって、例500に基づくと、歩行者オブジェクト585dは、自律車両100のアラート(たとえば、誘導される音および/もしくは放射される光を使用する)またはその他の安全システムに関する有力候補であり得る。なぜなら、歩行者オブジェクト585dの(たとえば、そのロケーションおよび/または予測される動きに基づく)経路は、自律車両100との(たとえば、推定されるロケーション560における)潜在的な衝突をもたらすか、または歩行者オブジェクト585dと自律車両100との間における(たとえば、今後のいずれかの時間および/またはロケーションにおける)安全でない距離をもたらす可能性があるからである。オブジェクトのロケーションを追跡把握することに対してプランナーシステムによって置かれる優先順位は、プランナーシステムにおける軌道生成のコスト関数に少なくとも部分的に基づいて決定されることが可能である。(たとえば、衝突またはその他の極端な事象を回避するために)自律車両100の軌道における変更を必要とすると予測される可能性があるオブジェクトは、たとえば、自律車両100の軌道における変更を必要としないと予測されるオブジェクトと比較して、より大きな重要性を伴ってコスト関数に織り込まれることが可能である。
プランナーシステムは、オブジェクト585dの予測される動きおよび/またはそのオブジェクトの予測されるロケーションに基づいて、環境590におけるオブジェクト585dの可能性の高いロケーションの1つまたは複数の領域565を予測することができる。プランナーシステムは、可能性の高いロケーションのそれぞれの領域565内の1つまたは複数のしきい値ロケーション(たとえば、しきい値境界)を推定することができる。しきい値ロケーションは、自律車両100の1つまたは複数の安全システムに関連付けられることが可能である。しきい値ロケーションの数、距離、および位置は、自律車両100の別々の安全システムごとに異なることが可能である。自律車両100の安全システムは、オブジェクトと自律車両100との間における衝突が予測されるパラメータ範囲においてアクティブ化されることが可能である。パラメータ範囲は、可能性の高いロケーションの領域内の(たとえば、565内の)ロケーションを有することができる。パラメータ範囲は、時間の範囲および/または距離の範囲などのパラメータに部分的に基づくことが可能である。たとえば、オブジェクト585dと自律車両100との間における予測される衝突が発生する可能性がある時間の範囲および/または距離の範囲である。いくつかの例においては、自律車両100の安全システムによるアラートに関する有力候補であることは、(たとえば、プランナーシステムによって決定されるとおりに)実際のアラートが発行されることを自動的にもたらすわけではない。いくつかの例においては、しきい値が満たされるかまたは超過された場合に、オブジェクトが候補になることが可能である。その他の例においては、自律車両100の安全システムが、自律車両100の外部の環境における1つまたは複数のオブジェクトに複数のアラートを発行することができる。さらに他の例においては、自律車両100は、たとえオブジェクトがアラートに関する有力候補であると決定されたとしてもアラートを発行しない場合がある(たとえば、プランナーシステムは、代わりの軌道、安全停止軌道、または安全停止操縦を算出していた可能性があり、それは、アラートを発行する必要性を除去する)。
図6は、自律車両におけるアクティブ安全システムにおけるしきい値ロケーションおよび関連付けられている段階的に高まるアラートの一例600の上部平面図を示している。図6においては、図5の例500が、さらに上部平面図において示されており、この上部平面図では、軌道TavおよびTpが、560として示されている推定されるロケーションにおいて(たとえば、車両100および歩行者オブジェクト585dに関するロケーションデータに基づいて)交差すると推定される。歩行者オブジェクト585dは、図6においては、歩行者オブジェクト585dがその予測される動きに基づいて(たとえば、視覚的なおよび/または音響による)アラートに関する有力候補であることに基づいて示されている。歩行者オブジェクト585dは、プランナーシステムによって推定された可能性の高いロケーションの領域565内にあるロケーションを有するものとして示されている。自律車両100は、矢印680によって示されているように双方向に走行するように構成されることが可能であり、すなわち、自律車両100は、従来の自動車におけるような前部(たとえば、ボンネット)または後部(たとえば、トランク)を有さないことが可能である。図6およびその他の図は、双方向の車両に適用されるものとして実施態様を記述しているかもしれないが、機能および/または構造は、そのように限定するものである必要はなく、一方向の車両を含む任意の車両に適用されることが可能であるということに留意されたい。したがって、センサシステムのセンサおよび安全システムは、車両100の走行の複数の方向におけるセンサおよびアラートカバレッジを提供するように、ならび
に/または車両100にその側部1005から近づくオブジェクトに関するセンサおよびアラートカバレッジを提供するように車両100上に配置されることが可能である(たとえば、図3におけるセンサシステム330における1つまたは複数のセンサ328は、センサカバレッジの重なり合う領域を含むことができる)。プランナーシステムは、たとえば、オブジェクトとの衝突を回避するために、双方向680の走行能力を使用して、安全停止操縦または安全停止軌道を実施することができる。一例として、自律車両100は、第1の方向に走行していて、停止し、第1の方向とは逆である第2の方向での走行を開始することが可能であり、衝突またはその他の極端な事象を回避するために安全停止ロケーションへ操縦することができる。プランナーシステムは、601、603、および605として示されている、環境590における1つまたは複数のしきい値ロケーション(たとえば、しきい値境界、これは、距離などの関数であることが可能である)を推定することができ、そのしきい値ロケーションにおいて、オブジェクト(たとえば、歩行者オブジェクト585d)のロケーションが、一致のポイント602、604、および606によって示されているように、しきい値ロケーションと一致した場合に、アラートを発行する。3つのしきい値ロケーションが示されているが、示されているよりも多いまたは少ないしきい値ロケーションが存在することが可能である。第1の例として、軌道Tpが、602として示されているポイントにおいて第1のしきい値ロケーション601と交差する際に、プランナーシステムは、(たとえば、相対的なまたは絶対的な基準フレームの座標X1、Y1を有している)ポイント602における歩行者オブジェクト585dのロケーション、および(たとえば、局所的位置データから)自律車両100のロケーションの座標を決定することができる。自律車両100およびオブジェクト(たとえば、オブジェクト585d)に関するロケーションデータは、音響ビームステアリングアレイ(たとえば、指向性の音響源、フェーズドアレイ、パラメトリックアレイ、大型ラジエータ、超音波源などのうちの1つもしくは複数)によって放射された誘導される音響エネルギー(たとえば、オーディオアラート)のビームの伝搬の方向(たとえば、メインローブもしくはビームの焦点の方向)に関するロケーション(たとえば、座標、角度、極座標)を計算するために使用されることが可能であり、視覚的アラートのためにどの光エミッタをアクティブ化するかを決定するために使用されることが可能であり、オブジェクトとの予測される衝突の前にどのブラッダをアクティブ化するかを決定するために使用されることが可能であり、ならびに自律車両100のその他の安全システムおよび/もしくは運転システムをアクティブ化するために使用されることが可能であり、または前述の内容の任意の組合せである。自律車両100が軌道Tavに沿って方向625にロケーションL1からロケーションL2へ走行し続けるにつれて、歩行者オブジェクト585dおよび自律車両100の相対的なロケーションが変わる場合があり、それによってロケーションL2において、オブジェクト585dは、第2のしきい値ロケーション603のポイント604において座標(X2,Y2)を有する。同様に、軌道Tavに沿って方向625にロケーションL2からロケーションL3へ引き続き走行すると、歩行者オブジェクト585dおよび自律車両100の相対的なロケーションが変わる場合があり、それによってロケーションL3において、オブジェクト585dは、第3のしきい値ロケーション605のポイント606において座標(X3,Y3)を有する。
自律車両100と歩行者オブジェクト585dとの間における距離が減少するにつれて、安全システムのために選択されるアラートを表すデータは、増大する緊迫感(たとえば、段階的に高まる脅威レベル)を歩行者オブジェクト585dへ伝達して、その軌道Tpを変更もしくは停止するか、またはその他の形で彼/彼女の行動を修正して、車両100との潜在的な衝突または近接通過を回避するために、異なるものになることが可能である。一例として、車両100が歩行者オブジェクト585dから比較的安全な距離にあり得る場合には、しきい値ロケーション601に関して選択されるアラートを表すデータは、脅かさない様式で歩行者オブジェクト585dの注目を引くように構成されているあまり驚かさない脅かさないアラートa1であることが可能である。第2の例として、車両100が歩行者オブジェクト585dから警戒を要する距離にあり得る場合には、しきい値ロケーション603に関して選択されるアラートを表すデータは、より緊急な様式で歩行者オブジェクト585dの注目を得るように構成されているさらに積極的な緊急なアラートa2であることが可能である。第3の例として、車両100が歩行者オブジェクト585dから潜在的に安全でない距離にあり得る場合には、しきい値ロケーション605に関して選択されるアラートを表すデータは、きわめて緊急な様式で歩行者オブジェクト585dの注目を得るように構成されている非常に積極的なきわめて緊急なアラートa3であることが可能である。自律車両100と歩行者オブジェクト585dとの間における距離が減少するにつれて、アラートを表すデータは、緊急性の段階的な高まりの増大を歩行者オブジェクト585dに伝達するように構成されることが可能である(たとえば、歩行者オブジェクト585dの注目を得るための段階的に高まる音響アラートおよび/または視覚的アラート)。環境590におけるしきい値ロケーションの位置の推定は、歩行者オブジェクト585dとの予測される衝撃ポイント560(たとえば、軌道TavおよびTpが互いに交差すると推定される環境590におけるポイント560)に車両100が到達する前に、自律車両の速度に基づいて、適切な時間(たとえば、約5秒以上)を提供するようにプランナーシステムによって決定されることが可能である。ポイント560は、オブジェクト585d、車両100、または両方のスピードおよび/またはロケーションが変わるにつれて変わり得る。いくつかの例においては、自律車両100のプランナーシステムは、アクティブアラート(たとえば、音響アラートおよび/または視覚的アラート)を実施することと共同して、(たとえば、コンテキストに基づいて可能な場合には)安全な軌道を(たとえば、継続的に)計算することによって(たとえば、代わりの衝突回避軌道を計算して、それらの軌道のうちの1つまたは複数を実行することによって)、その一方で同時に、環境におけるオブジェクトに対して、それらのオブジェクトが衝突するかまたはその他の形で自律車両100における搭乗者の安全にとって、オブジェクトにとって、または両方にとって危険をもたらすかもしれない有意な確率がある場合には必要に応じてアラートを発行することによって潜在的な衝突を回避することを能動的に試みるように構成されることが可能である。
図6においては、歩行者オブジェクト585dの軌道Tpは、示されているような直線である必要はなく、その軌道(たとえば、実際の軌道)は、例650において示されているように弓形の軌道であることが可能であり、または例670において示されているように非直線状の軌道であることが可能である。例650におけるポイント652、654、および656、ならびに例670におけるポイント672、674、および676は、軌道Tpが、しきい値ロケーション651、653、および655、ならびにしきい値ロケーション671、673、および675とそれぞれ交差するポイントを示している。プランナーシステムは、知覚システムからのオブジェクトデータおよびローカライザシステムからの局所的位置データを処理して、しきい値ロケーションを計算することができる。しきい値ロケーションのロケーション、形状(たとえば、直線状、弓形、非直線状)、(たとえば、自律車両および/またはオブジェクトに対する)配向、ならびにその他の特徴は、用途に依存することが可能であり、本明細書において示されている例には限定されない。たとえば、図6においては、例600におけるしきい値ロケーション(601、603、および605)は、歩行者オブジェクト585dの軌道Tpに対してほぼ垂直に位置合わせされているが、その他の構成および配向がプランナーシステムによって計算されて実施されることが可能である(たとえば、例650および670を参照されたい)。別の例として、しきい値ロケーションが自律車両100の軌道Tavに対してほぼ垂直に(またはその他の配向で)位置合わせされることが可能である。さらに、オブジェクトの軌道がプランナーシステムによって分析されて、しきい値ロケーションの構成を決定することが可能である。一例として、自律車両100の軌道に対して平行である軌道上にオブジェクトがある場合には、しきい値ロケーションは、弓形の外形を有することができ、オブジェクトの軌道と位置合わせされることが可能である。
図7は、自律車両におけるプランナーシステムを実施するための流れ図700の一例を示している。図7においては、プランナーシステム710は、それがオブジェクトデータ749を受信する元である知覚システム740、およびそれが局所的位置データ739を受信する元であるローカライザシステム730と通信状態にあることが可能である。オブジェクトデータ749は、1つまたは複数の検知されたオブジェクトに関連付けられているデータを含むことができる。たとえば、典型的なシナリオにおいては、オブジェクトデータ749は、自律車両100の外部の環境における多数の検知されたオブジェクトに関連付けられているデータを含むことができる。しかしながら、いくつかの検知されたオブジェクトは、追跡把握される必要はなく、またはオブジェクトのタイプに基づいて、より低い優先順位を割り振られることが可能である。たとえば、図4における消火栓オブジェクト434cは、(たとえば、地面に固定されている)静的なオブジェクトであると言うことができ、その他の安全システムのアラートまたはアクティブ化のための処理を必要としない場合があり、その一方でスケートボーダーオブジェクト434aは、それが動的なオブジェクトであること、およびその他のファクタ、たとえば、スケートボードライダーの予測される人間行動、ロケーション(たとえば、予測されるロケーション)が自律車両100の軌道と対立し得るということを示す可能性がある、環境におけるスケートボーダーオブジェクト434aのロケーションなどに起因して、(たとえば、放射される光、誘導される音、または両方を使用する)アラートのための処理を必要とする場合がある。
図7に付け加えて、3つの検知されたオブジェクトの例が、734a~734cとして示されている。734によって示されているように、より多くのまたはより少ない検知されたオブジェクトに関するオブジェクトデータ749が存在することが可能である。それぞれの検知されたオブジェクトに関するオブジェクトデータは、オブジェクトロケーション721、オブジェクト分類723、およびオブジェクトトラック725を表すデータを含むことができるが、それらには限定されない。プランナーシステム710は、オブジェクトタイプ決定731を実施するように構成されることが可能である。オブジェクトタイプ決定731は、オブジェクト分類723を表すデータ、オブジェクトトラック725を表すデータ、およびオブジェクトタイプデータストア724からアクセスされることが可能であるオブジェクトタイプを表すデータを受信するように構成されることが可能である。オブジェクトタイプ決定731は、オブジェクト分類723を表すデータおよびオブジェクトトラック725を表すデータを、(たとえば、データストア724からアクセスされる)オブジェクトタイプを表すデータと比較して、オブジェクトタイプ733を表すデータを決定するために構成されることが可能である。オブジェクトタイプ733を表すデータの例は、静的な接地されているオブジェクトタイプ(たとえば、図4の消火栓434c)および動的な歩行者オブジェクト(たとえば、図5の歩行者オブジェクト585d)を含むことができるが、それらには限定されない。
オブジェクト動態決定735が、オブジェクトタイプ733を表すデータおよびオブジェクトロケーション721を表すデータを受信するように構成されることが可能である。オブジェクト動態決定735はさらに、オブジェクト動態データストア726にアクセスするように構成されることが可能である。オブジェクト動態データストア726は、オブジェクト動態を表すデータを含むことができる。オブジェクト動態決定735は、オブジェクト動態を表すデータを、オブジェクトタイプ733を表すデータおよびオブジェクトロケーション721を表すデータと比較して、オブジェクトの予測される動き737を表すデータを決定するように構成されることが可能である。
オブジェクトロケーションプレディクタ741が、オブジェクトの予測される動き737を表すデータ、(たとえば、局所的位置データ739からの)自律車両のロケーション743を表すデータ、オブジェクトロケーション721を表すデータ、およびオブジェクトトラック725を表すデータを受信するように構成されることが可能である。オブジェクトロケーションプレディクタ741は、受信されたデータを処理して、環境における予測されるオブジェクトロケーション745を表すデータを生成するように構成されることが可能である。オブジェクトロケーションプレディクタ741は、複数の予測されるオブジェクトロケーション745を表すデータを生成するように構成されることが可能である。プランナーシステム710は、オブジェクトの可能性の高いロケーションの領域(たとえば、図5および図6における565)を表すデータを生成することができる。
しきい値ロケーションエスティメータ747が、(たとえば、局所的位置データ739からの)自律車両のロケーション743を表すデータ、および予測されるオブジェクトロケーション745を表すデータを受信し、たとえば、トリガーされることになるアラート(たとえば、視覚的アラートおよび/または音響アラート)に関連付けられている、または車両100の1つもしくは複数の安全システムのアクティブ化に関連付けられている、環境における1つまたは複数のしきい値ロケーション750を表すデータを生成するように構成されることが可能である。1つまたは複数のしきい値ロケーション750は、可能性の高いロケーションの領域(たとえば、図6における565内の601、603、および605)とともに配置されることが可能である。図8は、自律車両におけるシステムのブロック図の一例800を示している。図8においては、自律車両100は、自律車両100上の1つまたは複数のロケーションに配置されているセンサのスイート820を含むことができる。それぞれのスイート820は、ライダ821(たとえば、カラーライダ、3次元カラーライダ、2次元ライダなど)、イメージ取り込みデバイス823(たとえば、デジタルカメラ)、レーダ825、(たとえば、周囲の音を取り込むための)マイクロフォン827、および(たとえば、AV100の搭乗者に対して挨拶/通信を行うための)ラウドスピーカー829を含むがそれらには限定されないセンサを有することができる。(たとえば、推進システムおよび/または制動システムなどの運転システムコンポーネントからの音を取り込むように構成されることが可能である)マイクロフォン871は、運転システムコンポーネントの近くの適切なロケーションに配置されて、たとえば、それらのコンポーネントによって生成される音を検知することが可能である。センサのそれぞれのスイート820は、たとえば、2つのイメージ取り込みデバイス823、それぞれのホイール852の近くに配置されているマイクロフォン871など、複数の同じタイプのセンサを含むことができる。マイクロフォン871は、自律車両100の運転操作を示すオーディオ信号を取り込むように構成されることが可能である。マイクロフォン827は、自律車両100の外部の環境における周囲の音を示すオーディオ信号を取り込むように構成されることが可能である。複数のマイクロフォン827は、たとえば、環境890において生じている音の音源ロケーションを推定するために処理されることが可能である信号を生成するためにペアにされることまたはその他の形でグループ化されることが可能である。自律車両100は、自律車両100のロケーションを表すデータを生成するためのセンサを含むことができ、それらのセンサは、グローバルポジショニングシステム(GPS)839aおよび/または慣性測定ユニット(IMU)839bを含むことができるが、それらには限定されない。自律車両100は、自律車両100の外部の環境における環境条件、たとえば、気温、気圧、湿度、バロメータ圧などを感知するための1つまたは複数のセンサENV877を含むことができる。センサENV877によって生成されるデータは、たとえば波面伝搬時間など、アレイ102(図9において示されているアレイ102を参照されたい)によって使用されるデータの処理において音のスピードを計算するために使用されることが可能である。自律車両100は、車両100の動き(たとえば、衝突からの衝撃に起因する動き、緊急時/回避操縦に起因する動きなど)を検知するように構成されている1つまたは複数のセンサMOT888を含むことができる。一例として、センサMOT888は、加速度計、多軸加速度計、およびジャイロスコープを含むことができるが、それらには限定されない。自律車両100は、ホイール852に関連付けられていてホイール852の回転853を検知するように構成されている1つまたは複数の回転センサ(図示せず)(たとえば、ホイールエンコーダ)を含むことができる。たとえば、それぞれのホイール852は、ホイール852の回転を検知するように構成された、関連付けられホイールエンコーダ(たとえば、ホイール852のアクスル、および/またはホイール852の推進コンポーネント、たとえば電気モータなど)を有することができる。回転センサによって生成される回転信号を表すデータは、たとえば、プランナーシステム、ローカライザシステム、知覚システム、運転システム、および、安全システムのうちの1つまたは複数など、自律車両100の1つまたは複数のシステムによって受信されることが可能である。
通信ネットワーク815は、自律車両100のセンサ、1つまたは複数の安全システム875(たとえば、ブラッダ、シートアクチュエータ、シートベルトテンショナー)、およびその他のコンポーネント、たとえば、1つまたは複数のプロセッサ810、および1つまたは複数のルータ830などへ/から信号および/またはデータを回送することができる。ルータ830は、センサスイート820のうちのセンサ、1つまたは複数の音響ビームステアリングアレイ102(たとえば、超音波源の指向性の音響源、フェーズドアレイ、パラメトリックアレイ、大型ラジエータのうちの1つまたは複数)、1つまたは複数の光エミッタ、その他のルータ830間、プロセッサ810間、運転操作システム、たとえば、推進(たとえば、電気モータ851)、ステアリング、制動、1つまたは複数の安全システム875など、ならびに通信システム880(たとえば、外部システムおよび/またはリソースとのワイヤレス通信のための)から信号および/またはデータを回送することができる。
図8においては、1つまたは複数のマイクロフォン827は、自律車両100の外部の環境890における周囲の音を取り込むように構成されることが可能である。マイクロフォン827からの信号および/またはデータは、音響ビームステアリングアレイ(図示せず)のうちの1つまたは複数に配置されている1つまたは複数のスピーカーに関するゲイン値を調整するために使用されることが可能である。一例として、建設現場から発するような周囲の騒々しいノイズは、音響ビームステアリングアレイによって放射されている誘導される音響エネルギーのビーム104の可聴性をマスクするかまたはその他の形で損なう可能性がある。したがってゲインは、周囲の音に基づいて(たとえば、dBまたは周波数成分などのその他のメトリックで)増大または減少されることが可能である。
マイクロフォン871は、電気モータ851、ホイール852、またはブレーキ(図示せず)などの運転システムコンポーネントの近くに配置されて、それらのシステムによって生成される音、たとえば、回転853からのノイズ、回生制動ノイズ、タイヤノイズ、および電気モータノイズなどを取り込むことが可能である。マイクロフォン871によって生成される信号および/またはデータは、たとえば、オーディオアラートに関連付けられているオーディオ信号を表すデータとして使用されることが可能である。その他の例においては、マイクロフォン871によって生成される信号および/またはデータは、オーディオ信号を表すデータを変調するために使用されることが可能である。一例として、オーディオ信号を表すデータは、オーディオレコーディング(たとえば、デジタルオーディオファイル)を構成することができ、マイクロフォン871によって生成される信号および/またはデータは、オーディオ信号を表すデータを変調するために使用されることが可能である。この例に付け加えて、マイクロフォン871によって生成される信号および/またはデータは、車両100の速度を示すことができ、車両100が減速して横断歩道で停止するのにつれて、オーディオ信号を表すデータは、車両100の速度が変化するのに伴うマイクロフォン871によって生成される信号および/またはデータにおける変化によって変調されることが可能である。別の例においては、車両100の速度を示す、マイクロフォン871によって生成される信号および/またはデータは、オーディオ信号を表すデータとして使用されることが可能であり、車両100の速度が変化するにつれて、音響ビームステアリングアレイ102によって放射されている音は、車両100の速度における変化を示すことができる。したがって、音(または音響エネルギーの大きさ)は、速度の変化に基づいて(たとえば、ボリューム、周波数などにおいて)変更されることが可能である。上記の例は、歩行者に対して、自律車両100が横断歩道における彼らの存在を検知して減速して停止しつつあるということを聴覚的に通知するように実施されることが可能である。
1つまたは複数のプロセッサ810は、たとえば、車両100のプランナーシステム、ローカライザシステム、知覚システム、1つまたは複数の安全システム、およびその他のシステムのうちの1つまたは複数を実施するために使用されることが可能である。1つまたは複数のプロセッサ810は、たとえば、車両100のプランナーシステム、ローカライザシステム、知覚システム、1つもしくは複数の安全システム、またはその他のシステムのうちの1つまたは複数を実施するために、非一時的コンピュータ可読メディアにおいて具体化されるアルゴリズムを実行するように構成されることが可能である。1つまたは複数のプロセッサ810は、回路、ロジック、フィールドプログラマブルゲートアレイ(FPGA)、特定用途向け集積回路(ASIC)、プログラマブルロジック、デジタルシグナルプロセッサ(DSP)、グラフィックスプロセッシングユニット(GPU)、マイクロプロセッサ、マイクロコントローラ、ビッグファットコンピュータ(BFC)もしくはその他、またはそれらのクラスタを含むことができるが、それらには限定されない。
図9は、自律車両の外部安全システムにおける音響ビームステアリングアレイの一例900の上面図を示している。図9においては、センサスイート(たとえば、図8における820)が、自律車両100の角部分(たとえば、支柱セクション)に配置されることが可能であり、音響ビームステアリングアレイ102のための筐体が、自律車両100の上側表面100u上に(たとえば、車両上のルーフまたはその他のロケーション上に)配置されることが可能であり、それらの誘導される音響エネルギーのそれぞれのビーム104(たとえば、図11を参照されたい)を外側に環境へと、音響アラートを受信する対象とされるオブジェクトのロケーションの方へ向けるように配置されることが可能である。音響ビームステアリングアレイ102(たとえば、超音波源の指向性の音響源、フェーズドアレイ、パラメトリックアレイ、大型ラジエータ)は、誘導される音響エネルギーのカバレッジを、自律車両100の外部の環境に配置されている1つまたは複数のオブジェクトにおいて提供するように構成されることが可能であり、そのカバレッジは、たとえば、自律車両100を中心とした約360°の円弧内にあることが可能である。音響ビームステアリングアレイ102は、同じサイズ、形状である必要はなく、または同じ数のスピーカーを有する必要はない。音響ビームステアリングアレイ102は、図9において示されているように直線状である必要はない。図9に付け加えて、CおよびDとして示されている音響ビームステアリングアレイ102は、AおよびBとして示されている音響ビームステアリングアレイ102とは異なる寸法を有している。センサスイート820は、自律車両100の外部の環境のセンサカバレッジを1つの音響ビームステアリングアレイ102または複数の音響ビームステアリングアレイ102に提供するように配置されることが可能である。複数の音響ビームステアリングアレイ102のケースにおいては、センサスイート820は、センサカバレッジの重なり合う領域を提供することができる。自律車両100の知覚システムは、複数のセンサまたはセンサのスイートからセンサデータを受信して、データをプランニングシステムに提供して、たとえば、音響アラートを生成するためにアレイ102のうちの1つもしくは複数のアクティブ化を実施すること、および/または車両100の1つもしくは複数のその他の安全システムをアクティブ化することが可能である。自律車両100は、前部(たとえば、ボンネット)または後部(たとえば、トランク)を有さないことが可能であり、したがって、矢印980によって示されているように少なくとも2つの異なる方向における運転操作用に構成されることが可能である。したがって、音響ビームステアリングアレイ102は、前部または後部という呼称を有さないことが可能であり、どちらの方向に自律車両100が運転されているかに応じて、アレイ102(A)が、走行の方向に向いているアレイであることが可能であり、またはアレイ102()が、走行の方向に向いているアレイであることが可能である。
自律車両100のその他の安全システムは、自律車両100上の内部100i(破線で示されている)および外部100eロケーションに配置されることが可能であり、プランナーシステムによってセンサスイートからのセンサデータを使用してアラートまたはその他の安全機能を生成するためにアクティブ化されることが可能である。センサカバレッジの重なり合う領域は、自律車両100の周囲のロケーションに配置される可能性がある環境における複数のオブジェクトに応答して1つまたは複数の安全システムをアクティブ化するためにプランナーシステムによって使用されることが可能である。
図10A~図10は、センサカバレッジの例の上部平面図を示している。図10Aの例1010においては、4つのセンサスイート820(下線で示されている)のうちの1つが、たとえば、自律車両100の知覚システム、ローカライザシステム、プランナーシステム、および安全システムなどの1つまたは複数のシステムにセンサデータを提供するように構成されることが可能であるカバレッジ領域における環境1090の、そのそれぞれのセンサのうちの1つまたは複数を使用した、センサカバレッジ1011を提供することができる。図10Aの上部平面図においては、矢印A、B、C、およびDが、自律車両100を取り囲む4つの象限1~4の境界を定めている。例1010においては、単一のスイート820によるセンサカバレッジ1011は、部分的なセンサカバレッジであり得る。なぜなら、象限1、3、および4においては単一のスイート820によってカバーされない部分的なセンサ盲点が、ならびに象限2においては完全なセンサカバレッジがあり得るからである。
例1020においては、4つのセンサスイート820のうちの第2のセンサスイート820が、センサカバレッジ1011と重なり合うセンサカバレッジ1021を提供することができ、それによって、象限1および4においては部分的なセンサカバレッジが、ならびに象限2および3においては完全なセンサカバレッジがあり得る。図10においては、例1030において、4つのセンサスイート820のうちの第3のセンサスイート820が、センサカバレッジ1011および1021と重なり合うセンサカバレッジ1031を提供することができ、それによって、象限2、3、および4は、完全なセンサカバレッジを有しており、象限1は、部分的なカバレッジを有している。最後に、例1040においては、4つのセンサスイート820のうちの第4のセンサスイート820(たとえば、4つすべてのセンサスイートがオンラインである)が、センサカバレッジ1011、1021、および1031と重なり合うセンサカバレッジ1041を提供することができ、それによって象限1~4は、完全なカバレッジを有している。カバレッジの重なり合うセンサ領域は、1つもしくは複数のセンサスイート820および/またはそれらのそれぞれのセンサ(たとえば、ライダ、カメラ、レーダなど)のうちの1つもしくは複数がダメージを与えられるか、機能不良、またはその他の形で動作不能にされた場合のセンサカバレッジにおける冗長性を可能にすることができる。センサカバレッジパターン1011、1021、1031、および1041のうちの1つまたは複数は、プランナーシステムが1つまたは複数の安全システムのアクティブ化を自律車両100上のそれらの安全システムの位置に基づいて実施することを可能にすることができる。一例として、自律車両100の側部(たとえば、矢印Cを伴う車両100の側部)上に配置されているブラッダ安全システムのブラッダがアクティブ化されて、その側部から車両100に近づくオブジェクトからの衝突に対抗することが可能である。
図11Aは、自律車両の外部安全システムにおける音響ビームステアリングアレイの一例を示している。図11Aにおいては、プランナーシステム310からのコントロールデータ317が車両コントローラ350へ通信されることが可能であり、車両コントローラ350は次いで、音響ビームステアリングアレイ102による音響アラートを実施するように構成されている外部データ325を通信することができる。1つのアレイ102が示されているが、自律車両100は、1103によって示されているように複数のアレイ102を含むことができる(たとえば、図9におけるアレイ102を参照されたい)。アレイ102によって受信される外部データ325は、オブジェクトロケーションデータ1148(たとえば、環境1190におけるオブジェクト1134の座標)、オーディオ信号データ1162、トリガー信号データ1171、および任意選択で変調信号データ1169を含むことができるが、それらには限定されない。
音響ビームステアリングアレイ102は、外部データ325を受信してそれらの外部データ325を処理して、(たとえば、トリガー信号1171を表すデータを受信したことに応答して)環境1190への(たとえば、AV100の軌道Tavに対して角度βでの)誘導される音響エネルギーのビーム104を生成するプロセッサ1105(たとえば、デジタルシグナルプロセッサ(DSP)、フィールドプログラマブルゲートアレイ(FPGA)、中央処理装置(CPU)、マイクロプロセッサ、マイクロコントローラ、GPUおよび/もしくはそれらのクラスタ、またはその他の組み込まれている処理システム)を含むことができる。音響ビームステアリングアレイ102は、いくつかのスピーカーSを含むことができ、アレイ102におけるそれぞれのスピーカーSは、増幅器Aの出力と結合されている。それぞれの増幅器Aは、ゲイン入力および信号入力を含むことができる。プロセッサ1105は、それぞれの増幅器Aのゲイン入力に関する信号ゲインGを表すデータを計算することができ、それぞれの増幅器Aの信号入力に関する信号遅延Dを表すデータを計算することができる。プロセッサ1105は、(たとえば、内部および/または外部データソースからの)スピーカーS上の情報を表すデータに対してアクセスおよび/または受信を行うことができ、それらの情報は、ほんのいくつかの例を挙げれば、アレイ幅(たとえば、アレイ102における最初のスピーカーと最後のスピーカーとの間における距離)、アレイにおけるスピーカーSの間隔(たとえば、アレイ102における隣り合ったスピーカーS間における距離)、アレイにおける隣り合ったスピーカーS間における波面距離、アレイにおけるスピーカーSの数、スピーカーの特徴(たとえば、周波数応答、電力のワットでの出力レベル、放射面積など)を含むことができるが、それらには限定されない。アレイ102におけるそれぞれのスピーカーSおよびその関連付けられている増幅器Aは、モノラルチャネルを構成することができ、アレイ102は、n個のモノラルチャネルを含むことができ、モノラルチャネルの数nは、アレイ102のスピーカーサイズおよび筐体サイズに応じて、さまざまであり得る。たとえば、nは30であることが可能であり、または320であることも可能である。たとえば、アレイ102の超音波パラメトリックアレイ実施態様においては、nは約80から約300ほどであることが可能である。いくつかの例においては、アレイ102におけるスピーカー間における間隔は、アレイ102におけるスピーカーのうちのいくつかまたはすべてに関して直線状ではないことが可能である。
図11Aの例1100においては、音響エネルギーの誘導されるビーム104が、自律車両100の軌道Tavと対立する可能性がある環境1190における予測されるロケーションLoを有しているオブジェクト1134(たとえば、スケートボーダー)に向けて誘導されている。オブジェクト1134のロケーションは、オブジェクトロケーションデータ1148として外部データ325に含まれることが可能である。オブジェクトロケーションデータ1148は、オブジェクト1134の座標(たとえば、角度、デカルト座標、極座標など)を表すデータであることが可能である。アレイ102は、オブジェクトロケーションデータ1148を処理して、ビーム104をオブジェクト1134に向けるための角度βを計算することができる。角度βは、軌道Tavに対して、または車両100のフレーム上のいずれかのポイント(たとえば、図11Cにおける100rを参照されたい)に対して測定されることが可能である。予測されるロケーションLoが、オブジェクト1134の動きに起因して変わる場合には、自律車両システム101のその他のシステムは、自律車両100およびオブジェクト1134に関連付けられているデータを引き続き追跡把握および更新して、更新されたオブジェクトロケーションデータ1134を算出することができる。したがって角度βは、オブジェクト1134および/または車両100のロケーションが変わるにつれて変化する可能性がある(たとえば、プロセッサ1105によって再算出される)。いくつかの例においては、角度βは、オブジェクトに対する現在予測される方向(たとえば、座標)だけでなく、今後の時間tにおけるオブジェクトに対する予測される方向も考慮に入れるように(たとえば、プランナーシステムによって)算出されることが可能であり、アレイ102を発射する際の時間遅延の大きさは、車両100の処理システムのデータ処理待ち時間(たとえば、プランナーシステム、知覚システム、またはローカライザシステムのうちの1つまたは複数における処理待ち時間)の関数であることが可能である。したがってプランナーシステムは、オブジェクトが、アレイ102が発射される時間から数分の1秒にあると予測される場合には、たとえば、オブジェクトが車両100からどれぐらい遠く離れているかに応じて、処理待ち時間、および/または(たとえば、環境条件に基づく)音そのもののスピードを考慮するように音を放射することをアレイ102に行わせることができる。
図11Bは、自律車両における音響ビームステアリングを実施するための流れ図1150の一例を示している。ステージ1152において、環境における自律車両100の軌道を表すデータが、自律車両100のロケーションを表すデータ(たとえば、局所的位置データ)に基づいて計算されることが可能である。ステージ1154において、環境に配置されているオブジェクトのロケーション(たとえば、座標)を表すデータが(たとえば、センサデータから得られたオブジェクトトラックデータから)決定されることが可能である。オブジェクトタイプを表すデータが、オブジェクトのロケーションを表すデータに関連付けられることが可能である。ステージ1156において、環境におけるオブジェクトの予測されるロケーションを表すデータが、オブジェクトタイプを表すデータ、および環境におけるオブジェクトのロケーションを表すデータに基づいて予測されることが可能である。ステージ1158において、(たとえば、アレイ102からの)オーディオアラートに関連付けられている環境におけるしきい値ロケーションを表すデータが、オブジェクトの予測されるロケーションを表すデータ、および自律車両の軌道を表すデータに基づいて推定されることが可能である。ステージ1160において、オーディオアラートに関連付けられているオーディオ信号を表すデータが選択されることが可能である。ステージ1162において、オブジェクトのロケーションがしきい値ロケーションと一致していることが検知されることが可能である。一例として、オブジェクトの予測されるロケーションがしきい値ロケーションと交差することが、一致の1つの表示であり得る。ステージ1164において、音響ビームステアリングアレイ102のスピーカーチャネルに関連付けられている信号ゲイン「G」を表すデータが計算されることが可能である。n個のスピーカーチャネルを有しているアレイ102は、n個のスピーカーチャネルのうちのそれぞれのスピーカーチャネルに関して計算されたn個の異なるゲイン「G」を有することができる。信号ゲイン「G」を表すデータは、(たとえば、図11Aのアレイ102において示されているように)チャネルにおけるスピーカーSと結合されている増幅器Aのゲイン入力に印加されることが可能である。ステージ1166において、信号遅延「D」を表すデータが、アレイ102のn個のスピーカーチャネルのそれぞれに関して計算されることが可能である。信号遅延「D」を表すデータは、(たとえば、図11Aのアレイ102において示されているように)チャネルにおけるスピーカーSと結合されている増幅器Aの信号入力に印加されることが可能である。ステージ1168において、車両コントローラ(たとえば、図11Aの350)は、誘導される音響エネルギーのビーム(たとえば、ビーム104)を、オブジェクトのロケーション(たとえば、環境におけるオブジェクトの座標)によって決定される伝搬の方向(たとえば、伝搬の方向106)において放射することをアレイ102に行わせること(たとえば、アレイ102に対してトリガー、アクティブ化、または命令を行うこと)によって音響アラートを実施することができ、誘導される音響エネルギーのビームは、オーディオ信号を示している。
流れ図1150のステージは、アレイ102のうちの1つまたは複数に関して実施されることが可能であり、流れ図1150の1つまたは複数のステージは、繰り返されることが可能である。たとえば、予測されるオブジェクト経路、オブジェクトロケーション(たとえば、オブジェクト座標)、予測されるオブジェクトロケーション、しきい値ロケーション、車両軌道、オーディオ信号選択、一致検知、およびその他のステージは、自律車両100が環境を通って走行している間に、および/またはオブジェクトが環境においてロケーションを変えるにつれて、必要に応じてデータを更新および/または処理するために繰り返されることが可能である。
図11Cは、音響アラートに関連付けられている音響エネルギーを自律車両がオブジェクトへ誘導することの一例1170の上部平面図を示している。図11Cにおいては、自律車両100は、破線1177によって示されているレーンマーカ間における車道に沿って軌道Tavを有することができる。自律車両100の外部の環境における検知されたオブジェクト1171が、自律車両100の軌道Tavと対立すると推定される環境における予測されるロケーションLcを有している自動車オブジェクトタイプとして分類されている。プランナーシステムは、(たとえば、弓形の外形1121、1122、および1123を有している)3つのしきい値ロケーションt-1、t-2、およびt-3をそれぞれ生成することができる。3つのしきい値ロケーションt-1、t-2、およびt-3は、たとえば、しきい値ロケーションt-1(たとえば、車両100から比較的安全な距離だけ離れている)における低い脅威レベル、しきい値ロケーションt-2(たとえば、車両100に対して警戒を要する近さにある距離)における中程度の脅威レベル、およびしきい値ロケーションt-3(たとえば、車両100に対して危険なほどの近さにある距離)における高い脅威レベルからランク付けされる段階的に高まる脅威レベルを表すことが可能である。3つのしきい値ロケーションt-1、t-2、およびt-3のそれぞれにおいて生成されることになるオーディオアラートに関する別々のオーディオ信号は、オブジェクト117の予測されるロケーションLcがオブジェクト1171を自律車両100のロケーションのより近くに(たとえば、自律車両100との潜在的な衝突にとって十分な近さに)もたらすにつれて脅威の段階的に高まるレベルを聴覚的に伝達するように選択されることが可能である。誘導される音響エネルギーのビーム104は、選択されたオーディオ信号(たとえば、オーディオ信号104a、104b、および104c)に含まれている情報を示すことができる。
オブジェクトタイプ1171が、しきい値ロケーションt-1と交差するかまたはその他の形でそのロケーションがしきい値ロケーションt-1と一致する場合には、プランナーシステムは、オブジェクト1171の座標に基づいて伝搬の方向106aに沿って(たとえば、脅かさない音響アラートを伝達するために)オーディオ信号104aを使用して音響アラートを生成するために配置されている音響アレイ102をアクティブ化するためのトリガー信号を生成することができる。たとえば、その座標は、軌道Tavと伝搬の方向106aとの間において測定された角度βaであることが可能である。座標(たとえば、角度βa、βb、およびβc)に関する基準ポイントは、たとえば、アレイ102上のポイント102r、またはポイント100rなど、自律車両102上のその他のいずれかのロケーションであることが可能である。オブジェクト1171が、その予測されるロケーションLcに沿って進み続けて、しきい値ロケーションt-2と交差した場合には、プランナーシステムによって、座標(βb、(たとえば、緊急な音響アラートを伝達するための)オーディオ信号104b、および伝搬の方向106bを使用して、別の音響アラートがトリガーされることが可能である。しきい値ロケーションt-3と交差するオブジェクト1171によるさらなる走行が、座標(βc、(たとえば、きわめて緊急な音響アラートを伝達するための)オーディオ信号104c、および伝搬の方向106cを使用したプランナーシステムによるさらに別の音響アラートをトリガーすることができる。この例においては、段階的な高まりの増大するレベルをオブジェクト1171に伝達するために(たとえば、車両の運転手に音響的にアラートするために)オーディオ信号104a、104b、および104cに関して別々のオーディオ信号(たとえば、事前に録音されているか、または動的に生成されるかを問わず、別々の音響パターン、別々の大きさの音響パワーおよび/またはボリュームなどを有するデジタルオーディオファイル)が選択されることが可能である。
プランナーシステムによってトリガーされる音響アラートのうちのそれぞれに関して、オブジェクト1171の予測されるロケーションLcは、(たとえば、車両100のロケーションに対して)変わる場合があり、プランナーシステムは、更新されたオブジェクトデータ(たとえば、知覚システムからのオブジェクトトラッキングデータ)を受信して、オブジェクト1171のロケーションにおける変化を(たとえば、リアルタイムで)計算すること(たとえば、βa、βb、およびβcを計算または再計算すること)が可能である。それぞれのしきい値ロケーションt-1、t-2、およびt-3に関してプランナーシステムによって選択されるオーディオ信号は、別々のものであることが可能であり、たとえば、しきい値ロケーションt-1からt-2へ、およびt-2からt-3へに関する緊急性の増えゆく度合いを伝達するように意図されている可聴情報を含むように構成されることが可能である。プランナーシステムによって選択されるオーディオ信号は、オブジェクト1171に関するオブジェクトタイプデータに基づいて、自動車の運転手の注目を引くために、自動車ガラス、ドアパネル等など、自動車の構造(1173、1179)を音響的に突き抜けるように構成されることが可能である。いくつかの例においては、オブジェクト(たとえば、自動車の運転手)が、その行動を変えている(たとえば、その予測されるロケーション、その予測されるオブジェクト経路を変えている、またはその他の形で車両100および/もしくはその搭乗者にとってもはや脅威ではない)ものとして(たとえば、プランナーシステムによって)検知された場合には、プランナーシステムは、アラートの緊急性のレベルを低減することによって(たとえば、低減されたレベルの緊急性を示すオーディオ信号を選択することによって)音響アラートを段階的に緩和することをアレイ102に行わせることができる。一例として、選択されるオーディオ信号は、オブジェクト1171上の構造(1173、1179)を音響的に突き抜けるために約220Hzから約450Hzまでの範囲の周波数を生成するように構成されることが可能である。別の例として、アレイ102は、約220Hzから約4.5kHzまでの範囲、またはその他の任意の周波数範囲の周波数の音を生成するように構成されることが可能である。さらに、アレイ102によって生成される音は、自律車両100における速度変化に基づいて(たとえば、ボリューム、周波数などが)変更されることが可能である。アレイ102によって放射される音の周波数は、前述の例に限定されず、アレイ102は、人間の聴覚範囲内である、人間の聴覚範囲を上回っている(たとえば、超音波周波数)、人間の聴覚範囲を下回っている(たとえば、超低周波数)、またはそれらの何らかの組合せである周波数の音を生成するように構成されることが可能である。
自律車両100は、2つのアレイ102が上側表面100u(たとえば、車両100のルーフ)上に配置されているものとして示されているが、車両100は、示されているよりも多くのまたは少ないアレイ102を有することができ、アレイ102の配置は、図11Cにおいて示されているのとは異なることが可能である。音響ビームステアリングアレイ102は、いくつかのスピーカーおよびそれらの関連付けられている増幅器および駆動エレクトロニクス(たとえば、プロセッサ、DSPなど)を含むことができる。説明の目的のために、それぞれの増幅器/スピーカーのペアは、チャネルとして示されることになるが、それによってアレイ102は、チャネル1に関するC1からn番目のチャネルに関するCnに至るまでとして示されるn個のチャネルを含むことになる。音響ビームステアリングアレイ102の拡大図においては、それぞれのスピーカーSは、隣り合ったスピーカーから距離dだけ隔てられることが可能である。距離d(たとえば、隣り合ったスピーカー(S)間における間隔)は、アレイ102におけるすべてのスピーカーSに関して同じであることが可能であり、それによって、スピーカーSのうちのすべてが互いに距離dだけ隔てられている。いくつかの例においては、距離dは、アレイ102におけるスピーカーS間においてさまざまであることが可能である(たとえば、距離dは、アレイ102における隣り合ったスピーカー間において同じである必要はない)。距離dは、それぞれのスピーカーSの中心点など、それぞれのスピーカーS上の基準ポイントから測定されることが可能である。
アレイ102の幅Wは、アレイ102における最初のスピーカー(たとえば、チャネルC1)と、アレイ102における最後のスピーカー(たとえば、チャネルCn)との間における距離として測定されることが可能であり、幅Wは、たとえば、C1におけるスピーカーの中心からCnにおけるスピーカーの中心までで測定されることが可能である。アレイ102によって生成される音波104の伝搬の方向106において、アレイ102における隣り合った各スピーカーSによって発射される各波面は、波面伝搬時間tdだけ時間において遅延される場合がある。波面伝搬時間tdは、隣り合った波面r間における距離に音のスピードcをかけた値(たとえば、td=r*c)として計算されることが可能である。スピーカーS間における距離dがアレイ102におけるすべてのスピーカーSに関して同じである例においては、それぞれのスピーカーSに関して計算される遅延Dは、tdの増大する整数倍であることが可能である。したがって、たとえば、チャネルC1に関しては(td1=(r*c)*1)、チャネルC2に関しては(td2=(r*c)*2)、チャネルCnに関しては(tdn=(r*c)*n)である。いくつかの例においては、たとえば、高度、気圧、気温、湿度、およびバロメータ圧などの環境条件に基づいて、音のスピードcを表す値をより正確に決定するために、環境センサ(たとえば、図8のセンサ877)からのデータを使用して音のスピードcが計算されることが可能である。
図12Aは、自律車両の外部に配置されている光エミッタの一例1200を示している。図12Aにおいては、プランナーシステム310からのコントロールデータ317が車両コントローラ350へ通信されることが可能であり、車両コントローラ350は次いで、光エミッタ1202を使用して視覚的アラートを実施するように構成されている外部データ325を通信することができる。1つの光エミッタ1202が示されているが、自律車両100は、1203によって示されているように複数の光エミッタ1202を含むことができる。光エミッタ1202によって受信される外部データ325は、たとえば、光パターン1212を表すデータ、1つまたは複数の光エミッタ1202をアクティブ化するように構成されているトリガー信号1214を表すデータ、(たとえば、視覚的アラートの対象とされているオブジェクトに対する車両100の配向に基づいて)車両100のどの光エミッタ1202をアクティブ化するかを選択するように構成されているアレイ選択1216を表すデータ、および任意選択で、車両100がそのシグナリングライト(たとえば、ターンシグナル、ブレーキシグナルなど)を使用している場合には光エミッタオペレーションを非アクティブ化するように構成されている運転シグナリング1218を表すデータを含むことができるが、それらには限定されない。その他の例においては、1つまたは複数の光エミッタ1202は、信号灯、ヘッドライト、または両方の役割を果たすことができる。オブジェクトに対する自律車両100の配向は、たとえば、(たとえば、ローカライザシステムからの)自律車両100のロケーションおよび(たとえば、知覚システムからの)オブジェクトのロケーション、(たとえば、プランナーシステムからの)自律車両100の軌道およびオブジェクトのロケーション、または両方に基づいて決定されることが可能である。
光エミッタ1202は、外部データ325に基づいて視覚的アラートを実施するように構成されているプロセッサ1205を含むことができる。プロセッサ1205の選択機能は、アレイ選択1216を表すデータを受信し、選択された光エミッタ1202のアクティブ化を可能にすることができる。選択された光エミッタ1202は、トリガー信号1214を表すデータが、選択された光エミッタ1202によって受信されるまで、光Lを放射しないように構成されることが可能である。光パターン1212を表すデータは、デコード機能によってデコードされることが可能であり、サブ機能が、デコードされた光パターンデータ上で動作して、たとえば、光エミッタ1202によって放射されることになる光の色を決定するように構成されている色機能、光エミッタ1202によって放射されることになる光の強度を決定するように構成されている強度機能、および光エミッタ1202からの光放射の持続時間を決定するように構成されている持続時間機能を実施することができる。データストア(Data)は、それぞれの光エミッタ1202の構成を表すデータ(たとえば、発光素子Eの数、発光素子Eの電気的特徴、車両100上での光エミッタ1202の位置など)を含むことができる。さまざまな機能(たとえば、デコーダ、選択、色、強度、および持続時間)からの出力は、光エミッタ1202の発光素子E1~Enに信号を印加するように構成されているドライバ1207と結合されることが可能である。それぞれの発光素子Eは、光パターン1212を表すデータに基づいて個々にアドレス可能であり得る。それぞれの光エミッタ1202は、いくつかの発光素子Eを含むことができ、それによってnは、光エミッタ1202における発光素子Eの数を表すことができる。一例として、nは50を超えることが可能である。光エミッタ1202は、サイズ、形状、発光素子Eの数、発光素子Eのタイプ、および、車両100の外部に配置されている光エミッタ1202のロケーション(たとえば、車両100のルーフ100uまたはその他の構造など、光エミッタが光Lを環境へと放射することを可能にするように動作する車両100の構造と結合されている光エミッタ1202)においてさまざまであることが可能である。
一例として、発光素子E1~Enは、ソリッドステート発光デバイス、たとえば、発光ダイオードまたは有機発光ダイオードなどであることが可能である。発光素子E1~Enは、単一の波長の光または複数の波長の光を放射することができる。発光素子E1~Enは、光パターン1212を表すデータに基づいて、たとえば、赤色、緑色、青色、およびそれらの色の1つまたは複数の組合せなど、複数の色の光を放射するように構成されることが可能である。発光素子E1~Enは、図12Aにおいて示されているようにRGB発光ダイオード(RGB LED)であることが可能である。ドライバ1207は、光パターン1212を表すデータに基づく色、強度、およびデューティーサイクルを有する光Lを放射するように、発光素子E1~Enの赤色-R、緑色-G、または青色-B入力のうちの1つまたは複数など、発光素子E1~Enの1つまたは複数の入力へ電流をシンクまたはソースするように構成されることが可能である。発光素子E1~Enは、図12Aの例1200に限定されず、光エミッタ1202を実装するために、その他のタイプの光エミッタ素子が使用されることが可能である。図12Aに付け加えて、自律車両100の軌道Tavと対立状態にあると決定されている予測されるロケーションLoを有しているオブジェクト1234が、(たとえば、環境1290における1つまたは複数のしきい値ロケーションに基づいて)視覚的アラートの対象である。光エミッタ1202のうちの1つまたは複数がトリガーされて、視覚的アラートとして光Lを放射することを光エミッタに行わせることが可能である。オブジェクト1234が応答していない(たとえば、オブジェクト1234が、衝突を回避するためにそのロケーションを変えていない)とプランナーシステム310が決定した場合には、プランナーシステム310は、(たとえば、別々の関連付けられている光パターンを有する別々のしきい値ロケーションに基づいて)視覚的アラートの緊急性を段階的に高めるように構成されている別の光パターンを選択することができる。その一方で、オブジェクト1234が、視覚的アラートに応答している(たとえば、オブジェクト1234が、衝突を回避するためにそのロケーションを変えている)として(たとえば、プランナーシステムによって)検知された場合には、視覚的アラートの緊急性を段階的に緩和するように構成されている光パターンが選択されることが可能である。たとえば、光の色、光の強度、光パターン、または前述のものの何らかの組合せのうちの1つまたは複数が変更されて、視覚的アラートの段階的な緩和を示すことが可能である。
プランナーシステム310は、オブジェクト1234のロケーションに対する自律車両100の配向に基づいて光エミッタ1202を選択することができる。たとえば、オブジェクト1234が自律車両100に正面から近づいている場合には、オブジェクトの接近の方向にほぼ向いている車両100の外部に配置されている1つまたは複数の光エミッタ1202がアクティブ化されて、視覚的アラートのための光Lを放射することが可能である。車両100とオブジェクト1234との間における相対的な配向が変わるにつれて、プランナーシステム310は、車両100上のその他の外部ロケーションに配置されているその他のエミッタ1202をアクティブ化して、視覚的アラートのための光Lを放射することができる。オブジェクト1234にとって見えない可能性がある光エミッタ1202は、視覚的アラートが向けられていないその他の運転手、歩行者などにおける潜在的な集中妨害または混乱を防止するために、アクティブ化されないことが可能である。
図12Bは、自律車両100の外部上に位置している光エミッタ1202の例の輪郭図を示している。例1230においては、車両100の第1の端部の部分的な輪郭図(たとえば、矢印1236の方向に沿ったビュー)が、車両100の外部の別々の位置に配置されているいくつかの光エミッタ1202を示している。車両100の第1の端部は、ブレーキライト、ターンシグナル、ハザードライト、ヘッドライト、走行用ライト等など、自動車シグナリング機能用に構成されることが可能であるライト1232を含むことができる。いくつかの例においては、光エミッタ1202は、ライト1232によって放射される光とは(たとえば、光の色、光のパターン、光の強度などにおいて)異なる光Lを放射するように構成されることが可能であり、それによって、光エミッタ1202の機能(たとえば、視覚的アラート)は、ライト1232によって実施される自動車シグナリング機能と混同されない。いくつかの例においては、ライト1232は、自動車シグナリング機能および視覚的アラート機能を実施するように構成されることが可能である。光エミッタ1202は、たとえば、支柱セクション、ルーフ100u、ドア、バンパー、およびフェンダーを含むがそれらには限定されないさまざまなロケーションに配置されることが可能である。いくつかの例においては、光エミッタ1202のうちの1つまたは複数は、たとえば、ウィンドウ、レンズ、またはカバリングなどの後ろになど、車両100の光学的に透過的なまたは部分的に透過的な表面または構造の後ろに配置されることが可能である。光エミッタ1202によって放射される光Lは、光学的に透過的な表面または構造を通り抜けて環境へと至ることが可能である。
例1235においては、車両100の第2の端部(たとえば、矢印1236の逆の方向に沿ったビュー)が、従来の自動車シグナリング機能および/または視覚的アラート機能用に構成されることが可能であるライト1231を含むことができる。例1235において示されている光エミッタ1202は、たとえば、支柱セクション、ルーフ100u、ドア、バンパー、およびフェンダーを含むがそれらには限定されないさまざまなロケーションに配置されることも可能である。
いくつかの例によれば、ライト1231および1232は、任意選択であることが可能であり、ブレーキライト、ターンシグナル、ハザードライト、ヘッドライト、走行用ライト等など、自動車シグナリング機能の機能性は、1つまたは複数の光エミッタ1202のうちの任意の1つによって実行されることが可能であるということに留意されたい。
図12Cは、オブジェクトに対する自律車両の配向に基づく光エミッタ1202アクティブ化の一例1240の上部平面図を示している。図12Cにおいては、オブジェクト1234は、自律車両100のロケーションに対する予測されるロケーションLoを有している。オブジェクト1234との自律車両100の相対的な配向は、象限2および3を感知するために配置されているセンサスイート820を使用したオブジェクト1234の完全なセンサカバレッジと、象限1における部分的なセンサカバレッジとを提供することができる。車両100およびオブジェクト1234の相対的な配向に基づいて、(たとえば、車両100の側部および端部上の)1202aとして示されている光エミッタのサブセットが、オブジェクト1234によって視覚的に知覚可能である場合があり、アクティブ化されて光Lを環境1290へと放射することが可能である。
図12は、オブジェクトに対する自律車両の配向に基づく光エミッタアクティブ化の一例1245の輪郭図を示している。図12においては、オブジェクト1234は、自律車両100のロケーションに対する予測されるロケーションLoを有している。車両100およびオブジェクト1234の相対的な配向に基づいて、(たとえば、車両100の側部上の)1202aとして示されている光エミッタのサブセットが、オブジェクト1234によって視覚的に知覚可能である場合があり、アクティブ化されて光Lを環境1290へと放射することが可能である。図12の例においては、オブジェクト1234との車両100の相対的な配向は、図12Cにおいて示されているのとは異なる。なぜなら、オブジェクト1234の接近は、象限1のセンサカバレッジ内にないからである。したがって、車両100の端部に配置されている光エミッタ1202は、オブジェクト1234にとって視覚的に知覚可能ではない場合があり、視覚的アラートのためにアクティブ化されないことが可能である。
図12Eは、自律車両における光エミッタからの視覚的アラートを実施するための流れ図1250の一例を示している。ステージ1252において、自律車両の外部の環境における自律車両の軌道を表すデータが、環境における自律車両のロケーションを表すデータに基づいて計算されることが可能である。ステージ1254において、環境におけるオブジェクトのロケーションを表すデータが決定されることが可能である。そのオブジェクトは、オブジェクトタイプを含むことができる。ステージ1256において、環境におけるオブジェクトの予測されるロケーションが、オブジェクトタイプおよびオブジェクトロケーションに基づいて予測されることが可能である。ステージ1258において、視覚的アラートに関連付けられている環境におけるしきい値ロケーションを表すデータが、自律車両の軌道およびオブジェクトの予測されるロケーションに基づいて推定されることが可能である。ステージ1260において、しきい値ロケーションに関連付けられている光パターンを表すデータが選択されることが可能である。ステージ1262において、オブジェクトのロケーションがしきい値ロケーションと一致していることを検知されることが可能である。ステージ1264において、オブジェクトのロケーションに対する自律車両の配向を表すデータが決定されることが可能である。ステージ1266において、オブジェクトのロケーションに対する自律車両の配向に基づいて自律車両の1つまたは複数の光エミッタが選択されることが可能である。ステージ1268において、選択された光エミッタは、光パターンを示す光を環境へと放射して視覚的アラートを実施することを行わされること(たとえば、アクティブ化されること、トリガーされること)が可能である。
図12Fは、1つまたは複数のアレイ102からの任意選択の音響アラートと共同して視覚的アラートを実施するために光Lを放射する自律車両100の光エミッタ1202の一例1270の上部平面図を示している。図12Fにおいては、自律車両100は、破線1277によって示されているレーンマーカ間における車道に沿って軌道Tavを有しており、検知されたオブジェクト1272は、軌道Tavに対して逆の方向でほぼ平行である予測されるロケーションLoを有している。自律車両100のプランナーシステムが、視覚的アラートを実施するための3つのしきい値ロケーションT-1、T-2、およびT-3を推定することができる。走行の方向1279にある、車両100の端部に配置されている光エミッタ1202(たとえば光エミッタ1202は、オブジェクト1272に面している)が、視覚的アラートのために選択される。対照的に、走行の方向1279に面していない、車両100のその他の端部に配置されているアレイ1202は、視覚的アラートのために選択されないことが可能である。なぜなら、それらは、オブジェクト1272によって視覚的に知覚可能ではない場合があり、たとえば、その他の運転手または歩行者を混乱させる可能性があるからである。光パターン1204a、1204b、および1204cが、それぞれ、しきい値ロケーションT-1、T-2、およびT-3に関連付けられることが可能であり、オブジェクト1272の予測されるロケーションLoが車両100のロケーションに近づくにつれて、段階的に高まる視覚的アラートを実施する(たとえば、増大する緊急性を伝達する)ように構成されることが可能である。
図12Fに付け加えて、図11A~図11Cを参照して上述されているように音響アラートのために車両100のプランナーシステムによって別の検知されたオブジェクト1271が選択されることが可能である。オブジェクト1271に関する推定されるしきい値ロケーションt-1~t-3は、オブジェクト1272に関する推定されるしきい値ロケーション(たとえば、T-1、T-2、およびT-3)とは異なる場合がある。たとえば、音響アラートは、視覚的アラートの視覚的な知覚に比べて、車両100からさらに遠い距離において聴覚的に知覚可能である場合がある。オブジェクト1271の速度またはスピードは、オブジェクト1272の速度またはスピードよりも速い(たとえば、自動車対自転車)場合があり、それによって、しきい値ロケーションt-1~t-3は、オブジェクト1271のさらに速い速度に起因してさらに遠くに配置されて、オブジェクト1271がそのロケーションを変えて衝突を回避するための、ならびに/または車両100が回避操縦を行うための、および/もしくはその安全システムのうちの1つもしくは複数をアクティブ化するための十分な時間を提供する。図12Fは、オブジェクト1272に関連付けられている視覚的アラート、およびオブジェクト1271に関連付けられている音響アラートの例を示しているが、環境におけるオブジェクトの行動に対処するためにアクティブ化される安全システム(たとえば、内部システム、外部システム、または運転システム)の数およびタイプは、示されている例に限定されず、1つまたは複数の安全システムがアクティブ化されることが可能である。一例として、音響アラート、視覚的アラート、または両方が、オブジェクト1271、オブジェクト1272、または両方へ通信されることが可能である。別の例として、オブジェクト1271、オブジェクト1272、または両方が車両100と衝突しそうになるか、または車両100から安全でない距離内に入った(たとえば、予測される衝撃時間まで約2秒以下である)場合には、1つまたは複数のブラッダが展開されることが可能であり、1つまたは複数のシートベルトが締め付けられることが可能である。
プランナーシステムは、環境におけるオブジェクトの可能性の高いロケーションの1つまたは複数の領域(たとえば、図5および図6における565)を、それぞれのオブジェクトの予測される動き、および/またはそれぞれのオブジェクトの予測されるロケーションに基づいて予測することができる。可能性の高いロケーションの領域、ならびに可能性の高いロケーションの領域内のしきい値ロケーションのサイズ、数、間隔、および形状は、たとえば、オブジェクトの特徴(たとえば、スピード、タイプ、ロケーションなど)、選択される安全システムのタイプ、車両100の速度、および車両100の軌道を含むがそれらには限定されない多くのファクタに基づいて、さまざまであることが可能である。
図13Aは、自律車両の外部安全システムにおけるブラッダシステムの一例1300を示している。ブラッダシステム369によって受信される外部データ325は、ブラッダ選択1312を表すデータ、ブラッダ展開1314を表すデータ、および(たとえば、展開された状態から、展開されていない状態への)ブラッダ収縮1316を表すデータを含むことができる。プロセッサ1305は、外部データ325を処理して、1つまたは複数のブラッダエンジン1311と結合されているブラッダセレクタをコントロールすることができる。それぞれのブラッダエンジン1311は、ブラッダ1からブラッダnによって示されているブラッダ1310と結合されることが可能である。それぞれのブラッダ1310は、そのそれぞれのブラッダエンジン1311によって、展開されていない状態から、展開された状態へアクティブ化されることが可能である。それぞれのブラッダ1310は、そのそれぞれのブラッダエンジン1311によって、展開された状態から、展開されていない状態へアクティブ化されることが可能である。展開された状態においては、ブラッダ1310は、自律車両100の外側へ(たとえば、車両100の車体パネルまたはその他の構造の外側へ)広がることができる。ブラッダエンジン1311は、流体(たとえば、加圧ガス)を加圧下でブラッダ1310内に詰め込んで、ブラッダ1310を、展開されていない位置から、展開された位置へ膨張させることによって、そのそれぞれのブラッダ1310の体積における変化をもたらすように構成されることが可能である。ブラッダセレクタ1317は、(たとえば、ブラッダ1からブラッダnのうちで)どのブラッダ1310をアクティブ化するか(たとえば、展開するか)、およびどのブラッダ1310を非アクティブ化するか(たとえば、展開されていない状態へ戻すか)を選択するように構成されることが可能である。選択されたブラッダ1310は、選択されたブラッダ1310に関するブラッダ展開1314を表すデータをプロセッサが受信すると、展開されることが可能である。選択されたブラッダ1310は、選択されたブラッダ1310に関するブラッダ収縮1316を表すデータをプロセッサが受信すると、展開されていない状態へ戻されることが可能である。プロセッサ1305は、データをブラッダセレクタ1317へ通信して、選択されたブラッダ1310を(たとえば、そのブラッダエンジン1311を介して)展開すること、または展開されたブラッダ1310を(たとえば、そのブラッダエンジン1311を介して)展開されていない状態へ戻すことをブラッダセレクタ1317に行わせるように構成されることが可能である。
ブラッダ1310は、たとえば、柔軟な材料、弾力性のある材料、膨張可能な材料、たとえばゴムもしくは合成材料、またはその他の任意の適切な材料から作製されることが可能である。いくつかの例においては、ブラッダ1310のための材料は、(たとえば、ブラッダ1310に対する予測される衝撃が発生しない場合、または衝突が発生してもブラッダ1310にダメージを与えない場合には)再利用可能である材料に基づいて選択されることが可能である。一例として、ブラッダ1310は、セミトラクタートレーラートラックにおいて実装されるエアスプリングのために使用される材料から作製されることが可能である。ブラッダエンジン1311は、ブラッダ1310を、展開された位置へ膨張させるためにブラッダ1310へと導入されることが可能である加圧流体を生成すること、またはブラッダ1310を、加圧流体の源、加圧ガスのそのようなタンク、またはガス発生器と結合することが可能である。ブラッダエンジン1311は、ブラッダ1310から加圧流体を(たとえば、バルブを介して)解放して、ブラッダ1310を、展開された位置から元の展開されていない位置へ縮小する(たとえば、ブラッダ1310を、展開されていない位置へしぼませる)ように構成されることが可能である。一例として、ブラッダエンジン1311は、そのそれぞれのブラッダ1310内の加圧流体を外気へ放出することができる。展開された位置においては、ブラッダ1310は、自律車両100とのオブジェクトの衝撃によって与えられる力を吸収し、それによって、自律車両および/またはその搭乗者に対するダメージを低減または防止するように構成されることが可能である。たとえば、ブラッダ1310は、自律車両100と衝突する歩行者または自転車運転者によって与えられる衝撃力を吸収するように構成されることが可能である。
ブラッダデータ1319は、ブラッダの特徴、たとえば、ブラッダのサイズ、ブラッダ展開時間、ブラッダ収縮時間(たとえば、ブラッダ1310を、展開された位置から元の展開されていない位置へ収縮させるための時間)、ブラッダの数、車両100の外部に配置されているブラッダのロケーションなどを決定するために、プロセッサ1305、ブラッダセレクタ1317、またはブラッダエンジン1311のうちの1つまたは複数によってアクセスされることが可能である。ブラッダ1310は、サイズおよび自律車両100上のロケーションにおいてさまざまであることが可能であり、したがって、別々の展開時間(たとえば、膨らませる時間)を有することが可能であり、別々の収縮時間(たとえば、しぼませる時間)を有することが可能である。展開時間は、たとえば、プランナーシステム310によって追跡把握されているオブジェクトの衝撃の予測される時間に基づいて、ブラッダ1310または複数のブラッダ1310を展開するための十分な時間があるかどうかを決定する際に使用されることが可能である。ブラッダエンジン1311は、展開された場合および展開されていない場合のブラッダ1310内の圧力を決定するために、ならびに衝撃がブラッダ1310を破裂させたかまたはその他の形でダメージを与えたかどうか(たとえば、破裂がブラッダ1310における漏れをもたらしているかどうか)を決定するために、圧力センサなどのセンサを含むことができる。ブラッダエンジン1311および/またはセンサシステム320は、自律車両100に対する衝撃から動きを検知するためのモーションセンサ(たとえば、加速度計、図8におけるMOT888)を含むことができる。衝撃によってダメージを与えられていないブラッダ1310および/またはそのそれぞれのブラッダエンジン1311は、再利用されることが可能である。予測される衝撃が発生しない(たとえば、車両100とオブジェクトとの間における衝突がない)場合には、ブラッダ1310は、(たとえば、ブラッダエンジン1311を介して)展開されていない状態へ戻されることが可能であり、ブラッダ1310は、今後の時間において後で再利用されることが可能である。
図13Aに付け加えて、予測されるロケーションLoを有しているオブジェクト1334が、自律車両100にその両側部のうちの一方から近づいていると言うことができ、それによって自律車両100の軌道Tavは、オブジェクト1334の予測されるオブジェクト経路に対してほぼ垂直である。オブジェクト1334は、自律車両100の側部に衝撃を与えると予測されることが可能であり、外部データ325は、予測される衝撃の前に展開するための、自律車両100の側部(たとえば、衝撃が発生すると予測される側部)上に配置されている1つまたは複数のブラッダ1310を選択することをブラッダセレクタ1311に行わせるように構成されているデータを含むことができる。
図13は、自律車両の外部安全システムにおけるブラッダの例1330および1335を示している。例1330においては、車両100は、車両100の外部表面および/または構造に関連付けられている位置を有しているいくつかのブラッダ1310を含むことができる。ブラッダ1310は、別々のサイズおよび形状を有することができる。ブラッダ1310は、車両のその他の構造の後ろに隠されることが可能であり、または装飾などに見せかけられることが可能である。たとえば、車両100のドアパネルまたはフェンダーは、膜構造を含むことができ、ブラッダ1310は、その膜構造の後ろに配置されることが可能である。ブラッダ1310の展開によって生成される力は、膜構造を破裂させ、ブラッダが車両100の外部の方向へ外側に膨張すること(たとえば、環境へと外側に展開すること)を可能にすることができる。同様に、例1335においては、車両100は、いくつかのブラッダ1310を含むことができる。例1330において示されているブラッダと、例1335において示されているブラッダとは、車両100上のロケーションおよび/またはサイズにおいて対称であることが可能である。
図13Cは、自律車両におけるブラッダ展開の例1340および1345を示している。例1340においては、オブジェクト1371(たとえば、車)が、車両100との予測される衝突コース上にあり、Loという予測されるロケーションを有している。自律車両100は、軌道Tavを有している。オブジェクト1371との車両100の相対的な配向に基づいて、車両100上の予測される衝撃ロケーションが、象限2および3にある(たとえば、車両100の側部に対する衝撃)と推定される。車両100の内部100iに位置している2人の搭乗者Pは、車両100の側部から内部100iにおける搭乗者Pの着席位置まで測定されたクランプルゾーン距離z1に起因して危険にさらされている可能性がある。プランナーシステム310は、自律車両100を操縦して衝突を回避するかまたは搭乗者Pに対する潜在的な負傷を低減するための十分な時間があるかどうかを決定するために、(たとえば、キネマティクスカリキュレータ384を使用して)オブジェクト1371に関する衝撃までの推定される時間Timpactを算出することができる。車両100を操縦するための時間が衝撃の時間未満である(たとえば、Tmanuever<Timpact)とプランナーシステム310が決定した場合には、プランナーシステムは、回避操縦1341を実行して矢印(たとえば、回避操縦1341を表す矢印)の時計周りの方向に車両100を回転させて車両100の端部をオブジェクト1371の経路内に位置させるよう運転システム326に命令することができる。プランナーシステムは、たとえば、シートベルトテンショニングシステム、ブラッダシステム、音響ビームステアリングアレイ102、および光エミッタ1202など、その他の内部安全システムおよび外部安全システムのアクティブ化が回避操縦1341と同時に生じるよう命令することもできる。
例1345においては、車両100は、回避操縦1341を完了しており、オブジェクト1371は、車両100の側部ではなく、車両100の端部から近づいている。車両100とオブジェクト1371との間における新しい相対的な配向に基づいて、プランナーシステム310は、車両100の端部におけるバンパー上に配置されているブラッダ1310’の選択および展開を命令することができる。実際の衝撃が発生した場合には、クランプルゾーン距離がz1からz2へ(たとえば、z2>z1)増大して、車両100の内部100iにおけるさらに大きなクランプルゾーンを搭乗者Pに提供する。回避操縦1341の前に、搭乗者Pによって着用されているシートベルトが、シートベルトテンショニングシステムによって事前に締め付けられて、操縦1341中に、およびオブジェクト1371の潜在的な衝撃に備えて搭乗者Pを保護することが可能である。
例1345においては、ブラッダ1310’の展開時間、Tdeployが、オブジェクト1371の予測される衝撃時間、Timpact未満であると(たとえば、プランナーシステム310によって)決定されている。したがって、オブジェクト1371の潜在的な衝撃の前にブラッダ1310’を展開するための十分な時間がある。その他の安全システム、たとえば、シートベルトテンショニングシステム、シートアクチュエータシステム、音響アレイ、および光エミッタなどに関して、アクティブ化時間と衝撃時間との比較が実行されることが可能である。
運転システム(たとえば、図3Bにおける326)は、(たとえば、ステアリングシステムを介して)車両のホイールを回転させて、(たとえば、推進システムを介して)車両100を、例1345において示されている構成へ向けるよう(たとえば、プランナーシステム310を介して)命令されることが可能である。運転システムは、車両100が環境におけるその他のオブジェクトと衝突することを防止するために(たとえば、車両100が衝撃からの力の結果としてその他のオブジェクトへと押し出されることを防止するために)(たとえば、制動システムを介して)ブレーキをかけるよう(たとえば、プランナーシステム310を介して)命令されることが可能である。
図14は、自律車両100の内部安全システム322におけるシートベルトテンショニングシステムの一例1400を示している。図14においては、内部データ323が、シートベルトテンショニングシステム361によって受信されることが可能である。内部データ323は、ベルトテンショナー選択信号1412、シートベルト締め付けトリガー信号1414、およびシートベルト締め付け解除信号1416を表すデータを含むことができるが、それらには限定されない。ベルトテンショナー選択信号1412は、1つまたは複数のベルトテンショナー1411を、それぞれのベルトテンショナー1411がシートベルト1413(B-1、B-2からB-nとしても示されている)を含んでいる状態で選択することができる。それぞれのベルト1413は、ベルトテンショナー1411におけるテンショニングメカニズム(図示せず)と機械的に結合されることが可能である。テンショニングメカニズムは、リール含むことができ、そのリールは、ベルト1413が巻き付けられているそのリール上にベルトの一部分を巻き取ってベルト1413のたるみを取るように構成されている。ベルトテンショナー選択信号1412によって選択されたベルトテンショナー1411は、シートベルト締め付けトリガー信号1414を受信すると、そのそれぞれのベルト1413に張力を加えることができる。たとえば、ベルト1413(B-2)を有しているベルトテンショナー1411は、ベルトB-2を作動させて、(たとえば、ベルトB-2を着用している搭乗者に緊密に結合されていない)たるみ状態から、(破線によって示されている)締め付け状態にすることができる。締め付け状態においては、ベルトB-2は、搭乗者に圧力を加えることができ、その圧力は、たとえば、回避操縦中に、および/またはオブジェクトとの予測される衝突を予想して、搭乗者を座席に緊密に結合することができる。
ベルトB-2は、シートベルト締め付けトリガー信号1414を解除することによって、またはシートベルト締め付けトリガー信号1414を解除することに続いてシートベルト締め付け解除信号1416を受信することによって、締め付け状態から、たるみ状態へ、および元のたるみ状態へ戻されることが可能である。センサ(たとえば、圧力センサまたは力センサ)(図示せず)が、自律車両における座席が搭乗者によって占有されているかどうかを検知することができ、座席が占有されていることをセンサが示している場合には、ベルトテンショナー選択信号1412および/またはシートベルト締め付けトリガー信号1414のアクティブ化を可能にすることができる。座席センサが座席の占有を検知していない場合には、ベルトテンショナー選択信号1412および/またはシートベルト締め付けトリガー信号1414が非アクティブ化されることが可能である。ベルトデータ1419は、たとえば、シートベルトシステム361におけるシートベルト1413に関するベルト締め付け時間、ベルト解除時間、およびメンテナンスログを含むがそれらには限定されないベルトの特徴を表すデータを含むことができる。シートベルトシステム361は、自律車両100における個別のシステムとして動作することができ、または車両100のその他の安全システム、たとえば、光エミッタ、音響アレイ、ブラッダシステム、シートアクチュエータ、および運転システムなどと共同して動作することができる。
図15は、自律車両100の内部安全システム322におけるシートアクチュエータシステム363の一例1500を示している。一例においては、シートアクチュエータシステム363は、車両100とオブジェクト(たとえば、別の車両)との間における衝突に起因して環境1590におけるオブジェクト(図示せず)から車両100に与えられる衝撃力1517からのエネルギーを使用して、座席1518(たとえば、座席-1から座席-n)を作動させて自律車両100の内部における第1の位置から自律車両100の内部における第2の位置にするように構成されることが可能である。衝撃力1517から座席(たとえば、座席-n)へ機械的に伝達される力1513が、たとえば、第1の位置(たとえば、車両100の端部の付近)から第2の位置へ(たとえば、車両100の内部100iの中心の方へ)座席を移動させることができる。反作用力c-フォース1515が座席(たとえば、座席-n)に加えられて、力1513によってもたらされる加速力をコントロールすることが可能である(図示されてはいないが、図15において示されているc-フォース1515の方向および力1513の方向は、衝撃力1517の実質的に共通の方向にあることが可能であるということに留意されたい)。反作用力c-フォース1515は、力1513に対抗するために縮むように構成されている、または力1513に対抗するために伸びるように構成されているスプリングであることが可能である。その他の例においては、反作用力c-フォース1515は、たとえば、ダンパー(たとえば、ショックアブソーバ)によって、またはエアスプリングによって生成されることが可能である。反作用力c-フォース1515を提供するメカニズムが、シートカプラ1511へ、および座席(たとえば、座席-n)へ結合されることが可能である。シートカプラ1511は、反作用力c-フォース1515を車両100のシャーシまたはその他の構造に提供するメカニズムを固定するように構成されることが可能である。衝撃力1517が、車両100の構造の機械的変形をもたらす(たとえば、クランプルゾーンをつぶす)場合には、座席へ結合されているラムまたはその他の機械的構造が、車両の変形している構造によって前方へ(たとえば、第1の位置から第2の位置へ)促されて、力1513を座席に与えることが可能であり、その一方で反作用力c-フォース1515は、第1の位置から第2の位置への座席の移動に抵抗する。
その他の例においては、シートカプラ1511は、トリガー信号1516を表すデータに応答して座席1518(たとえば、座席-n)を電気的に、機械的に、または電気機械的に作動させて第1の位置から第2の位置にするためのアクチュエータを含むことができる。シートカプラ1511は、反作用力c-フォース1515を提供するメカニズム(たとえば、スプリング、ダンパー、エアスプリング、変形可能な構造など)を含むことができる。座席選択1512を表すデータおよびアーミング信号1514を表すデータが、プロセッサ1505によって受信されることが可能である。座席セレクタ1519が、座席選択1512を表すデータに基づいてシートカプラ1511のうちの1つまたは複数を選択することができる。座席セレクタ1519は、アーミング信号1514を表すデータが受信されるまで、選択された座席を作動させないことが可能である。アーミング信号1514を表すデータは、高い発生確率を有している車両100との予測される衝突(たとえば、オブジェクトが、その動きおよびロケーションに基づいて、車両と間もなく衝突すると予測されるということ)を示すことができる。アーミング信号1514を表すデータは、シートベルトテンショニングシステムをアクティブ化するための信号として使用されることが可能である。座席1518(たとえば、座席-1から座席-n)は、たとえば、単一の搭乗者を着席させられる座席(たとえば、バケットシート)、または複数の搭乗者を着席させられる座席(たとえば、ベンチシート)であることが可能である。シートアクチュエータシステム363は、車両100のその他の内部安全システムおよび外部安全システムと共同して作動することができる。
図16Aは、自律車両100における運転システム326の一例1600を示している。図16Aにおいては、運転システム326へ通信される運転データ327は、ステアリングコントロール1612、制動コントロール1614、推進コントロール1618、およびシグナルコントロール1620を表すデータを含むことができるが、それらには限定されない。運転データ327は、自律車両100の通常の運転操作(たとえば、搭乗者を乗せること、搭乗者を移送することなど)のために使用されることが可能であるが、環境1690におけるオブジェクトに関連した衝突およびその他の潜在的に危険な事象を緩和または回避するために使用されることも可能である。
プロセッサ1605は、ステアリングコントロールデータをステアリングシステム361へ、制動コントロールデータを制動システム364へ、推進コントロールデータを推進システム368へ、およびシグナリングコントロールデータをシグナリングシステム362へなど、運転データ327を特定の運転システムへ通信することができる。ステアリングシステム361は、ステアリングデータを処理してホイールアクチュエータWA-1からWA-nを作動させるように構成されることが可能である。車両100は、マルチホイール独立ステアリング(たとえば、フォーホイールステアリング)用に構成されることが可能である。それぞれのホイールアクチュエータWA-1からWA-nは、そのホイールアクチュエータと結合されているホイールのステアリング角をコントロールするように構成されることが可能である。制動システム364は、制動データを処理してブレーキアクチュエータA-1からA-nを作動させるように構成されることが可能である。制動システム364は、たとえば、差動制動およびアンチロック制動を実施するように構成されることが可能である。推進システム368は、推進データを処理して駆動モータM-1からM-n(たとえば、電気モータ)を作動させるように構成されることが可能である。シグナリングシステム362は、シグナリングデータを処理して、シグナル要素-1から-n(たとえば、ブレーキライト、ターンシグナル、ヘッドライト、走行用ライトなど)をアクティブ化することができる。いくつかの例においては、シグナリングシステム362は、1つまたは複数の光エミッタ1202を使用してシグナリング機能を実施するように構成されることが可能である。たとえば、シグナリングシステム362は、1つまたは複数の光エミッタ1202のうちのすべてまたは一部にアクセスしてシグナリング機能(たとえば、ブレーキライト、ターンシグナル、ヘッドライト、走行用ライトなど)を実施するように構成されることが可能である。
図16Bは、自律車両100における障害物回避操縦の一例1640を示している。図16においては、オブジェクト1641(たとえば、自動車)が、自律車両100の軌道Tavと対立状態にある予測されるロケーションLoを有している。プランナーシステムは、運転システムを使用して車両100を前方へ加速させて、軌道Tavに沿って位置している領域1642へ至るための十分な時間はないということを計算することができる。なぜなら、オブジェクト1641が車両100と衝突する可能性があるからである。したがって領域1642は、安全に操縦して入られることが不可能であり、領域1642は、ブロックされた領域1643として(たとえば、プランナーシステムによって)指定されることが可能である。しかしながらプランナーシステムは、(たとえば、知覚システムによって受信されたセンサデータ、およびローカライザシステムからのマップデータを介して)車両100の周囲の環境における利用可能な空きの領域を検知することができる。たとえば領域1644が、安全に操縦して入られることが可能である(たとえば、領域1644は、車両100の軌道と干渉するオブジェクトを、それが移動しているかまたは静的であるかを問わず、有していない)。領域1644は、空いている領域1645として(たとえば、プランナーシステムによって)指定されることが可能である。プランナーシステムは、車両100の軌道をその元の軌道Tavから回避操縦軌道Tmへ変更して、自律車両100を空いている領域1645へと自律的に進行させるよう(たとえば、ステアリングデータ、推進データ、および制動データを介して)運転システムに命令することができる。
障害物回避操縦と共同して、プランナーシステムは、オブジェクト1641が速度を変えた場合には、または障害物回避操縦が成功しなかった場合には、車両100の1つまたは複数のその他の内部安全システムおよび/または外部安全システムをアクティブ化して、車両のうちでオブジェクト1641によって衝撃を与えられる可能性がある部分においてブラッダを展開することをブラッダシステムに行わせることができる。
回避操縦に備えて、およびオブジェクト1641との潜在的な衝突に備えるために、シートベルトテンショニングシステムがアクティブ化されて、シートベルトを締め付けることが可能である。図16Bにおいては示されていないが、1つまたは複数の音響アレイ102および1つまたは複数の光エミッタ1202など、その他の安全システムがアクティブ化されて、音響アラートおよび視覚的アラートをオブジェクト1641へ伝達することが可能である。ベルトデータおよびブラッダデータは、シートベルトに関する締め付け時間、およびブラッダに関するブラッダ展開時間を算出するために使用されることが可能であり、それらの算出された時間が、推定される衝撃時間と比較されて、衝撃の前にベルトを締め付けるための、および/またはブラッダを展開するための十分な時間がある(たとえば、Tdeploy<Timpactおよび/またはTtensin<Timpact)かどうかを決定することが可能である。同様に、空いている領域1645への操縦を運転システムが実施するために必要な時間が、推定される衝撃時間と比較されて、回避操縦を実行するための十分な時間がある(たとえば、Tmanuever<Timpact)かどうかを決定することが可能である。
図16Cは、自律車両100における障害物回避操縦の別の例1660を示している。図16Cにおいては、オブジェクト1661が、自律車両100の衝突(たとえば、追突)を引き起こす可能性がある予測されるロケーションLを有している。プランナーシステムは、予測される衝撃ゾーン(たとえば、オブジェクト動態に基づいて衝突が発生する可能性がある領域または確率)を決定することができる。予測される衝突が発生する前に、プランナーシステムは、(たとえば、センサシステムにおけるセンサの重なり合うセンサフィールドを使用して)車両100の周囲の環境を分析して、車両100を、操縦して入れることができる空きの領域があるかどうかを決定することができる。予測される衝撃ゾーンは、車両100の後ろであり、車両100のロケーションへ向かう速度を有している予測されるロケーションLによって事実上ブロックされている(たとえば、車両は、潜在的な衝突を回避するために方向を安全に反転させることができない)。予測される衝撃ゾーンは、ブロックされた領域1681として(たとえば、プランナーシステムによって)指定されることが可能である。車両100の左の走行レーンは、利用可能な空きの領域がなく、3つのオブジェクト1663、1665、および1673(たとえば、その隣り合った走行レーンに位置している2台の車、および歩道上の1人の歩行者)の存在に起因してブロックされている。したがって、この領域は、ブロックされた領域1687として指定されることが可能である。車両100の前方の(たとえば、軌道Tavの方向における)領域は、車両1667(たとえば、大型トラック)の接近に起因してブロックされている。車両100の右のロケーションは、そのロケーションにおける歩道上の歩行者1671に起因してブロックされている。したがって、それらの領域は、ブロックされた領域1683および1689としてそれぞれ指定されることが可能である。しかしながら、オブジェクトのない領域が、領域1691において(たとえば、プランナーシステムおよび知覚システムを介して)検知されることが可能である。領域1691は、空いている領域1693として指定されることが可能であり、プランナーシステムは、軌道を軌道Tavから回避操縦軌道Tmへ変更するよう運転システムに命令することができる。結果として生じる命令は、オブジェクト1661による潜在的な追突を回避するために角を曲がって空いている領域1693へ入ることを車両100に行わせることができる。
空いている領域1693内への回避操縦と共同して、たとえば、車両100の端部におけるブラッダ1310、シートベルトテンショナー1411、音響アレイ102、シートアクチュエータ1511、および光エミッタ1202など、その他の安全システムがアクティブ化されることが可能である。一例として、車両1661が、予測されるロケーションLo上の車両100に近づき続けた場合には、1つまたは複数のブラッダ1301が(たとえば、展開された位置へのブラッダの膨張を十分に可能にするための、予測される衝撃時間よりも前の時間において)展開されることが可能であり、音響アラートが(たとえば、1つまたは複数の音響ビームステアリングアレイ102によって)伝達されることが可能であり、視覚的アラートが(たとえば、1つまたは複数の光エミッタ1202によって)伝達されることが可能である。
プランナーシステムは、オブジェクトタイプを表すデータ(たとえば、車両100に追突すると予測されるオブジェクト1661などの車両上のデータ)にアクセスし、オブジェクトを表すデータを、オブジェクトタイプを表すデータと比較して、オブジェクトタイプを表すデータを決定すること(たとえば、オブジェクト1661に関するオブジェクトタイプを決定すること)が可能である。プランナーシステムは、オブジェクトのロケーションを表すデータに基づいてオブジェクトの速度またはスピードを計算すること(たとえば、キネマティクスカリキュレータ384を使用して、ロケーションにおける経時的な変化を追跡把握して、速度またはスピードを計算すること)が可能である。プランナーシステムは、データストア、ルックアップテーブル、データリポジトリ、またはその他のデータソースにアクセスして、オブジェクト制動能力(たとえば、車両1661の制動能力)を表すデータにアクセスすることができる。オブジェクトタイプを表すデータは、オブジェクト制動能力を表すデータと比較されて、推定されるオブジェクト質量を表すデータ、および推定されるオブジェクト制動能力を表すデータを決定することが可能である。推定されるオブジェクト質量を表すデータ、および推定されるオブジェクト制動能力を表すデータは、オブジェクトの特定のクラス(たとえば、自動車、トラック、オートバイなどのさまざまなクラスなど)に関する推定されるデータに基づくことが可能である。たとえば、オブジェクト1661が、中型の4ドアセダンに関連付けられているオブジェクトタイプを有している場合には、車両のそのクラスに関する平均であり得る推定される車両総質量または重量が、オブジェクト1661に関する推定されるオブジェクト質量に相当することが可能である。推定される制動能力も、車両のクラスに関する平均値であることが可能である。
プランナーシステムは、推定されるオブジェクト制動能力を表すデータ、および推定されるオブジェクト質量を表すデータに基づいて、オブジェクトの推定される運動量を表すデータを計算することができる。プランナーシステムは、推定される運動量を表すデータに基づいて、オブジェクト(たとえば、オブジェクト1661)の制動能力がその推定される運動量によって超過されているということを決定することができる。プランナーシステムは、運動量が制動能力を超過していることに基づいて、車両100を、予測される衝撃ゾーンから遠ざけて、空いている領域1693へと移動させるための図16Cの回避操縦を算出して実行することを決定することができる。
図17は、自律車両100の光エミッタからの視覚的アラートを使用した、環境におけるオブジェクトとの視覚的通信の例を示している。例1720においては、自律車両100は、自律車両100の外部のさまざまなロケーションに配置されている光エミッタ1202を含む。自律車両100は、車両100の外部の環境1790におけるレーンマーカ1719を有する車道1711を進行していて軌道Tavを有するものとして示されている。(たとえば、車両100の知覚システムによって歩行者オブジェクトとして分類されている)環境1790におけるオブジェクト1710が、車道1711に隣り合った歩道1717のへり1715上に立っているものとして示されている。オブジェクト1710は、車道1711の自転車レーン1713の近くに立っている。はじめに、オブジェクト1710は、(たとえば、車両100の運転システムによる低ノイズ放射、周囲のノイズなどに起因して)車道1711上の自律車両100の接近に気づかない可能性がある。知覚システム(たとえば、図12Aにおける340)は、センサシステム(たとえば、図12Aにおける320)からのセンサ信号に基づいて環境におけるオブジェクト1710の存在を検知することができ、たとえば、オブジェクト分類、オブジェクトトラック、オブジェクトタイプ、環境1790におけるオブジェクトのロケーション、オブジェクトと車両100との間における距離、オブジェクトに対する車両100の配向、オブジェクトのロケーションに対する動きの予測進度などを含むがそれらには限定されない、オブジェクト1710を表すオブジェクトデータを生成することができる。
例1720に付け加えて、車両100のプランナーシステム(たとえば、図12Aにおける310)は、視覚的アラートとして光Lを放射する光エミッタ1202のうちの1つまたは複数に関連付けられているしきい値事象の推定を実施するように構成されることが可能である。たとえば、オブジェクト1710を検知すると、プランナーシステムは、視覚的アラートが光エミッタ1202によってすぐには放射されないようにすることができ、その代わりにプランナーシステムは、環境1790におけるオブジェクト1710のロケーションを表すデータ、および環境1790における車両100のロケーションを表すデータ(たとえば、図12Aのローカライザシステム330からの体勢データ)に基づいて、視覚的アラートのために光Lを放射することを光エミッタに行わせることに関連付けられているしきい値事象Teを推定することができる。
一例として、車両100が軌道Tavに沿って走行してオブジェクト1710を検知した場合、検知時において、車両100とオブジェクト1710との間における初期距離が距離Diであることが可能である。プランナーシステムは、視覚的アラートのために光Lを放射することを光エミッタ1202に行わせるための(たとえば、トリガーするための)しきい値事象として、オブジェクトにさらに近い別の距離を算出することができる。例1720においては、車両100とオブジェクト1710との間における距離Dtが、しきい値事象Teに関連付けられている距離であることが可能である。この例に付け加えて、しきい値事象Teは、距離Dtに関連付けられることが可能である。なぜなら、その距離は、さまざまな理由から、視覚的アラートをもたらすためのさらに効果的な距離である可能性があるからであり、それらのさまざまな理由は、たとえば、光Lがオブジェクト1710にとって視覚的に知覚可能であるにはiという初期距離において車両100があまりにも遠く離れていること、および/またはオブジェクト1710が、光Lが自分に向けられていることを知覚していないことなどを含むが、それらには限定されない。別の例として、初期距離Diは、約150フィート(45.72メートル)であることが可能であり、しきい値事象Teに関する距離Dtは、約100フィート(30.48メートル)であることが可能である。
第2の例として、車両100が軌道Tavに沿って走行してオブジェクト1710を検知した場合、検知時において、車両100とオブジェクト1710との間における距離iを車両100が縮めるための初期時間が時間Tiであることが可能である。プランナーシステムは、時間Tiの後の時間をしきい値事象Teとして算出することができる。たとえば、Tiという初期時間の時間Tt後に、しきい値事象Teが発生することが可能であり、光エミッタ1202は光Lを放射することができる。
例1740においては、車両100は、軌道に沿って初期距離Diから距離Dtまで走行しているものとして示されており、その距離Dtにおいて、光エミッタ1202は、光Lを放射することを行わされている。車両100におけるさまざまなロケーションに配置されているエミッタ1202のうちの1つまたは複数は、光パターンを表すデータに従って光Lを放射することができる。たとえば、はじめに、しきい値事象Teにおいて(たとえば、時間Ttまたは距離Dtにおいて)、(たとえば、軌道Tavと一直線にされている)走行の方向に面している車両100の第1の端部における光エミッタ1202からの光Lが、光Lを放射することができる。なぜなら、第1の端部はオブジェクト1710に面しているからである。その一方で、歩道1717に面している車両の側部における光エミッタ1210は、たとえば、距離Dtにおけるオブジェクト1710にとって見えない可能性がある。
任意選択で、プランナーシステムは、視覚的アラートシステムのアクティブ化の前、間、または後に、車両100の1つまたは複数のその他の安全システムをアクティブ化することができる。一例として、1つまたは複数の音響ビームステアリングアレイ102がアクティブ化されて、オブジェクト1710に向けた音響エネルギーの誘導されるビーム104を生成することが可能である。音響エネルギーの誘導されるビーム104は、(たとえば、オブジェクト1710が車両100の方向に自分の頭を向ける1741ようにさせることによって、)近づいている車両100にオブジェクト1710が気づくようにさせる上で効果的である場合がある。
例1760においては、車両100はオブジェクト1710へさらに近くなっており、その他の光エミッタ1202がオブジェクト1710にとって見えることが可能であり、プランナーシステムは、たとえば、歩道1717に面している車両の側部に配置されているさらなる光エミッタ1202をアクティブ化することができる。例1760に付け加えて、視覚的アラート、および/または(たとえば、アレイ102からの)音響アラートと組み合わせた視覚的アラートが、オブジェクト1710を歩道1717上へ、および近づいている車両100の軌道Tavからさらに離れるように(たとえば、安全な距離まで)移動させる1761上で効果的である場合がある。車両100がオブジェクト1710を通り過ぎた後に、アクティブ化されていた可能性がある光エミッタ1202およびその他の安全システムは、非アクティブ化されることが可能である。
図18は、自律車両100における光エミッタからの視覚的アラートを実施するための流れ図1800の別の例を示している。フロー1800においては、ステージ1802において、環境(たとえば、図17の環境1790)における自律車両100の軌道を表すデータが、環境における自律車両100のロケーションを表すデータに基づいて計算されることが可能である。ステージ1804において、環境におけるオブジェクト(たとえば、図17のオブジェクト1710)のロケーションを表すデータが、(たとえば、知覚システムにおいて受信されたセンサデータを使用して)決定されることが可能である。オブジェクトは、オブジェクト分類を有することができる(たとえば、歩行者として分類されている図17のオブジェクト1710)。ステージ1806において、視覚的アラートに関連付けられている光パターンを表すデータが、(たとえば、データストア、メモリ、またはデータファイルなどから)選択されることが可能である。選択される光パターンは、自律車両100が環境(たとえば、図17の環境1790)に存在しているということをオブジェクト(たとえば、歩行者、または別の車両の運転手)に視覚的に通知するように構成されることが可能である。光パターンは、オブジェクト分類に基づいて選択されることが可能である。たとえば、歩行者の分類を有しているオブジェクトに関しては第1の光パターンが選択されることが可能であり、自転車運転者の分類を有しているオブジェクトに関しては第2の光パターンが選択されることが可能であり、自動車の分類を有しているオブジェクトに関しては第3の光パターンが選択されることが可能であり、第1、第2、および第3の光パターンは、互いに異なることが可能である。
ステージ1808において、自律車両100の光エミッタが、光パターンを示す光Lを環境へと放射することを行わされることが可能である。ステージ1808において、光エミッタは、たとえば、オブジェクト(たとえば、図17のオブジェクト1710)に対する車両100の配向に基づいて選択されることが可能である。オブジェクトのロケーションに対する自律車両100の配向を表すデータは、たとえば、オブジェクトのロケーションを表すデータ、および自律車両の軌道を表すデータに基づいて計算されることが可能である。
光エミッタは、1つまたは複数のサブセクション(図示せず)を含むことができ、光パターンを表すデータは、1つまたは複数のサブパターンを含むことができ、それぞれのサブパターンは、それらのサブセクションのうちの1つに関連付けられている。それぞれのサブセクションは、そのそれぞれのサブパターンを示す光Lを環境へと放射するように構成されることが可能である。自律車両100は、多くの光エミッタを含むことができ、それらの光エミッタのうちのいくつかまたはすべては、1つまたは複数のサブセクションを含むことができる。いくつかの例においては、光エミッタのサブセクションは、さまざまな機能を実行するように(たとえば、それらのそれぞれのサブパターンを介して)構成されることが可能である。たとえば、光エミッタの1つまたは複数のサブセクションは、運転システムのシグナリング機能(たとえば、ターンシグナル、ブレーキライト、ハザードライト、走行用ライト、フォグライト、ヘッドライト、サイドマーカライトなど)を実施することができ、その一方で、1つまたは複数のその他のサブセクションは、(たとえば、それらのそれぞれのサブパターンを介して)視覚的アラートを実施することができる。
しきい値事象(たとえば、図17のしきい値事象Te)を表すデータは、オブジェクトのロケーションを表すデータ、および自律車両100のロケーションを表すデータに基づいて推定されることが可能である。しきい値事象の発生は、(たとえば、プランナーシステムによって受信されたオブジェクトデータ、体勢データ、または両方によって)検知されることが可能であり、1つまたは複数の光エミッタは、しきい値事象の発生に基づいて光Lを放射することを行わされることが可能である。
一例においては、しきい値事象を表すデータを推定することは、自律車両のロケーションを表すデータ、およびオブジェクトのロケーションを表すデータに基づいて、自律車両とオブジェクトとの間における距離を表すデータを計算することを含むことができる。自律車両とオブジェクトとの間における距離を表すデータに基づいて、しきい値事象に関連付けられるしきい値距離が決定されることが可能である。ステージ1806において選択される光パターンは、たとえば、しきい値距離に基づいて決定されることが可能である。しきい値距離(たとえば、図17のDt)は、距離(たとえば、図17のDi)未満であることが可能である。
別の例においては、しきい値事象を表すデータを推定することは、オブジェクトのロケーションを表すデータ、および自律車両100の軌道を表すデータに基づいて、互いに一致している、自律車両100のロケーションおよびオブジェクトのロケーションに関連付けられている時間(たとえば、図17におけるTi)を表すデータを計算することを含むことができる。互いに一致している、自律車両100のロケーションおよびオブジェクトのロケーションに関連付けられている時間を表すデータに基づいて、しきい値時間(たとえば、図17のTt)が決定されることが可能である。しきい値時間(たとえば、図17のTt)は、時間(たとえば、図17のTi)未満であることが可能である。
図19は、自律車両100の光エミッタからの視覚的アラートを使用した、環境におけるオブジェクトとの視覚的通信の例1900を示している。例1900においては、自律車両100は、(たとえば、知覚システムによって検知および分類されているものとして、)レーンマーカ1915と、自転車専用道路1913と、歩道1917と、横断歩道1920と、交通標識1923、1925、1927、1931、および1933と、交通信号1921とを有している車道1911に沿った軌道Tavを自律的に進行している。2つのオブジェクト1901および1902が、自律車両100によって検知されており、環境1990における予測されるロケーションLoを有している歩行者オブジェクトとして分類されることが可能である。
交通標識、交通信号、または両方を表すデータに基づいて、自律車両は、オブジェクト1901および1902が車道1911を合法的に(たとえば、交通標識1923、1925、1927、1931、および1933、ならびに/もしくは交通信号1921によって許可されているように)渡っているか、または非合法的に(たとえば、交通標識および/もしくは交通信号によって禁止されているように)渡っているかを決定することができる。どちらのケースにおいても、自律車両100は、車両100の搭乗者の安全、オブジェクト(たとえば、1901および1902)の安全、または両方のために、環境において車両100とオブジェクトとの間における最も安全な相互作用を実施するように(たとえば、プランナーシステムを介して)構成されることが可能である。
歩行者オブジェクト1901および1902が横断歩道1920を第1のロケーションL1から第2のロケーションL2へ横断しているときに、自律車両100は、オブジェクト1901および1902の予測されるロケーションLaにおける変化を(たとえば、センサシステムおよび知覚システムを介して)検知することができ、(たとえば、オブジェクト1901および1902に対する車両100の配向に基づいて)1つまたは複数の光エミッタ1202によって視覚的アラートが放射されるようにすることができる。環境1990における車両100のロケーションを表すデータが使用されて、環境1990における車両100の軌道(たとえば、車道1911に沿った軌道Tav)を表すデータを計算することが可能である。環境1990におけるオブジェクト1901および1902のロケーションを表すデータは、たとえば、センサシステムからのセンサ信号を表すデータ(たとえば、オブジェクトデータを生成するために知覚システムによって受信されたセンサデータ)に基づいて決定されることが可能である。
視覚的アラートに関連付けられている光パターンが(たとえば、プランナーシステムによって)選択されて、車両100の運転操作における変化をオブジェクト1901および1902に通知することが可能である。たとえば、オブジェクト1901および1902が横断歩道1920を第1のロケーションL1から第2のロケーションL2へ横断しているときに、その歩行者たちは、自律車両100が彼らの存在を認識していないのではないか、そしてその歩行者たち(たとえば、オブジェクト1901および1902)が横断歩道1920を安全に渡る前に停止または減速しないかもしれないと懸念する可能性がある。したがって歩行者たちは、自律車両100によってひかれることを心配する可能性がある。
自律車両100は、歩行者(たとえば、オブジェクト1901および1902)に対して、車両100が彼らの存在を検知しており、横断歩道1920から安全な距離で減速、停止、または両方を行うように作動しているということを通知するように構成されることが可能である。たとえば、車道1911に沿った領域1950において、光パターLP1940が選択されることが可能であり、車両が減速しているということをオブジェクト1901および1902に(たとえば、光エミッタ1202によって放射される光Lを使用して)視覚的に通知するように構成されることが可能である。車両100の減速は、光パターン1940において実施される車両100の運転操作における変化として示されることが可能である。一例として、車両100が減速するにつれて、光エミッタ1202によって放射される光Lのフラッシュする、ストロボする、またはその他のパターンの割合が、車両100の減速をまねるように変更されること(たとえば、減速されること)が可能である。光パターン1940は、たとえば、ホイールエンコーダからの信号(たとえば、図8のホイール852に関するホイール回転の割合)、(たとえば、GPSおよび/またはIMUからの)ロケーションデータ、運転操作を示す信号を生成するように構成されているマイクロフォン(たとえば、図8の871)等など、車両100の運転操作における変化を示すその他のデータまたは信号に伴って変調されることが可能である。その他の例においては、光パターン1940は、車両100の運転操作における変化をまねるように構成されているエンコードされたデータを含むことができる。
領域1950においては、車両100が減速するにつれて、光エミッタ1202によって放射される光Lのパターンは、たとえば、速度、スピード、ホイール回転スピード、またはその他のメトリックの関数として変わることが可能である。その他の例においては、車両100の運転操作は、車両を領域1960において停止させることができ、運転操作が車両を(たとえば、横断歩道1920から安全な距離Dsでまたはその前で)停止させつつあるということをオブジェクト1901および1902に通知するように光パターン1970が選択されることが可能である。破線1961は、車両100と横断歩道1920との間における所定の安全な距離Dsを表すことができ、そのDs内で、車両100は停止するように構成されている。一例として、車両が領域1960において減速して停止する際に、光エミッタ1202によって放射される光パターンは、(たとえば、車両100の何らかの動きを示す)動的なパターンから(たとえば、車両100の動きがないことを示す)静的なパターンへ変わることが可能である。光パターン1970は、上述のように車両100の運転操作における変化を示すその他のデータまたは信号に伴って変調されて、運転操作における変化をオブジェクトに視覚的に示すことが可能である。
図20は、自律車両100における光エミッタからの視覚的アラートを実施するための流れ図2000のさらに別の例を示している。ステージ2002において、自律車両100の軌道(たとえば、軌道Tav)を表すデータが、環境における車両100のロケーションを表すデータに基づいて計算されることが可能である。ステージ2004において、環境におけるオブジェクト(たとえば、オブジェクト1901および1902)のロケーションが決定されることが可能である。検知されるオブジェクトは、オブジェクト分類(たとえば、オブジェクト1901および1902に関する歩行者オブジェクト分類)を含むことができる。ステージ2006において、視覚的アラートに関連付けられていて、かつ車両100の運転操作における変化をオブジェクトに通知するように構成されている光パターンを表すデータが選択されることが可能である。ステージ2008において、自律車両100の光エミッタ1202が、光パターンを示す光Lを環境へと放射することを行わされることが可能である。自律車両100の配向がオブジェクトのロケーションに対して変わるにつれて、光Lを放射するために選択される光エミッタ1202が変わることが可能である。
車両100の停止の動きおよび/または減速の動きは、車両100の運転操作を変えるようプランナーシステムが運転システムに命令することによって実施されることが可能である。運転システムは、ステアリングシステム、制動システム、推進システム、安全システム、シグナリングシステム、または前述のものの組合せのオペレーションをコントロールすることによって、プランナーシステムからの命令を実施することができる。
図21は、自律車両100の外部に配置されている光エミッタのその他の例2110および2120の輪郭図を示している。自律車両100は、矢印2180によって示されているように複数の方向における運転操作用に構成されることが可能である。例2110においては、車両100の第1の端部の部分的な輪郭図(たとえば、矢印2176の方向に沿ったビュー)が、車両100の外部のさまざまな位置に配置されているいくつかの光エミッタ1202を示している。車両100の第1の端部は、視覚的アラートおよび/またはシグナリング機能、たとえば、ブレーキライト、ターンシグナル、ハザードライト、ヘッドライト、走行用ライト等など、(2101として示されている)複数の機能を果たすことができる光エミッタ1202を含むことができる。光エミッタ1202は、たとえば、支柱セクション、ルーフ100u、ドア、バンパー、ホイール、ホイールカバー、ホイールウェル、ハブキャップ、およびフェンダーを含むがそれらには限定されないさまざまなロケーションに配置されることが可能である。いくつかの例においては、光エミッタ1202のうちの1つまたは複数は、たとえば、ウィンドウ、レンズ、およびカバリングなどの後ろになど、車両100の光学的に透過的な表面または構造の後ろに配置されることが可能である。光エミッタ1202によって放射される光Lは、光学的に透過的な表面または構造を通り抜けて環境へと至ることが可能である。
例2120においては、車両100の第2の端部(たとえば、矢印2176の逆の方向に沿ったビュー)が、自動車シグナリング機能(2103として示されている)および/または視覚的アラート機能用に構成されることが可能である光エミッタ1202を含むことができる。例2120において示されている光エミッタ1202は、たとえば、支柱セクション、ルーフ100u、ドア、バンパー、ホイール、ホイールカバー、ホイールウェル、ハブキャップ、およびフェンダーを含むがそれらには限定されないさまざまなロケーションに配置されることも可能である。
図22は、自律車両100の外部に配置されている光エミッタのさらなる例2210および2220の輪郭図を示している。自律車両100は、矢印2280によって示されているように複数の方向における運転操作用に構成されることが可能である。例2210においては、車両100の第1の端部において(たとえば、矢印2276の方向に沿ったビュー)、円形の形状を有している光エミッタ1202は、シグナリング機能専用に構成されることが可能であり、または(たとえば、運転システムへの命令を介してプランナーシステムによって決定されるのに従って)視覚的アラート用に、およびシグナリング機能用に構成されることが可能である。同様に、例2220においては、車両100の第2の端部において(たとえば、矢印2276の逆の方向に沿ったビュー)、円形の形状を有している光エミッタ1202はまた、シグナリング機能専用に構成されることが可能であり、または視覚的アラート用に、およびシグナリング機能用に構成されることが可能である。例2210および2220において示されている光エミッタ1202はまた、たとえば、支柱セクション、ルーフ100u、ドア、バンパー、ホイール、ホイールカバー、ホイールウェル、ハブキャップ、およびフェンダーを含むがそれらには限定されないさまざまなロケーションに配置されることが可能である。円形の形状を有している光エミッタ1202のシグナリング機能は、たとえば、ブレーキライト、ターンシグナル、ハザードライト、ヘッドライト、および走行用ライトを含むことができるが、それらには限定されない。図21~図22において示されている光エミッタ1202の形状、サイズ、ロケーション、および数は、示されている例に限定されない。
図23は、自律車両100の光エミッタ1202の例2300および2350を示している。例2300においては、光エミッタ1202が、光パターン2310を表すデータによって1202a~1202cとして示されているサブセクションへと区分されることが可能である。光パターン2310は、光エミッタ1202のサブセクション1202a~1202cにそれぞれ関連付けられているサブセクション2312a~2312cを表すデータを含むことができる。光パターン2310は、光エミッタ1202のサブセクション1202a~1202cに関連付けられているサブパターン2314a~2314cを表すデータを含むことができる。たとえば、それぞれのサブセクションによって放射される光Lは、そのサブセクションに関連付けられているサブパターンを表すデータによって決定されるパターンを有することができる。別の例として、サブセクション2312bを表すデータは、光エミッタ1202のサブセクション1202bを決定し、サブセクション1202bによって放射される光パターンは、サブパターン2314bを表すデータによって決定される。
例2350においては、光エミッタ1202は、楕円形の形状を有することができ、光エミッタ1202における各エミッタは、1202d~1202gとして示されているサブセクションへと区分されることが可能である。サブセクション1202dは、たとえば、自律車両100のヘッドライトまたはバックアップライトを(たとえば、走行の方向に応じて)実施することができる。サブセクション1202eまたは1202fは、たとえば、ターンシグナルを実施することができる。サブセクション1202gは、たとえば、ブレーキライトを実施することができる。発光素子(たとえば、図12AのE1~En)は、光パターン2320を表すデータに従って回路および/またはソフトウェアによって個々にアドレス可能であり得る。したがって、いくつかの例においては、サブセクション1202d~1202gは、光パターン2320におけるサブセクション2322d~2322gを表すデータによって決定されるように車両100のシグナリング機能を実施することができ、サブパターン2324d~2324gに従ってシグナリング機能を実施することができる。その他の例においては、光パターン2320を表すデータは、視覚的アラート機能を実施することを光エミッタ1202に再び割り当てることができる。視覚的アラートの実施は、光エミッタの1つまたは複数のエミッタ素子をサブセクションへと区分することを含むことができ、それぞれのサブセクションは、関連付けられているサブパターンを有することができる。別の例においては、光エミッタ1202は、視覚的アラート機能を実施するサブセクションと、シグナリング機能を実施するその他のサブセクションとを含むことができる。
図24は、自律車両100の光エミッタに関連付けられている光パターンを表すデータの例2400を示している。例2400においては、光パターン2401を表すデータが、光エミッタ1202の1つまたは複数の発光素子(たとえば、素子E1~En)を駆動するように構成されている、運転手によって受信されるデータ2421を生成するためにデコーダ2420によってデコードされることが可能であるデータを有する1つまたは複数のデータフィールド2402~2414を含むことができる。
光パターン2401を表すデータは、たとえば、光エミッタ2402を表すデータ(たとえば、特定の光エミッタ1202を選択するためのデータ)、光エミッタ1202に適用されることになる1つまたは複数の光パターン2404、光エミッタ1202の1つまたは複数のサブセクション2406、1つまたは複数のサブセクションに適用されることになる1つまたは複数のサブパターン2408、光エミッタ1202の1つまたは複数の発光素子によって放射されることになる光の1つまたは複数の色2410(たとえば、光の波長)、光エミッタ1202の1つまたは複数の発光素子によって放射される光の強度2412(たとえば、カンデラでの光度)、および光エミッタ1202の1つまたは複数の発光素子に適用されることになるデューティーサイクル2414を含むことができるが、それらには限定されない。光パターン2401を表すデータに含まれるデータは、たとえば、データ構造またはデータパケットの形態であることが可能である。
デコーダ2420が、2407によって示されているような1つまたは複数の光エミッタ1202に関する光パターン2401を表すデータを受信し、そのデータを、ドライバ2430によって受信されるデータフォーマット2421へとデコードすることができる。ドライバ2430は、(たとえば、ホイールエンコーダからの)変調信号2433を表すデータを任意選択で受信することができ、変調機能2435を使用して変調信号2433を用いてデータ2421を変調するように構成されることが可能である。変調機能は、たとえば、車両100が減速すること、停止すること、または車両100のその他の何らかの運転操作を示す光パターンを実施することができる。ドライバ2430は、1つまたは複数の光エミッタ1202における1つまたは複数の発光素子を駆動するように構成されるデータ2431を生成することができる。発光素子(たとえば、E1~En)は、たとえば、発光ダイオード(LED)、有機発光ダイオード(OLEO)、マルチカラーLED(たとえば、RGB LED)、またはその他の発光デバイスを含むがそれらには限定されないさまざまな光源を使用して実装されることが可能である。
図25は、自律車両100における方向性の視覚的表示を実施するための流れ図2500の一例を示している。ステージ2502において、車両100の外部の環境における自律車両100の軌道を表すデータが、(たとえば、車両100のローカライザシステムからの体勢データを使用して)決定されることが可能である。たとえば、環境における自律車両100のロケーションを表すデータが使用されて、自律車両100の軌道を表すデータを決定することが可能である。
ステージ2504において、自律車両100は、(たとえば、プランナーシステムのコントロールのもとにある運転システムによって、)軌道と同一の広がりをもっている場合がある走行の方向に、自律車両100の部分(たとえば、第1の部分または第2の部分)がその走行の方向に向けられている(たとえば、その走行の方向に面している)状態で推進されることが可能である。一例として、その部分は、車両100の第1の部分(たとえば、車両100の第1の端部)または車両100の第2の部分(たとえば、車両100の第2の端部)であることが可能である。運転システムは、軌道と同一の広がりをもっている走行の方向に第1の部分または第2の部分を向けて推進するようステアリングシステムおよび推進システムに命令することができる。
ステージ2506において、自律車両100の走行の方向に関連付けられている走行の方向性を示すように構成されている指向性の光パターンを表すデータが選択されることが可能である。指向性の光パターンは、自律車両100のデータストア(たとえば、メモリ、データストレージなど)からアクセスされることが可能である。自律車両100の走行の別々の方向に関連付けられている別々の指向性の光パターンが存在することが可能である。指向性の光パターンは、自律車両100の別々の光エミッタ1202ごとに別々に構成されることが可能である(たとえば、各エミッタの別々のサイズ、各エミッタの別々のロケーション、各エミッタの発光エリアにおける相違、各エミッタの別々の形状など)。いくつかの例においては、自律車両100の別々の光エミッタ1202ごとに別々の指向性の光パターンが選択されることが可能である。その他の例においては、選択される指向性の光パターンは、自律車両100の複数の光エミッタ1202用に選択されることが可能である(たとえば、複数の光エミッタ1202用の単一の指向性の光パターン)。一例として、指向性の光パターンを表すデータは、ステージ2506において、指向性の光パターンのデータを有するデータストア2501からアクセスされることが可能である。
ステージ2508において、指向性の光パターンを示す光を環境へと放射するために、自律車両100の光エミッタ1202が選択されることが可能である。いくつかの例においては、複数の光エミッタ1202が選択されることが可能であり、それぞれの光エミッタ1202に同じ指向性の光パターンが適用されることが可能である。その他の例においては、複数の光エミッタ1202が選択されることが可能であり、複数の光エミッタ1202のうちのいくつかまたはすべてに別々の指向性の光パターンが適用されることが可能である。
ステージ2510において、光エミッタ1202は、自律車両100が進行している走行の方向を視覚的に伝達するために光を放射することを行わされることが可能である。いくつかの例においては、複数の光エミッタ1202が、自律車両100が進行している走行の方向を伝達するために光を放射することを行わされることが可能である。
フロー2500は、ステージ2510の後に終わることが可能であり、またはステージ2502へ帰るなど、その他のいずれかのステージへ戻ることが可能である。任意選択で、フロー2500はステージ2512を実施することができる。ステージ2512において、1つまたは複数の光エミッタ1202によって示されている自律車両の走行の方向性がロックされることが可能である。自律車両100が軌道を進行しているときに走行の方向性をロックすることは、光エミッタ1202が車両100の走行の実際の方向とは反対の方向に光を放射すること(たとえば、走行の実際の方向とは逆である走行の方向を示すこと)を防止するために実施されることが可能である。たとえば、第1の方向に運転している間に、走行の示される方向性を第1の方向にロックすることは、第1の方向とは逆である第2の方向など、走行の反対の方向を自律車両100の光エミッタ1202が視覚的に示したならば生じる可能性がある、歩行者およびその他の車両の運転手に対する潜在的な混乱を防止する上で役立つ場合がある。
ステージ2514において、自律車両100の運転操作が進んでいる(たとえば、車両100が軌道を進行している)か否かに関して決定が行われることが可能である。車両100が運転操作に従事している場合には、YES分岐が取られてステージ2512へ帰ることが可能であり、ステージ2512では、光エミッタによって示されている走行の方向性は、ロックされたままであることが可能である。その一方で、車両100の運転操作が止まっている場合には、NO分岐が取られてステージ2516へ進むことが可能である。ステージ2516において、光エミッタ1202によって示される走行の方向性は、ロック解除されることが可能である。ロック解除された後に、フロー2500は、ステージ2502などの別のステージへ戻ることが可能であり、または終わることが可能である。たとえば、運転操作が止まっていて(たとえば、車両100が、搭乗者を乗せるまたは降ろすために停止または駐車していて)、走行の方向性がロック解除されている場合には、車両100は、運転操作を再開することができ、光エミッタ1202によって示されている走行の方向性は、同じであることが可能であり、または走行の別の方向を示すために変更されることが可能である。
図26は、自律車両100における情報の視覚的表示を実施するための流れ図2600の一例を示している。ステージ2602において、環境における自律車両100のロケーションを表すデータが、(たとえば、ローカライザシステムからの体勢データを使用して)決定されることが可能である。ステージ2604において、自律車両100のロケーションに基づいて、自律車両100に関連付けられている情報を示すように構成されている光パターンを表すデータが選択されることが可能である。一例として、光パターンを表すデータは、ステージ2604において、光パターンのデータを有するデータストア2601からアクセスされることが可能である。ステージ2606において、自律車両100の光エミッタ1202が、光パターンを示す光を環境へと放射するために選択されることが可能である。ステージ2608において、(たとえば、プランナーシステム、センサシステム、知覚システム、およびローカライザシステムなど、車両100の1つまたは複数のシステムによって)トリガー事象が検知されているか否かに関して決定が行われることが可能である。トリガー事象が検知されていない場合には、ステージ2608からNO分岐が取られることが可能であり、フロー2600は、ステージ2608へ回帰してトリガー事象の検知を待つことが可能である。その一方で、トリガー事象が検知されている場合には、ステージ2608からYES分岐が取られてステージ2610へ進むことが可能である。
ステージ2610において、光エミッタ202は、自律車両100に関連付けられている情報を視覚的に伝達するために光を放射することを行わされることが可能である。ステージ2612において、自律車両100の運転操作が進んでいるか否かに関して決定が行われることが可能である。運転操作が進んでいる(たとえば、車両100が軌道を進行している)場合には、ステージ2612からYES分岐が取られてステージ2614へ進むことが可能である。ステージ2614において、(たとえば、情報が他の運転手および/または歩行者を混乱させることを防止するために、)光エミッタ1202からの光の放射が停止されることが可能である。運転操作が進んでいない場合には、ステージ2612からNO分岐が取られてステージ2610へ帰ることが可能であり、ステージ2610では、光エミッタ1202は、自律車両100に関連付けられている情報を視覚的に伝達するために引き続き光を放射することができる。
フロー2600においては、自律車両100に関連付けられている光パターンを表すデータによって示される情報は、光エミッタ1202のうちの1つまたは複数によって表示されることが可能である、クライアント/顧客/ユーザ/搭乗者によって作成されたコンテンツ、グラフィック、挨拶、注意書き、警告、イメージ、ビデオ、テキスト、メッセージ、またはその他の形態の情報を含むことができるが、それらには限定されない。一例として、自律車両100に関連付けられている光パターンを表すデータは、自律車両100を、特定の搭乗者にサービス提供することを意図されているものとして、その搭乗者が認識できるグラフィックまたはその他の視覚的な情報を使用して識別するための情報を含むことができる。この例に付け加えて、光エミッタ1202は、搭乗者固有のイメージを表示することができ、その搭乗者固有のイメージは、車両100を、その搭乗者固有のイメージに関連付けられている搭乗者(たとえば、その搭乗者固有のイメージを作成した可能性がある搭乗者)にサービス提供することを割り当てられているものとして容易に識別する。別の例として、自律車両100に関連付けられている光パターンを表すデータは、光エミッタ1202によって表示される搭乗者固有の挨拶またはメッセージを含むことができる。その挨拶/メッセージを視覚的に知覚する搭乗者は、その挨拶/メッセージを提示している自律車両100が、その搭乗者にサービス提供すること(たとえば、その搭乗者のための移送を提供すること)を割り当てられているということを理解することができる。
ステージ2608において検知されることが可能であるトリガー事象は、たとえば、ロケーションベースであることが可能である。第1の例として、車両100が、所定のロケーションにおいて搭乗者を乗せることを割り当てられている場合には、所定のロケーションへの到着時に、所定のロケーションを表すデータが、(たとえば、プランナーシステム、ローカライザシステム、知覚システム、およびセンサシステムを使用して)環境における車両100のロケーションを表すデータと比較されることが可能である。所定のロケーションと車両100のロケーションとの間におけるマッチが決定された場合には、トリガー事象が検知された(たとえば、所定のロケーションと合致したロケーションに車両が到着した)ことになる。
第2の例として、自律車両100は、ワイヤレスコンピューティングデバイス(たとえば、クライアントの/顧客の/搭乗者のスマートフォンまたはタブレット)からの(たとえば、図8におけるCOMS880を使用した)ワイヤレス通信を検知するように構成されることが可能である。車両100は、たとえば、ロケーションへの到着時にその他のデバイスからのワイヤレス通信を傍受するかまたはその他の形でリッスンするように構成されることが可能である。その他の例においては、自律車両100は、車両100が外部ワイヤレスデバイス(たとえば、スマートフォン)のもとに到着したまたはその他の形でその付近にいるということをその外部ワイヤレスデバイスに通知するように構成されている信号をワイヤレスに伝送するように構成されることが可能である。車両100および/または外部ワイヤレスデバイスは、アクセスクレデンシャル(たとえば、サービスセット識別子-SSID、MACアドレス、ユーザ名およびパスワード、Eメールアドレス、バイオメトリック識別子など)をワイヤレスにやり取りすることができる。車両100は、たとえば、BluetoothプロトコルまたはNFCプロトコルを介してなど、(たとえば、RSSIまたはその他の無線周波数メトリックによって決定される)車両100と外部ワイヤレスデバイスとの間における近接を必要とする場合がある。アクセスクレデンシャルの検証は、トリガー事象であり得る。
図27は、自律車両100の光エミッタによる走行の方向性の視覚的表示の例2701および2702を示している。例2701および2702においては、ライン2721が、(たとえば、図10A~図10Bの象限3および4を占有している)自律車両100の第1の部分と、(たとえば、図10A~図10Bの象限1および2を占有している)自律車両100の第2の部分との境界を定めている。例2710においては、車両100は、軌道Tavに沿って(たとえば、矢印Aの方向に)推進されている。光エミッタ1202は、象限1、3、および2に(たとえば、車両100の外部に)配置されることが可能であり、それらの光エミッタ1202のサブセットが選択されて、車両100の走行の方向を視覚的に伝達するために光を放射することを行わされることが可能である。選択された光エミッタは、12025として示されている。光エミッタ12025に適用される光パターンを表すデータは、第1の部分が向けられている走行の方向を指しているおよび/またはその方向に動いている1つまたは複数の矢印の光パターンを実施することができる。例2701においては、選択された光エミッタ12025は、(たとえば、象限2および3における)第1および第2の部分にわたる車両100の第1の側部に配置されることが可能である。
例2702においては、車両100は、(たとえば、象限1および4における)第1および第2の部分にわたる車両100の第2の側部に配置されている選択された光エミッタの別のサブセットを示すために時計回りに約90度回転されて示されている。例2701と同様に、例2702においては、光エミッタ12025に適用される光パターンを表すデータは、第1の部分が向けられている走行の方向を指しているおよび/またはその方向に動いている1つまたは複数の矢印の光パターンを実施することができる。
図28は、自律車両100の光エミッタによる走行の方向性の視覚的表示のその他の例2801および2802を示している。図27の例とは対照的に、例2801および2802は、第2の部分が走行の方向に向けられている状態で(たとえば、ラインBに沿った)軌道Tavを有している車両100を示している。(たとえば、例2801における)車両100の第1の側部における選択された光エミッタ12025、および(たとえば、例2801における)車両100の第2の側部における選択されたエミッタ12025は、車両100の走行の方向を指しているおよび/またはその方向に動いている1つまたは複数の矢印の光パターンを実施するように構成されることが可能である。
図29は、自律車両100の光エミッタによる走行の方向性の視覚的表示のさらに他の例2901および2902を示している。図29の例においては、車両100は、矢印Cの方向に沿った軌道Tavなど、図27および図28において示されている方向以外の方向に推進されるように構成されることが可能である。たとえば、自律車両100の運転システムは、ステアリングシステムを介して、それぞれのホイール(たとえば、図8のホイール852)を、(たとえば、矢印Cの方向に沿った)軌道Tavに沿って走行の方向性を実施する角度に向けるよう(たとえば、プランナーシステムによって)命令されることが可能である。図27および図28において選択されておくことが可能である光エミッタ1202は、例2901および2902においては、第1の部分の端部(たとえば、第1端部)および第2の部分の端部(たとえば、第2端部)に配置されている光エミッタ1202sの別のサブセットを選択するために、選択解除されることが可能である。光パターンを表すデータは、上述の走行の方向を指しているおよび/またはその方向に動いている矢印を(たとえば、選択された光エミッタ1202sにおいて)実施するように構成されることが可能である。
図30は、自律車両100の光エミッタによる走行の方向性の視覚的表示のさらなる例3001および3002を示している。図30においては、例3001および3002は、車両の軌道Tavが矢印Dの方向に沿っていること、および選択された光エミッタが、走行の方向を示す光を放射することを行わされていることを示している。図27~図30の例においては、各光エミッタ1202(たとえば、あらゆる選択された光エミッタ1202sを含む)は、車両100の第1の部分および第2の部分に対して対称に配置されることが可能である。たとえば、各光エミッタ1202は、車両100の側部に車両100の第1の部分および第2の部分に対して対称に配置されることが可能であり、ならびに/または車両100の端部に車両100の第1の部分および第2の部分に対して対称に配置されることが可能である。光エミッタ1202の実際の形状、サイズ、構成、ロケーション、および配向は、図27~図30において示されている例によって限定されない。
図31は、自律車両100の光エミッタによる情報の視覚的表示の例3100および3150を示している。例3100においては、自律車両100は、ホテル3131(たとえば、ロケーション(x,y)を有している)のへり3133において搭乗者3121を乗せるためにホテル3131へ自律的に進行している。自律車両100は、(たとえば、ローカライザシステムおよび/またはプランナーシステムを使用して)環境における自分のロケーションを決定することができ、そのロケーションに基づいて、自律車両100に関連付けられている情報を示すように構成されている光パターン(たとえば、走行の方向性に関連していないパターン)を表すデータを選択することができる。自律車両100の光エミッタ1202は、光パターンを示す光を放射するように選択されることが可能である。いくつかの例においては、光パターンを示す光を光エミッタ1202のうちの1つまたは複数から放射する前に、自律車両100によってトリガー事象が検知されることが可能である。トリガー事象の発生は、光パターンを示す光を放射することを、選択された光エミッタ1202sに行わせることができる。
一例として、トリガー事象は、ホテル3131のロケーション(たとえば、(x,y))など、別のロケーションに対する車両100のロケーションに基づいて決定されることが可能である。プランナーシステムは、そのロケーション(たとえば、GPS/IMUデータ、マップタイルデータ、体勢データなど)を、ホテル3131のロケーションを表すデータと比較して、マッチがあるかどうかを決定することができる。完全なマッチは必要ではない場合がある。なぜなら、トリガー事象を満たす条件が満たされているということを決定するには、車両がホテル3131のロケーションの付近に位置しているという表示で十分であり得るからである。知覚システムによって処理されたセンサシステムからのセンサデータなどのその他のデータが使用されて、車両100の周囲の環境におけるオブジェクト(たとえば、ホテルの看板、ホテルの建物、道路標識、ロードマーキングなど)が、車両100がホテルにいることと整合しているということを決定することが可能である。
別の例として、トリガー事象は、車両100および/または搭乗者のコンピューティングデバイス3122が互いに対してワイヤレスに3123通信および/または検知を行って、車両100が移送することを割り当てられている搭乗者3122にコンピューティングデバイス3122が関連付けられているということをワイヤレス通信3123が確認している旨を示すアクセスクレデンシャルもしくは所定のコードのやり取りまたは信号のハンドシェイクなどのトリガー事象を示す情報を決定することを含むことができる。
例3100においては、選択された光エミッタ12025によって放射される光パターンは、車両100を、搭乗者3121の移送ニーズにサービス提供するために派遣された車両であると識別するために提示されると搭乗者3121が予想するイメージ(たとえば、ウインクしているイメージ3101)に関連付けられることが可能である。選択された光エミッタ12025上にその他の情報が提示されることも可能であり、ウインクしているイメージ3101は、提示されることが可能である情報の非限定的な例である。
搭乗者3121は、搭乗者3121に関連付けられている搭乗者プロフィールまたはその他のデータとともに格納されている、またはその搭乗者プロフィールまたはその他のデータにその他の形で関連付けられている光パターン3161を有することができる。いくつかの例においては、搭乗者3121は、光エミッタ1202のうちの1つまたは複数によって表示されることになる好ましいイメージもしくはその他の情報を作成すること、またはそのイメージもしくはその他の情報にアクセスすることが可能である。一例として、コンピューティングデバイス3122(たとえば、スマートフォンまたはタブレット)上で実行しているアプリケーションAPP3124が使用されて、光パターン3161を表すデータを作成すること、選択すること、またはそのデータにアクセスすることが可能である。コンピューティングデバイス3122は、光パターン3161を外部リソース3150(たとえば、クラウド、インターネット、データウェアハウスなど)へ通信すること3151が可能である。車両100は、外部リソース3150からの光パターン3161にアクセスすること3153(たとえば、光パターン3161にアクセスして、光パターン3161を車両100のメモリ内にローカルに格納すること)が可能である。
その他の例においては、音パターン3163を表すデータ(たとえば、デジタルオーディオファイル)が選択されて、ラウドスピーカー(たとえば、図8のスピーカー829)を介した音パターン3163の再生など、車両100のオーディオ機能を使用して聴覚的に提示されること3103が可能である。音パターン3163を表すデータは、光パターン3161を表すデータに関して上述されているのと同様の様式で作成されアクセスされることが可能である。
例3150においては、車両100の反対側の側部が示されている。車両100の側部、端部、およびその他のロケーションにおける光エミッタは、第1の部分および第2の部分、または車両100におけるその他の基準ポイント(たとえば、100r)に対して対称に配置されることが可能である。車両100の反対側の側部における選択された光エミッタ1202sは、例3100を参照して上述されたように、光パターン3161を示す光を放射することができる。音パターン3163を示す音が、車両100の他方の側部において聴覚的に提示されること3103も可能である。一例として、音パターン3163を表すデータは、「空港までの車が参りました。ご乗車ください!」というメッセージを含むことができる。車両100は、車両100の両方の側部に配置されているドアを含むことができ、車両の両方の側部における光パターンおよび/または音パターンの提示は、車両100のどちらの側部にもいる可能性がある搭乗者に対して、彼らの車両100が到着して、彼らへ割り当てられた車両であることを明らかにしているということを(たとえば、視覚的におよび/または聴覚的に)知らせるように構成されることが可能である。
光パターン3161および音パターン3163は、車両100によって提示されることが可能であるコンテンツの非限定的な例である。いくつかの例においては、コンテンツは、搭乗者などによって作成または選択されることが可能である。APP3124は、コンテンツ作成および/またはコンテンツ選択を実施するように構成されることが可能である。光エミッタ1202は、走行の方向性を伝達すること、および/または自律車両100に関連付けられている情報を伝達することを含むがそれらには限定されない1つまたは複数の機能を実施するように選択されることが可能である。その他の例においては、運転操作中に(たとえば、車両が軌道を進行している間に)、光エミッタ1202が選択されて視覚的アラートを実施することが可能である。
図32は、自律車両100における光エミッタ配置の一例3200を示している。例3200においては、光エミッタ1202が、たとえば、車両100のルーフ100u上に(たとえば、上から見る人に情報および/または走行の方向性を伝達するために)配置されることが可能であり、車両100のホイール852上に(たとえば、ハブキャップまたはホイールカバー上に)配置されることが可能であり、光学的に透過的な構造3221、3223の後ろに(たとえば、車両100のウィンドウの後ろに)配置されることが可能である。例3200において示されている光エミッタ1202は、車両100上にその他の光エミッタ1202(図示せず)に対して対称に配置されることが可能である。光エミッタ1202のうちの1つまたは複数は、たとえば、軌道Tavに関連付けられている方向に自律車両100が移動していることを、動き、ストロボ、またはその他の形で視覚的に伝達する矢印3251のパターンを有している光を放射することができる。矢印3251は、静的であることが可能であり、または動的であること(たとえば、走行の方向において光エミッタ1202全体にわたってストロボされること)が可能である。
図33は、自律車両における光エミッタ配置の一例3300を示している。例3300においては、光エミッタ1202が、車両100と結合されているホイールウェルカバー3350上に配置されることが可能である。例3300において示されている光エミッタ1202は、車両100上にその他の光エミッタ1202(図示せず)に対して対称に配置されることが可能である。ホイールウェルカバー3350は、車両100から取り外し可能であるように構成されることが可能である。車両100の運転していない操作中に(たとえば、搭乗者を乗せるかまたは降ろすために停止した場合に)、車両100におけるホイールウェルカバー3350および/またはその他のロケーション上の光エミッタ1202は、カーテシ照明を提供すること(たとえば、夜間または悪天候における乗り降りのために地面または車両100の周囲のエリアを照らすことなど)を行うように構成されることが可能である。それぞれの光エミッタ1202は、いくつかの発光素子E(たとえば、図24のE1~En)を含むことができ、それぞれの素子Eは、たとえば、放射される光の強度、放射される光の色、および放射される光の持続時間をコントロールするために(たとえば、図24のドライバ2430によって)個々にアドレス可能である。たとえば、それぞれの素子Eは、行および列アドレスによって定義される光エミッタ1202内の特定のアドレスを有することができる。例3300においては、光エミッタ1202内の暗くされている素子Eが、自律車両100の軌道Tavに沿って向けられている矢印3351のイメージを使用して走行の方向を視覚的に伝達することができる。矢印3351は、静的であることが可能であり、または動的であること(たとえば、走行の方向において光エミッタ1202全体にわたってストロボされること)が可能である。
それぞれの光エミッタ1202は、1つまたは複数のパーティションまたは部分へと区分されることが可能であり、それぞれのパーティションにおける素子Eは、個々にアドレス可能である。サブセクションおよび/またはサブパターン(たとえば、図23の1202a~1202c)を表すデータが、1つまたは複数のパーティションにおけるエミッタEに適用されることが可能である。光パターンを表すデータ、指向性の光パターンを表すデータ、または両方が、光エミッタ1202の1つまたは複数の発光素子Eを駆動するように構成されているドライバによって受信されるデータを生成するためにデコーダによってデコードされることが可能であるデータを有している1つまたは複数のデータフィールド(たとえば、図24の2402~2414)を含むことができる。たとえば、光パターン3161を表すデータに関する(たとえば、ウインクしているイメージ3101に関する)イメージデータが、データフィールドのうちの1つの中に含まれることが可能である。別の例として、(たとえば、図25のデータストア2501からの)指向性の光パターンを表すデータが、走行の方向に関連付けられている光の色(たとえば、第1の方向に関してはオレンジ、第2の方向に関しては紫)に関するデータフィールドを含むことができる。指向性の光パターンを表すデータは、光エミッタ1202によって放射される光のストロボレートまたは動きの割合(たとえば、図27~図30において示されている走行の方向を示す矢印3351またはその他のイメージもしくはアイコンの動き)に関するデータフィールドを含むことができる。
前述の例は、理解の明確さの目的でいくらか詳細に記述されているが、上述のコンセプトの技術は、提供されている詳細には限定されない。上述のコンセプトの技術を実施する多くの代替方法がある。開示されている例は、例示的であり、限定的ではない。

Claims (10)

  1. 無人運転の自律車両の外部の環境における前記自律車両の軌道を表す軌道データを受信するステップと、
    前記環境におけるオブジェクトを感知するステップと、
    前記オブジェクトの位置、前記オブジェクトのオブジェクトタイプ、および前記オブジェクトのオブジェクト分類を含むオブジェクトデータを決定するステップと、
    前記オブジェクトデータに基づいて前記環境における前記オブジェクトの1つまたは複数の予測されるロケーションを決定するステップと、
    前記軌道データと、前記環境における前記オブジェクトの前記1つまたは複数の予測されるロケーションとに基づいて、予測される衝突ロケーションを決定するステップと、
    前記オブジェクトと前記予測される衝突ロケーションとの間での前記環境における第1のしきい値ロケーションを決定するステップと、
    前記オブジェクトと前記予測される衝突ロケーションとの間での前記環境における第2のしきい値ロケーションを決定するステップであって、前記第2のしきい値ロケーションは、前記第1のしきい値ロケーションよりも前記衝突ロケーションに近く、前記第1のしきい値ロケーションと前記第2のしきい値ロケーションとの構成は、前記オブジェクトの軌道に関する分析に基づく、ステップと、
    前記環境における前記オブジェクトの更新された位置を感知するステップと、
    前記更新された位置が前記第1のしきい値ロケーションに相当していることに応答して、安全システムを使用して第1の安全アクションを実施するステップと、
    前記更新された位置が前記第2のしきい値ロケーションに相当していることに応答して、前記安全システムを使用して第2の安全アクションを実施するステップと
    を備えることを特徴とする方法。
  2. 前記安全システムは、音響ビームステアリングアレイを備え、前記第1の安全アクションは、前記自律車両の前記軌道に対して第1の角度で第1のオーディオアラートを放射するステップを含み、前記第2の安全アクションは、前記自律車両の前記軌道に対して第2の角度で第2のオーディオアラートを放射するステップを含むことを特徴とする請求項1に記載の方法。
  3. 前記安全システムは、光エミッタを備え、前記第1の安全アクションは、第1の光パターンを放射するステップを含み、前記第2の安全アクションは、第2の光パターンを放射するステップを含むことを特徴とする請求項1または2に記載の方法。
  4. 前記軌道から前記自律車両を操縦する際に使用するための回避軌道を送信するステップをさらに備えることを特徴とする請求項1、2、または3のいずれか一項に記載の方法。
  5. 前記第1の安全アクションは第1の緊急性を有し、前記第2の安全アクションは第2の緊急性を有することを特徴とする請求項1、2、3、または4のいずれか一項に記載の方法。
  6. 車道上を自律的に運転するように構成されている自律車両であって、前記自律車両の周囲の環境におけるオブジェクトを感知するための複数のセンサを有する、前記自律車両と、
    前記自律車両に通信可能に結合されて、前記複数のセンサからのデータを受信し、前記自律車両のコンポーネントをコントロールするための命令を送信するためのコンピューティングシステムであって、
    前記自律車両の軌道を決定し、
    前記オブジェクトの第1のロケーションおよび前記オブジェクトのタイプを決定し、
    前記オブジェクトの前記第1のロケーションおよび前記オブジェクトの前記タイプに基づいて、前記オブジェクトが走行すると予測される領域を含む予測される領域を決定し、
    前記予測される領域内の第1のしきい値境界および前記予測される領域内の第2のしきい値境界を決定し、前記第1のしきい値境界と前記第2のしきい値境界との構成は、前記オブジェクトの軌道に関する分析に基づき、
    前記オブジェクトの更新されたロケーションが前記第1のしきい値境界と一致するという決定に基づいて、第1の緊急性を有する第1のアラートを放射することを前記自律車両に行わせ、
    前記オブジェクトの前記更新されたロケーションが前記第2のしきい値境界と一致するという決定に基づいて、第2の緊急性を有する第2のアラートを放射することを前記自律車両に行わせるようにプログラムされている、
    前記コンピューティングシステムと
    を備えたことを特徴とするシステム。
  7. 前記コンピューティングシステムは、前記自律車両と前記オブジェクトとの予測される衝突ロケーションを決定するようにさらにプログラムされ、および前記第1のしきい値境界は、前記第2のしきい値境界と比べて前記予測される衝突ロケーションから比較的遠いことを特徴とする請求項6に記載のシステム。
  8. 前記コンピューティングシステムは、前記オブジェクトの前記更新されたロケーションが前記第2のしきい値境界と一致するという決定に基づいて前記自律車両の安全システムをアクティブ化するための命令を生成するようにさらにプログラムされていることを特徴とする請求項6または7に記載のシステム。
  9. 前記自律車両は、音響安全システムをさらに含み、前記第1のアラートは、前記音響安全システムによって放射される第1のオーディオアラートを含み、前記第2のアラートは、前記音響安全システムによって放射される第2のオーディオアラートを含むことを特徴とする請求項6、7、または8のいずれか一項に記載のシステム。
  10. 前記自律車両は、光エミッタをさらに含み、前記第1のアラートは、前記光エミッタによって放射される第1の放射される光パターンを含み、前記第2のアラートは、前記光エミッタによって放射される第2の放射される光パターンを含むことを特徴とする請求項6、7、8または9のいずれか一項に記載のシステム。
JP2018543267A 2015-11-04 2016-11-02 自律車両の方向性を示すためのアクティブ化照明を構成するシステム Active JP7071271B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022076675A JP2022119791A (ja) 2015-11-04 2022-05-06 自律車両の方向性を示すためのアクティブ化照明を構成するシステム

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US14/932,962 2015-11-04
US14/932,948 2015-11-04
US14/756,994 US9701239B2 (en) 2015-11-04 2015-11-04 System of configuring active lighting to indicate directionality of an autonomous vehicle
US14/932,962 US9630619B1 (en) 2015-11-04 2015-11-04 Robotic vehicle active safety systems and methods
US14/932,948 US9804599B2 (en) 2015-11-04 2015-11-04 Active lighting control for communicating a state of an autonomous vehicle to entities in a surrounding environment
US14/756,994 2015-11-04
PCT/US2016/060183 WO2017079349A1 (en) 2015-11-04 2016-11-02 System for implementing an active safety system in an autonomous vehicle

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022076675A Division JP2022119791A (ja) 2015-11-04 2022-05-06 自律車両の方向性を示すためのアクティブ化照明を構成するシステム

Publications (3)

Publication Number Publication Date
JP2018536955A JP2018536955A (ja) 2018-12-13
JP2018536955A5 JP2018536955A5 (ja) 2019-12-19
JP7071271B2 true JP7071271B2 (ja) 2022-05-18

Family

ID=58638193

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018543267A Active JP7071271B2 (ja) 2015-11-04 2016-11-02 自律車両の方向性を示すためのアクティブ化照明を構成するシステム
JP2022076675A Pending JP2022119791A (ja) 2015-11-04 2022-05-06 自律車両の方向性を示すためのアクティブ化照明を構成するシステム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022076675A Pending JP2022119791A (ja) 2015-11-04 2022-05-06 自律車両の方向性を示すためのアクティブ化照明を構成するシステム

Country Status (4)

Country Link
US (2) US9804599B2 (ja)
EP (1) EP3371740A1 (ja)
JP (2) JP7071271B2 (ja)
CN (2) CN114801972A (ja)

Families Citing this family (148)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6174516B2 (ja) * 2014-04-24 2017-08-02 本田技研工業株式会社 衝突回避支援装置、衝突回避支援方法、及びプログラム
CN107004361B (zh) * 2014-12-09 2020-03-27 三菱电机株式会社 碰撞风险计算装置、碰撞风险显示装置以及车体控制装置
US9804599B2 (en) 2015-11-04 2017-10-31 Zoox, Inc. Active lighting control for communicating a state of an autonomous vehicle to entities in a surrounding environment
US9494940B1 (en) 2015-11-04 2016-11-15 Zoox, Inc. Quadrant configuration of robotic vehicles
US9878664B2 (en) 2015-11-04 2018-01-30 Zoox, Inc. Method for robotic vehicle communication with an external environment via acoustic beam forming
US9507346B1 (en) 2015-11-04 2016-11-29 Zoox, Inc. Teleoperation system and method for trajectory modification of autonomous vehicles
US9432929B1 (en) 2015-12-08 2016-08-30 Uber Technologies, Inc. Communication configuration system for a fleet of automated vehicles
US9603158B1 (en) 2015-12-08 2017-03-21 Uber Technologies, Inc. Optimizing communication for automated vehicles
US10036642B2 (en) 2015-12-08 2018-07-31 Uber Technologies, Inc. Automated vehicle communications system
US10243604B2 (en) 2015-12-08 2019-03-26 Uber Technologies, Inc. Autonomous vehicle mesh networking configuration
US10050760B2 (en) 2015-12-08 2018-08-14 Uber Technologies, Inc. Backend communications system for a fleet of autonomous vehicles
CN108431549B (zh) * 2016-01-05 2020-09-04 御眼视觉技术有限公司 具有施加的约束的经训练的系统
US10328949B2 (en) * 2016-01-28 2019-06-25 Toyota Motor Engineering & Manufacturing North America, Inc. Sensor blind spot indication for vehicles
US9707961B1 (en) * 2016-01-29 2017-07-18 Ford Global Technologies, Llc Tracking objects within a dynamic environment for improved localization
US9902311B2 (en) * 2016-02-22 2018-02-27 Uber Technologies, Inc. Lighting device for a vehicle
US9969326B2 (en) 2016-02-22 2018-05-15 Uber Technologies, Inc. Intention signaling for an autonomous vehicle
US10665140B1 (en) * 2016-06-22 2020-05-26 Waymo Llc Various interior and exterior features for autonomous vehicles
US20180052470A1 (en) * 2016-08-18 2018-02-22 GM Global Technology Operations LLC Obstacle Avoidance Co-Pilot For Autonomous Vehicles
US10543852B2 (en) * 2016-08-20 2020-01-28 Toyota Motor Engineering & Manufacturing North America, Inc. Environmental driver comfort feedback for autonomous vehicle
CN109564723B (zh) * 2016-08-26 2022-11-08 索尼公司 移动体控制装置、移动体控制方法以及移动体
DE102016216335B4 (de) * 2016-08-30 2020-12-10 Continental Automotive Gmbh System und Verfahren zur Analyse von Fahrtrajektorien für einen Streckenabschnitt
US10502574B2 (en) * 2016-09-20 2019-12-10 Waymo Llc Devices and methods for a sensor platform of a vehicle
JP6712936B2 (ja) * 2016-09-23 2020-06-24 株式会社小松製作所 作業車両の管理システム及び作業車両の管理方法
FR3056500B1 (fr) * 2016-09-28 2020-09-04 Valeo Vision Systeme d'eclairage interieur pour vehicule automobile autonome
US10515390B2 (en) * 2016-11-21 2019-12-24 Nio Usa, Inc. Method and system for data optimization
KR102441060B1 (ko) * 2016-12-13 2022-09-06 현대자동차주식회사 보행자 추돌 사고 방지 장치, 그를 포함한 시스템 및 그 방법
US10118627B2 (en) * 2016-12-20 2018-11-06 Uber Technologies, Inc. Vehicle controls based on the measured weight of freight
US10940795B2 (en) * 2017-01-18 2021-03-09 Baidu Usa Llc Method for keeping distance between an autonomous driving vehicle and a following vehicle using a braking light
US10392011B2 (en) * 2017-01-20 2019-08-27 Ford Global Technologies, Llc Vehicle occupancy indication and utilization thereof
DE102017201289A1 (de) * 2017-01-26 2018-07-26 Bayerische Motoren Werke Aktiengesellschaft Darstellen eines Soll-Fahrzeugöffnungsvorfelds eines automatisierten Fahrzeugs
JP6711294B2 (ja) * 2017-02-03 2020-06-17 トヨタ自動車株式会社 運転支援装置
US10768630B2 (en) * 2017-02-09 2020-09-08 International Business Machines Corporation Human imperceptible signals
US10803683B2 (en) * 2017-02-14 2020-10-13 Kabushiki Kaisha Toshiba Information processing device, information processing method, computer program product, and moving object
US10293818B2 (en) 2017-03-07 2019-05-21 Uber Technologies, Inc. Teleassistance data prioritization for self-driving vehicles
US10202126B2 (en) 2017-03-07 2019-02-12 Uber Technologies, Inc. Teleassistance data encoding for self-driving vehicles
US10315648B2 (en) * 2017-03-10 2019-06-11 Toyota Motor Engineering & Manufacturing North America, Inc. Personalized active safety systems
US10338594B2 (en) * 2017-03-13 2019-07-02 Nio Usa, Inc. Navigation of autonomous vehicles to enhance safety under one or more fault conditions
FR3064224B1 (fr) * 2017-03-23 2021-06-04 Peugeot Citroen Automobiles Sa Dispositif de signalisation de phase(s) de conduite d’un vehicule autonome
DE102017207436B4 (de) * 2017-05-03 2019-03-14 Volkswagen Aktiengesellschaft Verfahren zum Betreiben einer Beleuchtung eines Kraftfahrzeugs sowie Kraftfahrzeug zur Durchführung des Verfahrens
US10423162B2 (en) 2017-05-08 2019-09-24 Nio Usa, Inc. Autonomous vehicle logic to identify permissioned parking relative to multiple classes of restricted parking
US10507813B2 (en) * 2017-05-10 2019-12-17 Baidu Usa Llc Method and system for automated vehicle emergency light control of an autonomous driving vehicle
US10438074B2 (en) * 2017-06-14 2019-10-08 Baidu Usa Llc Method and system for controlling door locks of autonomous driving vehicles based on lane information
US10279734B2 (en) * 2017-06-16 2019-05-07 GM Global Technology Operations LLC Systems and methods for external warning by an autonomous vehicle
US10710633B2 (en) 2017-07-14 2020-07-14 Nio Usa, Inc. Control of complex parking maneuvers and autonomous fuel replenishment of driverless vehicles
US10614715B2 (en) * 2017-07-14 2020-04-07 Uatc, Llc Systems and methods for communicating autonomous vehicle confidence levels
US10369974B2 (en) 2017-07-14 2019-08-06 Nio Usa, Inc. Control and coordination of driverless fuel replenishment for autonomous vehicles
US10493622B2 (en) 2017-07-14 2019-12-03 Uatc, Llc Systems and methods for communicating future vehicle actions to be performed by an autonomous vehicle
US10262528B2 (en) 2017-07-21 2019-04-16 State Farm Mutual Automobile Insurance Company Autonomous vehicle mode alert system for bystanders
US11126191B2 (en) * 2017-08-07 2021-09-21 Panasonic Intellectual Property Corporation Of America Control device and control method
US10216189B1 (en) 2017-08-23 2019-02-26 Uber Technologies, Inc. Systems and methods for prioritizing object prediction for autonomous vehicles
JP6953922B2 (ja) * 2017-09-06 2021-10-27 株式会社デンソー 車両の運転支援装置および車両の運転支援方法
US20190079525A1 (en) * 2017-09-11 2019-03-14 Qualcomm Incorporated Autonomous vehicle support for secondary vehicle
EP3459827B1 (en) * 2017-09-25 2022-07-27 Volvo Car Corporation Method and system for automated parking of a vehicle
US10782138B2 (en) * 2017-10-06 2020-09-22 Here Global B.V. Method, apparatus, and computer program product for pedestrian behavior profile generation
US11756416B2 (en) 2017-10-19 2023-09-12 Ford Global Technologies, Llc Vehicle to vehicle and infrastructure communication and pedestrian detection system
US20190176684A1 (en) * 2017-12-07 2019-06-13 Uber Technologies, Inc. Location Based Vehicle Headlight Control
US10156850B1 (en) * 2017-12-08 2018-12-18 Uber Technologies, Inc. Object motion prediction and vehicle control systems and methods for autonomous vehicles
US10533860B2 (en) * 2017-12-19 2020-01-14 Intel Corporation Light pattern based vehicle location determination method and apparatus
JP6970612B2 (ja) * 2017-12-28 2021-11-24 株式会社小糸製作所 車両用照明システム及び車両
US11104331B2 (en) * 2017-12-28 2021-08-31 Intel Corporation Autonomous techniques for vehicles with balance input
US10569702B2 (en) 2018-01-08 2020-02-25 Valeo North America, Inc. Vehicle status indicator lamp
US11022971B2 (en) 2018-01-16 2021-06-01 Nio Usa, Inc. Event data recordation to identify and resolve anomalies associated with control of driverless vehicles
US10384600B1 (en) * 2018-01-29 2019-08-20 GM Global Technology Operations LLC Autonomous vehicle passenger identification and guidance system
JP6994982B2 (ja) * 2018-02-27 2022-01-14 本田技研工業株式会社 車両制御システム、車両制御方法、およびプログラム
US10576881B2 (en) * 2018-03-05 2020-03-03 Ford Global Technologies, Llc Autonomous vehicle B-pillar proximity warning system
US11827274B2 (en) * 2018-03-09 2023-11-28 Ford Global Technologies, Llc Turn path visualization to improve spatial and situational awareness in turn maneuvers
CN108437889B (zh) * 2018-03-09 2023-07-28 南京工程学院 一种具有多种警示功能的发声装置及其控制方法
JP7101001B2 (ja) * 2018-03-14 2022-07-14 本田技研工業株式会社 車両制御装置、車両制御方法、およびプログラム
US20180215377A1 (en) * 2018-03-29 2018-08-02 GM Global Technology Operations LLC Bicycle and motorcycle protection behaviors
US11625036B2 (en) 2018-04-09 2023-04-11 SafeAl, Inc. User interface for presenting decisions
WO2019199645A1 (en) * 2018-04-09 2019-10-17 Sense Photonics, Inc. Automatic gain control for lidar for autonomous vehicles
US11169536B2 (en) 2018-04-09 2021-11-09 SafeAI, Inc. Analysis of scenarios for controlling vehicle operations
US11561541B2 (en) * 2018-04-09 2023-01-24 SafeAI, Inc. Dynamically controlling sensor behavior
US11467590B2 (en) 2018-04-09 2022-10-11 SafeAI, Inc. Techniques for considering uncertainty in use of artificial intelligence models
US11565693B2 (en) * 2018-05-03 2023-01-31 Honda Motor Co., Ltd. Systems and methods for distracted driving detection
US10860025B2 (en) * 2018-05-15 2020-12-08 Toyota Research Institute, Inc. Modeling graph of interactions between agents
JP6988698B2 (ja) * 2018-05-31 2022-01-05 トヨタ自動車株式会社 物体認識装置
US10900444B2 (en) * 2018-06-19 2021-01-26 Ford Global Technologies, Llc Methods and system for conducting an engine system diagnostic based on ambient noise
SE542680C2 (en) * 2018-07-10 2020-06-23 Scania Cv Ab A method for controlling a vehicle lighting device, a control device, a vehicle lighting device, a vehicle, a computer program and a computer-readable medium
US10909866B2 (en) * 2018-07-20 2021-02-02 Cybernet Systems Corp. Autonomous transportation system and methods
CN108922193B (zh) * 2018-08-03 2019-06-04 北京航空航天大学 一种基于浮动车轨迹数据的交叉口信号周期估计方法
CN108986545A (zh) * 2018-08-16 2018-12-11 武汉理工大学 基于v2v的个性化驾驶诱导系统
US10857938B2 (en) * 2018-08-27 2020-12-08 GM Global Technology Operations LLC Autonomous vehicle identification
US11258987B2 (en) * 2018-09-21 2022-02-22 Microsoft Technology Licensing, Llc Anti-collision and motion control systems and methods
US10627819B1 (en) * 2018-10-11 2020-04-21 Pony Ai Inc. On-site notification from autonomous vehicle for traffic safety
EP3640089A1 (de) * 2018-10-15 2020-04-22 ZKW Group GmbH Kraftfahrzeug
US11345277B2 (en) * 2018-10-16 2022-05-31 GM Global Technology Operations LLC Autonomous vehicle intent signaling
CN109345829B (zh) * 2018-10-29 2021-11-23 百度在线网络技术(北京)有限公司 无人车的监控方法、装置、设备及存储介质
US11048260B2 (en) 2018-11-02 2021-06-29 Zoox, Inc. Adaptive scaling in trajectory generation
US11077878B2 (en) 2018-11-02 2021-08-03 Zoox, Inc. Dynamic lane biasing
US11208096B2 (en) 2018-11-02 2021-12-28 Zoox, Inc. Cost scaling in trajectory generation
US11110918B2 (en) 2018-11-02 2021-09-07 Zoox, Inc. Dynamic collision checking
US11110922B2 (en) * 2018-11-05 2021-09-07 Zoox, Inc. Vehicle trajectory modification for following
US11124184B2 (en) * 2018-11-09 2021-09-21 Toyota Motor North America, Inc. Real-time vehicle accident prediction, warning, and prevention
US11124185B2 (en) * 2018-11-13 2021-09-21 Zoox, Inc. Perception collision avoidance
US11027648B2 (en) 2018-11-16 2021-06-08 Zoox, Inc. Dynamic sound emission for vehicles
US11048253B2 (en) 2018-11-21 2021-06-29 Waymo Llc Agent prioritization for autonomous vehicles
JP7147504B2 (ja) * 2018-11-20 2022-10-05 トヨタ自動車株式会社 車両の制御装置及び乗客輸送システム
CN109686124A (zh) * 2018-11-28 2019-04-26 法法汽车(中国)有限公司 防碰撞提醒方法及系统、存储介质和电子设备
US11104332B2 (en) 2018-12-12 2021-08-31 Zoox, Inc. Collision avoidance system with trajectory validation
DE102018222611A1 (de) * 2018-12-20 2020-06-25 Robert Bosch Gmbh Verfahren zum Betreiben eines automatisierten Fahrzeugs
US11782158B2 (en) * 2018-12-21 2023-10-10 Waymo Llc Multi-stage object heading estimation
JP2020107134A (ja) * 2018-12-27 2020-07-09 豊田合成株式会社 車両用通信システム、車載発光装置、情報取得提供装置、及び車載装置
CN109572709B (zh) * 2018-12-29 2021-05-18 联想(北京)有限公司 自动驾驶的保护方法以及自动驾驶的交通工具
US11099266B2 (en) * 2019-01-11 2021-08-24 International Business Machines Corporation Trajectory based threat alerting with friendly device augmentation
CN109859527A (zh) * 2019-01-30 2019-06-07 杭州鸿泉物联网技术股份有限公司 一种非机动车转弯预警方法及装置
DE102019201666A1 (de) * 2019-02-08 2020-08-13 Ford Global Technologies, Llc Verfahren zum Betrieb eines selbstfahrenden Kraftfahrzeugs
DE102019202107B3 (de) * 2019-02-18 2020-04-23 Zf Friedrichshafen Ag Kollisionsvermeidung einer autonomen Landmaschine
CN109814573B (zh) * 2019-02-21 2022-08-02 百度在线网络技术(北京)有限公司 无人驾驶控制方法、装置、设备及计算机可读存储介质
US11635764B2 (en) * 2019-02-22 2023-04-25 Uatc, Llc. Motion prediction for autonomous devices
US10867402B2 (en) 2019-03-01 2020-12-15 Here Global B.V. System and method for determining distance to object on road
US11325523B2 (en) * 2019-04-02 2022-05-10 Pony Ai Inc. Lighting element control for an autonomous vehicle
EP3730374A1 (en) * 2019-04-26 2020-10-28 Tusimple, Inc. Auditory assistant module for autonomous vehicles
US11188094B2 (en) 2019-04-30 2021-11-30 At&T Intellectual Property I, L.P. Autonomous vehicle signaling system
US11100339B2 (en) * 2019-05-20 2021-08-24 Zoox, Inc. Closed lane detection
US11345276B2 (en) 2019-06-17 2022-05-31 Ahmed Kareem Vehicle status indicator
WO2020262718A1 (ko) * 2019-06-25 2020-12-30 엘지전자 주식회사 자율주행시스템에서 원격주행을 위한 센싱정보 전송방법 및 이를 위한 장치
US11427146B2 (en) * 2019-07-10 2022-08-30 Pony Ai Inc. Collision protection
DE102019119093B4 (de) * 2019-07-15 2023-05-04 Deutsche Post Ag Auslösen zumindest eines Aufprallkissens eines unbemannten Fahrzeugs
US11024162B2 (en) 2019-08-14 2021-06-01 At&T Intellectual Property I, L.P. Traffic management system
USD980854S1 (en) * 2019-08-16 2023-03-14 Lyft, Inc. Display screen or portion thereof with graphical user interface
WO2021050745A1 (en) * 2019-09-10 2021-03-18 Zoox, Inc. Dynamic collision checking
US11242972B2 (en) 2019-09-11 2022-02-08 Zoox, Inc. Vehicular lighting using passive and/or active optics
US11608972B2 (en) * 2019-09-11 2023-03-21 Zoox, Inc. Vehicular lighting using passive and/or active optics
US10766412B1 (en) 2019-09-12 2020-09-08 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for notifying other road users of a change in vehicle speed
US11958183B2 (en) 2019-09-19 2024-04-16 The Research Foundation For The State University Of New York Negotiation-based human-robot collaboration via augmented reality
US11237241B2 (en) * 2019-10-10 2022-02-01 Uatc, Llc Microphone array for sound source detection and location
US11322019B2 (en) * 2019-10-23 2022-05-03 Zoox, Inc. Emergency vehicle detection
US11966852B2 (en) * 2019-12-11 2024-04-23 Shanghai United Imaging Intelligence Co., Ltd. Systems and methods for situation awareness
US11450205B2 (en) 2019-12-31 2022-09-20 Zoox, Inc. Emergency vehicle detection and response
US11830302B2 (en) 2020-03-24 2023-11-28 Uatc, Llc Computer system for utilizing ultrasonic signals to implement operations for autonomous vehicles
WO2021237212A1 (en) * 2020-05-22 2021-11-25 Optimus Ride, Inc. Display system and method
US11465619B2 (en) 2020-05-27 2022-10-11 Zoox, Inc. Vehicle collision avoidance based on perturbed object trajectories
US11603038B2 (en) * 2020-06-18 2023-03-14 Custom Dynamics Llc Smart rear lighting system
US11325529B2 (en) * 2020-06-18 2022-05-10 Baidu Usa Llc Early brake light warning system for autonomous driving vehicle
US11926343B2 (en) * 2020-07-20 2024-03-12 Tusimple, Inc. Classification and prioritization of objects for autonomous driving
US11560083B2 (en) * 2020-08-20 2023-01-24 Pony Ai Inc. Autonomous headlamp encapsulated with camera and artificial intelligence processor to adjust illumination
JP7310790B2 (ja) * 2020-12-22 2023-07-19 トヨタ自動車株式会社 報知装置
JP2022148124A (ja) * 2021-03-24 2022-10-06 本田技研工業株式会社 車両用シートベルト装置、張力制御方法、およびプログラム
CN113212292A (zh) * 2021-05-13 2021-08-06 蔚来汽车科技(安徽)有限公司 车辆的控制方法及装置、车载设备、车辆、介质
TWM618216U (zh) * 2021-06-01 2021-10-11 江明岳 車輛前方障礙警示系統
DE102021208422A1 (de) * 2021-08-04 2023-02-09 Zf Friedrichshafen Ag Verfahren, Computerprogramm, eingebettetes System und Fahrsystem zur Kommunikation eines Fahrzeuges mit Verkehrsteilnehmern
US11724696B2 (en) * 2021-09-08 2023-08-15 GM Global Technology Operations LLC System and method of automatedly changing lanes for a vehicle
EP4163897A1 (en) * 2021-10-08 2023-04-12 Volvo Truck Corporation A method and device for alerting the presence of combination vehicles
CN114283619A (zh) * 2021-12-25 2022-04-05 重庆长安汽车股份有限公司 一种基于v2x的车辆避障系统、平台构架、方法及车辆
US20240001825A1 (en) * 2022-07-01 2024-01-04 GM Global Technology Operations LLC Gyroscopic seat system in a vehicle environment for occupant safety
EP4361997A1 (en) * 2022-10-28 2024-05-01 Volvo Car Corporation Method for controlling a vehicle, data processing apparatus, vehicle, computer program, and computer-readable storage medium
CN117173257B (zh) * 2023-11-02 2024-05-24 安徽蔚来智驾科技有限公司 3d目标检测及其标定参数增强方法、电子设备、介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006298245A (ja) 2005-04-22 2006-11-02 Toyota Motor Corp 車両の警報装置および車両
JP2008143510A (ja) 2006-11-17 2008-06-26 Toyota Central R&D Labs Inc 注意喚起照射装置
JP2015174541A (ja) 2014-03-14 2015-10-05 株式会社デンソー 車載装置

Family Cites Families (176)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4556862A (en) 1983-05-16 1985-12-03 Meinershagen Charles I Vehicle direction signal and slow warning system employing moving pattern of simultaneously ON lamps
US5193141A (en) 1990-11-19 1993-03-09 Zwern Arthur L Vehicular voice storage, playback, and broadcasting device
US5558370A (en) 1995-03-30 1996-09-24 Automotive Systems Laboratory, Inc. Electronic seat belt tensioning system
US5646613A (en) 1996-05-20 1997-07-08 Cho; Myungeun System for minimizing automobile collision damage
US7979172B2 (en) 1997-10-22 2011-07-12 Intelligent Technologies International, Inc. Autonomous vehicle travel control systems and methods
DE19750338A1 (de) 1997-11-13 1999-05-20 Siemens Ag Fahrtregelungssystem für Fahrzeuge, insbesondere für Kraftfahrzeuge
US7426429B2 (en) 1998-04-27 2008-09-16 Joseph A Tabe Smart seatbelt control system
US6264353B1 (en) 1998-11-23 2001-07-24 Lear Automotive Dearborn, Inc. Exterior mirror with supplement turn signal
JP3865182B2 (ja) 1998-12-25 2007-01-10 タカタ株式会社 シートベルトシステム
US6728616B1 (en) 2000-10-20 2004-04-27 Joseph A. Tabe Smart seatbelt control system
US20020131608A1 (en) 2001-03-01 2002-09-19 William Lobb Method and system for providing digitally focused sound
JP2003048481A (ja) 2001-08-08 2003-02-18 Koito Mfg Co Ltd 車両用前照灯システム
US7106180B1 (en) 2001-08-30 2006-09-12 Frank Joseph Pompei Directional acoustic alerting system
JP4039109B2 (ja) * 2002-04-26 2008-01-30 トヨタ自動車株式会社 車両制御装置
US6746049B2 (en) 2002-07-24 2004-06-08 Visteon Global Technologies, Inc. Adaptive seat belt tensioning system
US20060064202A1 (en) 2002-08-26 2006-03-23 Sony Corporation Environment identification device, environment identification method, and robot device
CN100345711C (zh) * 2003-01-24 2007-10-31 本田技研工业株式会社 车辆的行驶安全装置
US7828104B2 (en) 2003-01-24 2010-11-09 Honda Motor Co., Ltd. Travel safety device for motor vehicle
US6910788B2 (en) 2003-06-24 2005-06-28 Bo T. Jones LED vehicle wheel well illumination device
US20070096447A1 (en) 2003-10-07 2007-05-03 Tabe Joseph A Smart seatbelt control system
US7447593B2 (en) 2004-03-26 2008-11-04 Raytheon Company System and method for adaptive path planning
US7499774B2 (en) 2004-10-22 2009-03-03 Irobot Corporation System and method for processing safety signals in an autonomous vehicle
JP4255906B2 (ja) * 2004-12-03 2009-04-22 富士通テン株式会社 運転支援装置
DE112005003266T5 (de) 2004-12-28 2008-09-04 Kabushiki Kaisha Toyota Chuo Kenkyusho Fahrzeugbewegungssteuerungsvorrichtung
US7644799B2 (en) 2005-02-10 2010-01-12 Friedman Research Corporation Vehicle safety control system
JP2006234494A (ja) 2005-02-23 2006-09-07 Aisin Seiki Co Ltd 物体認識装置
US20060207820A1 (en) 2005-03-20 2006-09-21 Hemant Joshi Active Vehile Shield
JP2007290423A (ja) 2006-04-21 2007-11-08 Toyota Motor Corp シートベルト装置
US20080033645A1 (en) 2006-08-03 2008-02-07 Jesse Sol Levinson Pobabilistic methods for mapping and localization in arbitrary outdoor environments
WO2008024639A2 (en) * 2006-08-11 2008-02-28 Donnelly Corporation Automatic headlamp control system
US7579942B2 (en) 2006-10-09 2009-08-25 Toyota Motor Engineering & Manufacturing North America, Inc. Extra-vehicular threat predictor
US8179281B2 (en) * 2006-10-13 2012-05-15 Continental Teves Ag & Co. Ohg Method and apparatus for identifying concealed objects in road traffic
US7797108B2 (en) * 2006-10-19 2010-09-14 Gm Global Technology Operations, Inc. Collision avoidance system and method of aiding rearward vehicular motion
JP2008168676A (ja) 2007-01-09 2008-07-24 Toyota Motor Corp 車両接近告知装置
US7865277B1 (en) 2007-05-07 2011-01-04 The United States Of America As Represented By The Secretary Of The Navy Obstacle avoidance system and method
US20080306666A1 (en) * 2007-06-05 2008-12-11 Gm Global Technology Operations, Inc. Method and apparatus for rear cross traffic collision avoidance
US7710248B2 (en) 2007-06-12 2010-05-04 Palo Alto Research Center Incorporated Human-machine-interface (HMI) customization based on collision assessments
US20080320421A1 (en) 2007-06-20 2008-12-25 Demaris David L Feature extraction that supports progressively refined search and classification of patterns in a semiconductor layout
KR20090001403A (ko) 2007-06-29 2009-01-08 엘지전자 주식회사 방송 수신이 가능한 텔레매틱스 단말기 및 방송 신호 처리방법
CN102037481A (zh) 2008-03-19 2011-04-27 苹果核网络股份有限公司 用于检测行为模式的方法及设备
US8548727B2 (en) 2008-05-02 2013-10-01 Honeywell International Inc. Cognitive aircraft hazard advisory system (CAHAS)
EP2291302A4 (en) 2008-05-06 2013-04-03 Jeff R Crandall SYSTEM AND METHOD FOR MINIMIZING PERSONAL INJURY IN VEHICLE COMPROMISE EVENTS
US8392064B2 (en) 2008-05-27 2013-03-05 The Board Of Trustees Of The Leland Stanford Junior University Systems, methods and devices for adaptive steering control of automotive vehicles
JP5345350B2 (ja) * 2008-07-30 2013-11-20 富士重工業株式会社 車両の運転支援装置
US8989972B2 (en) 2008-09-11 2015-03-24 Deere & Company Leader-follower fully-autonomous vehicle with operator on side
US8724829B2 (en) 2008-10-24 2014-05-13 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for coherence detection
US8126642B2 (en) * 2008-10-24 2012-02-28 Gray & Company, Inc. Control and systems for autonomously driven vehicles
JP5217950B2 (ja) 2008-11-20 2013-06-19 トヨタ自動車株式会社 運転支援装置
JP5251496B2 (ja) 2008-12-25 2013-07-31 アイシン・エィ・ダブリュ株式会社 自動変速機の油圧制御装置
US20110313665A1 (en) * 2009-03-04 2011-12-22 Adc Automotive Distance Control Systems Gmbh Method for Automatically Detecting a Driving Maneuver of a Motor Vehicle and a Driver Assistance System Comprising Said Method
JP2010228564A (ja) 2009-03-26 2010-10-14 Yamaha Corp 自動車
JP5210233B2 (ja) 2009-04-14 2013-06-12 日立オートモティブシステムズ株式会社 車両用外界認識装置及びそれを用いた車両システム
JP4962540B2 (ja) 2009-07-30 2012-06-27 株式会社デンソー 車両存在報知装置
CN102073040B (zh) 2009-11-20 2014-02-12 建兴电子科技股份有限公司 超音波感测器的控制方法
US20130246301A1 (en) 2009-12-04 2013-09-19 Uber Technologies, Inc. Providing user feedback for transport services through use of mobile devices
US9230292B2 (en) 2012-11-08 2016-01-05 Uber Technologies, Inc. Providing on-demand services through use of portable computing devices
WO2011089898A1 (ja) 2010-01-20 2011-07-28 パナソニック株式会社 変位推定方法、変位推定装置
US8559673B2 (en) 2010-01-22 2013-10-15 Google Inc. Traffic signal mapping and detection
JP5516454B2 (ja) 2010-02-23 2014-06-11 株式会社デンソー 警告音出力装置
US8655579B2 (en) 2010-03-16 2014-02-18 Toyota Jidosha Kabushiki Kaisha Driving assistance device
WO2011117989A1 (ja) 2010-03-25 2011-09-29 パイオニア株式会社 擬似音発生装置及び擬似音発生方法
US8031085B1 (en) 2010-04-15 2011-10-04 Deere & Company Context-based sound generation
US8260482B1 (en) 2010-04-28 2012-09-04 Google Inc. User interface for displaying internal state of autonomous driving system
JP2011248855A (ja) 2010-04-30 2011-12-08 Denso Corp 車両用衝突警報装置
US9014848B2 (en) 2010-05-20 2015-04-21 Irobot Corporation Mobile robot system
GB201009523D0 (en) 2010-06-07 2010-07-21 Capoco Design Ltd An autonomous vehicle
JP2011255830A (ja) 2010-06-11 2011-12-22 Sumitomo Electric Ind Ltd 車両接近報知装置
JP5381923B2 (ja) * 2010-07-23 2014-01-08 日産自動車株式会社 車両用制動支援装置及び車両用制動支援方法
US8509982B2 (en) 2010-10-05 2013-08-13 Google Inc. Zone driving
US9513630B2 (en) 2010-11-17 2016-12-06 General Electric Company Methods and systems for data communications
US20140358427A1 (en) 2010-12-13 2014-12-04 Google Inc. Enhancing driving navigation via passive drivers feedback
KR101277934B1 (ko) 2010-12-31 2013-06-27 대성전기공업 주식회사 차량 가상 음향 출력 장치 및 이의 제어 방법
US8929564B2 (en) 2011-03-03 2015-01-06 Microsoft Corporation Noise adaptive beamforming for microphone arrays
JP5670246B2 (ja) 2011-04-07 2015-02-18 本田技研工業株式会社 車体下部構造
US20120310465A1 (en) 2011-06-02 2012-12-06 Harman International Industries, Incorporated Vehicle nagivation system
DE102011104925A1 (de) 2011-06-18 2012-12-20 Daimler Ag Kraftfahrzeug mit einer Fahrerassistenzeinheit
WO2013011588A1 (ja) * 2011-07-21 2013-01-24 トヨタ自動車株式会社 車両用情報伝達装置
JP2013033104A (ja) 2011-08-01 2013-02-14 Densei:Kk 音響信号送出装置、音響信号送出方法、およびプログラム
EP2745261A1 (en) 2011-08-16 2014-06-25 Better Place GmbH Estimation and management of loads in electric vehicle networks
CN102390320B (zh) * 2011-08-22 2013-06-12 武汉理工大学 基于车载传感网络的车辆防撞预警系统及用途
DE102011081382A1 (de) * 2011-08-23 2013-02-28 Robert Bosch Gmbh Verfahren und Vorrichtung zum Ändern einer Lichtaussendung zumindest eines Scheinwerfers eines Fahrzeugs
US8583361B2 (en) 2011-08-24 2013-11-12 Modular Mining Systems, Inc. Guided maneuvering of a mining vehicle to a target destination
JP2013054702A (ja) 2011-09-06 2013-03-21 Takata Corp 車両接近情報通知装置、車両接近情報通知方法及びプログラム
DE102011112577A1 (de) 2011-09-08 2013-03-14 Continental Teves Ag & Co. Ohg Verfahren und Vorrichtung für ein Assistenzsystem in einem Fahrzeg zur Durchführung eines autonomen oder teilautonomen Fahrmanövers
EP2758905A4 (en) 2011-09-22 2015-07-29 Aethon Inc MONITORING, DIAGNOSTIC AND MONITORING TOOL FOR AUTONOMOUS MOBILE ROBOTS
US9718469B2 (en) 2011-10-03 2017-08-01 Toyota Jidosha Kabushiki Kaisha Vehicle driving assistance system
US20160189544A1 (en) 2011-11-16 2016-06-30 Autoconnect Holdings Llc Method and system for vehicle data collection regarding traffic
FR2984254B1 (fr) 2011-12-16 2016-07-01 Renault Sa Controle de vehicules autonomes
WO2013121961A1 (ja) * 2012-02-14 2013-08-22 日産自動車株式会社 走行制御装置及び走行制御方法
US8880272B1 (en) 2012-03-16 2014-11-04 Google Inc. Approach for estimating the geometry of roads and lanes by using vehicle trajectories
AU2012376428B2 (en) 2012-04-05 2015-06-25 Hitachi, Ltd. Map data creation device, autonomous movement system and autonomous movement control device
US20130268138A1 (en) 2012-04-05 2013-10-10 Caterpillar Inc. High Availability For Autonomous Machine Control System
JP5592441B2 (ja) * 2012-06-26 2014-09-17 本田技研工業株式会社 配光制御装置
US8849515B2 (en) 2012-07-24 2014-09-30 GM Global Technology Operations LLC Steering assist in driver initiated collision avoidance maneuver
US9255989B2 (en) 2012-07-24 2016-02-09 Toyota Motor Engineering & Manufacturing North America, Inc. Tracking on-road vehicles with sensors of different modalities
JP5696701B2 (ja) 2012-08-31 2015-04-08 株式会社デンソー 対歩行者報知装置
TW201413672A (zh) 2012-09-17 2014-04-01 Wistron Corp 警告裝置以及警告方法
US9196164B1 (en) 2012-09-27 2015-11-24 Google Inc. Pedestrian notifications
US9633564B2 (en) 2012-09-27 2017-04-25 Google Inc. Determining changes in a driving environment based on vehicle behavior
US9671233B2 (en) 2012-11-08 2017-06-06 Uber Technologies, Inc. Dynamically providing position information of a transit object to a computing device
US20140129302A1 (en) 2012-11-08 2014-05-08 Uber Technologies, Inc. Providing a confirmation interface for on-demand services through use of portable computing devices
USD743978S1 (en) 2012-11-08 2015-11-24 Uber Technologies, Inc. Display screen of a computing device with a computer-generated electronic panel for providing confirmation for a service request
DE102012022392B4 (de) 2012-11-15 2016-02-04 Audi Ag Verfahren und Vorrichtung zur Steuerung einer mit einem Sicherheitsgurt verbundenen Sicherheitsgurt-Vorrichtung eines Fahrzeugs mit einer vorausschauenden Kollisionserkennungseinheit
FR3000005B1 (fr) 2012-12-21 2015-10-09 Valeo Securite Habitacle Boitier de commande a distance d'un systeme de controle de manoeuvres de stationnement d'un vehicule, et procede associe
US20140188347A1 (en) 2012-12-31 2014-07-03 Joseph Akwo Tabe Smart supplemental restraint and occupant classification system
US9367065B2 (en) 2013-01-25 2016-06-14 Google Inc. Modifying behavior of autonomous vehicles based on sensor blind spots and limitations
US8948993B2 (en) 2013-03-08 2015-02-03 Richard Schulman Method and system for controlling the behavior of an occupant of a vehicle
US9395727B1 (en) 2013-03-22 2016-07-19 Google Inc. Single layer shared aperture beam forming network
US9342074B2 (en) 2013-04-05 2016-05-17 Google Inc. Systems and methods for transitioning control of an autonomous vehicle to a driver
US9141107B2 (en) 2013-04-10 2015-09-22 Google Inc. Mapping active and inactive construction zones for autonomous driving
US9025140B2 (en) 2013-05-07 2015-05-05 Google Inc. Methods and systems for detecting weather conditions including sunlight using vehicle onboard sensors
US9632210B2 (en) 2013-05-07 2017-04-25 Google Inc. Methods and systems for detecting weather conditions using vehicle onboard sensors
US8977007B1 (en) 2013-04-23 2015-03-10 Google Inc. Detecting a vehicle signal through image differencing and filtering
CN103258445B (zh) 2013-05-22 2015-12-23 严凯 车辆险情预警方法和预警系统
US9384443B2 (en) 2013-06-14 2016-07-05 Brain Corporation Robotic training apparatus and methods
US8825259B1 (en) 2013-06-21 2014-09-02 Google Inc. Detecting lane closures and lane shifts by an autonomous vehicle
WO2014202258A1 (en) 2013-06-21 2014-12-24 National University Of Ireland, Maynooth A method for mapping an environment
GB2518187A (en) * 2013-09-12 2015-03-18 Ford Global Tech Llc Collision warning for a driver controlled vehicle
CN104464739B (zh) 2013-09-18 2017-08-11 华为技术有限公司 音频信号处理方法及装置、差分波束形成方法及装置
US9579789B2 (en) 2013-09-27 2017-02-28 Brain Corporation Apparatus and methods for training of robotic control arbitration
US9425654B2 (en) 2013-09-30 2016-08-23 Google Inc. Contactless electrical coupling for a rotatable LIDAR device
US9528834B2 (en) 2013-11-01 2016-12-27 Intelligent Technologies International, Inc. Mapping techniques using probe vehicles
US20150127224A1 (en) 2013-11-02 2015-05-07 Joseph Akwo Tabe Advanced weight responsive supplemental restraint and occupant classification system
US20150268665A1 (en) 2013-11-07 2015-09-24 Google Inc. Vehicle communication using audible signals
US9552735B2 (en) 2013-11-22 2017-01-24 Ford Global Technologies, Llc Autonomous vehicle identification
US9212926B2 (en) 2013-11-22 2015-12-15 Ford Global Technologies, Llc In-vehicle path verification
US9200910B2 (en) 2013-12-11 2015-12-01 Here Global B.V. Ranking of path segments based on incident probability
US9165460B2 (en) * 2013-12-23 2015-10-20 Basem Albert Aziz Pedestrian warning light system for vehicles with illumination in different directions
US9984574B2 (en) 2014-01-21 2018-05-29 Tribal Rides, Inc. Method and system for anticipatory deployment of autonomously controlled vehicles
US9201426B1 (en) 2014-02-19 2015-12-01 Google Inc. Reverse iteration of planning data for system control
US9720410B2 (en) 2014-03-03 2017-08-01 Waymo Llc Remote assistance for autonomous vehicles in predetermined situations
US9547989B2 (en) 2014-03-04 2017-01-17 Google Inc. Reporting road event data and sharing with other vehicles
US9960986B2 (en) 2014-03-19 2018-05-01 Uber Technologies, Inc. Providing notifications to devices based on real-time conditions related to an on-demand service
JP6390057B2 (ja) 2014-03-26 2018-09-19 株式会社日本総合研究所 車両状態を報知する自動走行移動体及び車両状態報知方法
US20150292894A1 (en) 2014-04-11 2015-10-15 Telecommunication Systems, Inc. Travel route
US20150338226A1 (en) 2014-05-22 2015-11-26 Telogis, Inc. Context-based routing and access path selection
US9475422B2 (en) 2014-05-22 2016-10-25 Applied Invention, Llc Communication between autonomous vehicle and external observers
US9631933B1 (en) 2014-05-23 2017-04-25 Google Inc. Specifying unavailable locations for autonomous vehicles
US9393922B2 (en) 2014-05-23 2016-07-19 Google Inc. Devices and methods for an energy-absorbing end of a vehicle
US10424036B2 (en) 2014-06-02 2019-09-24 Uber Technologies, Inc. Maintaining data for use with a transport service during connectivity loss between systems
US9235775B2 (en) 2014-06-08 2016-01-12 Uber Technologies, Inc. Entrance detection from street-level imagery
US9494937B2 (en) 2014-06-20 2016-11-15 Verizon Telematics Inc. Method and system for drone deliveries to vehicles in route
US9283678B2 (en) 2014-07-16 2016-03-15 Google Inc. Virtual safety cages for robotic devices
US9381949B2 (en) 2014-10-15 2016-07-05 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicles having a cross-vehicle stabilizing structure
USPP28774P3 (en) 2014-11-27 2017-12-19 Agro Selections Fruits Peach tree named ‘CRISPONDA’
CN104378713B (zh) 2014-11-27 2017-11-07 广州得易电子科技有限公司 一种阵列扬声器及使用该扬声器的音频处理方法
US9371093B1 (en) 2014-12-03 2016-06-21 Toyota Motor Engineering & Manufacturing North America, Inc. Vehicles having upper side member reinforcement portions
JP6277948B2 (ja) 2014-12-05 2018-02-14 マツダ株式会社 自動車の下部車体構造
USPP28763P2 (en) 2014-12-08 2017-12-12 Syngenta Participations Ag Dahlia plant named ‘DAHZ0002’
US20160247106A1 (en) 2015-02-24 2016-08-25 Siemens Aktiengesellschaft Managing a fleet of autonomous electric vehicles for on-demand transportation and ancillary services to electrical grid
GB2535718A (en) 2015-02-24 2016-08-31 Addison Lee Ltd Resource management
CN104882025B (zh) 2015-05-13 2017-02-22 东华大学 一种基于车联网技术的碰撞检测预警方法
DE102015210781A1 (de) 2015-06-12 2016-12-15 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Steuereinheit zur Kommunikation zwischen einem autonomen Fahrzeug und einem Verkehrsteilnehmer
US9805605B2 (en) 2015-08-12 2017-10-31 Madhusoodhan Ramanujam Using autonomous vehicles in a taxi service
US10023231B2 (en) 2015-08-12 2018-07-17 Madhusoodhan Ramanujam Parking autonomous vehicles
US10220705B2 (en) 2015-08-12 2019-03-05 Madhusoodhan Ramanujam Sharing autonomous vehicles
US9802568B1 (en) 2015-09-04 2017-10-31 Waymo Llc Interlocking vehicle airbags
US9517767B1 (en) 2015-11-04 2016-12-13 Zoox, Inc. Internal safety systems for robotic vehicles
US10745003B2 (en) 2015-11-04 2020-08-18 Zoox, Inc. Resilient safety system for a robotic vehicle
US9720415B2 (en) 2015-11-04 2017-08-01 Zoox, Inc. Sensor-based object-detection optimization for autonomous vehicles
US9804599B2 (en) 2015-11-04 2017-10-31 Zoox, Inc. Active lighting control for communicating a state of an autonomous vehicle to entities in a surrounding environment
US10000124B2 (en) 2015-11-04 2018-06-19 Zoox, Inc. Independent steering, power, torque control and transfer in vehicles
US9754490B2 (en) 2015-11-04 2017-09-05 Zoox, Inc. Software application to request and control an autonomous vehicle service
US10248119B2 (en) 2015-11-04 2019-04-02 Zoox, Inc. Interactive autonomous vehicle command controller
US9606539B1 (en) 2015-11-04 2017-03-28 Zoox, Inc. Autonomous vehicle fleet service and system
US9494940B1 (en) 2015-11-04 2016-11-15 Zoox, Inc. Quadrant configuration of robotic vehicles
US9612123B1 (en) 2015-11-04 2017-04-04 Zoox, Inc. Adaptive mapping to navigate autonomous vehicles responsive to physical environment changes
US10496766B2 (en) 2015-11-05 2019-12-03 Zoox, Inc. Simulation system and methods for autonomous vehicles
US9958864B2 (en) 2015-11-04 2018-05-01 Zoox, Inc. Coordination of dispatching and maintaining fleet of autonomous vehicles
US9734455B2 (en) 2015-11-04 2017-08-15 Zoox, Inc. Automated extraction of semantic information to enhance incremental mapping modifications for robotic vehicles
US9878664B2 (en) 2015-11-04 2018-01-30 Zoox, Inc. Method for robotic vehicle communication with an external environment via acoustic beam forming
US9910441B2 (en) 2015-11-04 2018-03-06 Zoox, Inc. Adaptive autonomous vehicle planner logic
US10334050B2 (en) 2015-11-04 2019-06-25 Zoox, Inc. Software application and logic to modify configuration of an autonomous vehicle
US9632502B1 (en) 2015-11-04 2017-04-25 Zoox, Inc. Machine-learning systems and techniques to optimize teleoperation and/or planner decisions
US9916703B2 (en) 2015-11-04 2018-03-13 Zoox, Inc. Calibration for autonomous vehicle operation
US9507346B1 (en) 2015-11-04 2016-11-29 Zoox, Inc. Teleoperation system and method for trajectory modification of autonomous vehicles

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006298245A (ja) 2005-04-22 2006-11-02 Toyota Motor Corp 車両の警報装置および車両
JP2008143510A (ja) 2006-11-17 2008-06-26 Toyota Central R&D Labs Inc 注意喚起照射装置
JP2015174541A (ja) 2014-03-14 2015-10-05 株式会社デンソー 車載装置

Also Published As

Publication number Publication date
CN114801972A (zh) 2022-07-29
EP3371740A1 (en) 2018-09-12
CN108292356B (zh) 2022-06-21
US9804599B2 (en) 2017-10-31
JP2022119791A (ja) 2022-08-17
US20170120804A1 (en) 2017-05-04
US11500378B2 (en) 2022-11-15
US20180136654A1 (en) 2018-05-17
CN108292356A (zh) 2018-07-17
JP2018536955A (ja) 2018-12-13

Similar Documents

Publication Publication Date Title
JP7071271B2 (ja) 自律車両の方向性を示すためのアクティブ化照明を構成するシステム
JP7504155B2 (ja) ロボット車両のための内部安全システム
US11500388B2 (en) System of configuring active lighting to indicate directionality of an autonomous vehicle
JP7458704B2 (ja) ロボット車両のための内部安全システム
US10543838B2 (en) Robotic vehicle active safety systems and methods
US9630619B1 (en) Robotic vehicle active safety systems and methods
US10745003B2 (en) Resilient safety system for a robotic vehicle
WO2017079349A1 (en) System for implementing an active safety system in an autonomous vehicle
JP2018536955A5 (ja)
JP6910364B2 (ja) 音響ビームフォーミングを介した外部環境とのロボット車両通信のための方法
US9802568B1 (en) Interlocking vehicle airbags
KR101911703B1 (ko) 차량용 주행 제어 장치 및 차량
KR20190123248A (ko) 차량 사고 방지 장치 및 방법
US20190256087A1 (en) Autonomous vehicle and operating method thereof
US10710611B2 (en) Vehicle control device mounted on vehicle and method for controlling the vehicle
US10414328B2 (en) Lamp for vehicle and vehicle comprising the same
CN110843666A (zh) 使用定向声音的自控车辆到行人通信

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180703

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191105

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191105

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201208

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210305

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210831

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220405

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220506

R150 Certificate of patent or registration of utility model

Ref document number: 7071271

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150