JP2016509971A - 運転モード調整 - Google Patents

運転モード調整 Download PDF

Info

Publication number
JP2016509971A
JP2016509971A JP2015559238A JP2015559238A JP2016509971A JP 2016509971 A JP2016509971 A JP 2016509971A JP 2015559238 A JP2015559238 A JP 2015559238A JP 2015559238 A JP2015559238 A JP 2015559238A JP 2016509971 A JP2016509971 A JP 2016509971A
Authority
JP
Japan
Prior art keywords
vehicle
computing device
driving behavior
radar
control strategy
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015559238A
Other languages
English (en)
Inventor
ドロズ,ピエール−イブ
シュ,カシュン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of JP2016509971A publication Critical patent/JP2016509971A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/161Decentralised systems, e.g. inter-vehicle communication
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • B60W30/16Control of distance between vehicles, e.g. keeping a distance to preceding vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/0098Details of control systems ensuring comfort, safety or stability not otherwise provided for
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/015Detecting movement of traffic to be counted or controlled with provision for distinguishing between two or more types of vehicles, e.g. between motor-cars and cycles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/12Lateral speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/801Lateral distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Instructional Devices (AREA)

Abstract

コンピューティング装置は、第1の乗物の走行の道路上における乗物のそれぞれの特性を示すセンサ情報を受取るように構成されてもよい。コンピューティング装置は、それぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れた強引な運転挙動を示す第2の乗物を識別するように構成されてもよい。さらに、それぞれの特性に基づいて、コンピューティング装置は、第2の乗物のタイプを判断するように構成されてもよい。コンピューティング装置は、第1の乗物と第2の乗物との間の距離を推定するように構成されてもよい。コンピューティング装置は、第2の乗物の強引な運転挙動、第2の乗物のタイプ、および第1の乗物と第2の乗物との間の距離に基づいて、第1の乗物の制御戦略を修正し、修正された制御戦略に基づいて、第1の乗物を制御するように構成されてもよい。

Description

背景
自律性乗物は、ある位置から他の位置に乗員を輸送することにおいて補助するさまざまなコンピューティングシステムを用いる。いくつかの自律性乗物は、パイロット、運転者または乗員などのようなオペレータからなんらかの初期入力または連続的入力を必要とし得る。他のシステム、たとえばオートパイロットシステムは、そのシステムが係合されたときに限り用いられてもよく、それは、オペレータが、手動モード(オペレータは、乗物の移動に対して高度の制御を行使する)から自律モード(乗物が本質的にそれ自体を運転する)に、それらの間のどこかにあるモードに切換えることを許す。
概要
この出願は、付近の強引な運転者の検出および運転モードの調整に関する実施の形態を開示する。1つの局面では、この出願は方法を記載する。この方法は、コンピューティング装置によって、第1の乗物の走行の道路上における乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ることを含んでもよい。この方法は、さらに、乗物から、1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れる強引な運転挙動を示す第2の乗物を識別することを含んでもよい。この方法は、さらに、1つ以上のそれぞれの特性に基づいて、第2の乗物のタイプを判断することを含んでもよい。この方法は、さらに、第1の乗物と第2の乗物との間の距離を推定することを含んでもよい。この方法は、さらに、コンピューティング装置を用いて、第2の乗物の強引な運転挙動、第2の乗物のタイプ、および第1の乗物と第2の乗物との間の距離に基づいて、第1の乗物の運転挙動と関連付けられる制御戦略を修正することと、コンピューティング装置を用いて、修正された制御戦略に基づいて、第1の乗物を制御することとを含んでもよい。
他の局面では、この出願は、コンピューティング装置による実行でコンピューティング装置に機能を実行させる命令をその上に保存した非一時的なコンピュータ読取可能媒体を記載する。機能は、第1の乗物の走行の道路上における乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ることを含んでもよい。機能は、さらに、乗物から、1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れた強引な運転挙動を示す第2の乗物を識別することを含んでもよい。機能は、さらに、1つ以上のそれぞれの特性に基づいて、第2の乗物のタイプを判断することを含んでもよい。機能は、さらに、第1の乗物と第2の乗物との間の距離を推定することを含んでもよい。機能は、さらに、第1の乗物の運転挙動と関連付けられる制御戦略を、第2の乗物の強引な運転挙動、第2の乗物のタイプ、および第1の乗物と第2の乗物との間の距離に基づいて、修正することと、修正された制御戦略に基づいて、第1の乗物を制御することとを含んでもよい。
さらに他の局面では、この出願は制御システムを記載する。制御システムは少なくとも1つのプロセッサを含んでもよい。制御システムは、さらに、少なくとも1つのプロセッサによる実行で、制御システムに、第1の乗物の走行の道路上における乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ること含む機能を実行させる命令をその上に保存したメモリを含んでもよい。機能は、さらに、乗物から、1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れた強引な運転挙動を示す第2の乗物を識別することを含んでもよい。機能は、さらに、1つ以上のそれぞれの特性に基づいて、第2の乗物のタイプを判断することを含んでもよい。機能は、さらに、第1の乗物と第2の乗物との間の距離を推定することを含んでもよい。機能は、さらに、第2の乗物の強引な運転挙動、第2の乗物のタイプ、および第1の乗物と第2の乗物との間の距離に基づいて、第1の乗物の運転挙動と関連付けられる制御戦略を修正することと、修正された制御戦略に基づいて、第1の乗物を制御することとを含んでもよい。
前述の概要は例示的であるのみであり、いかようにも限定的であるようには意図されない。上に記載された例示的局面、実施の形態、および特徴に加えて、さらなる局面、実施の形態および特徴は、図および以下の詳細な記載への参照によって明らかになる。
例示的実施の形態に従う、例示的自動車の簡略ブロック図である。 例示的実施の形態に従う、例示的自動車を示す。 例示的実施の形態に従う、付近の強引な運転者を検出し、運転モードを調整する方法のフローチャートである。 例示的実施の形態に従う、強引な運転挙動を示す第2の乗物を識別することに応答して、修正された制御戦略に基づいて、第1の乗物を制御する例を示す。 例示的実施の形態に従う、強引な運転挙動を示す第2の乗物を識別することに応答して、修正された制御戦略に基づいて、第1の乗物を制御する別の例を示す。 例示的実施の形態に従う、コンピュータプログラムの概念的な部分的な図を示す概略図である。
詳細な記載
以下の詳細な記載は、添付の図を参照して、開示されるシステムおよび方法のさまざまな特徴および機能を記載する。図では、文脈が他の態様で指示しなければ、同様の記号は同様の構成要素を識別する。ここに記載される例示的システムおよび方法の実施の形態は、制限するのが目的ではない。開示されたシステムおよび方法のある局面はさまざまな異なる構成で配し組合せることができ、 それらのすべてはここに企図されることが、容易に理解され得る。
道路で動作する自律性乗物は、安全な軌道を判断するために、自律性乗物の付近において他の乗物を識別することに依存し得る。自律性乗物は、さらに、安全制御戦略を判断するために、これらの乗物の1つ以上の挙動を識別してもよい。自律性乗物は、カメラ、レーダ(RADAR)装置、ならびにレーザ測距装置および/もしくは光検知測距(LIDAR)装置または他のレーザセンサのようなセンサを含むように構成されてもよい。センサは自律性乗物のまわりの付近の乗物の移動を追跡するために利用されてもよい。付近の乗物の移動は、付近の乗物の挙動パターンを判断するよう解析される。一例では、これらの挙動パターンは、付近の乗物と関連付けられる強引な運転挙動または危険運転挙動として特徴付けることができる。その結果、自律性乗物は、そのような強引な乗物を考慮するように制御されることができる。
さらに、自律性乗物はその付近における乗物のタイプを考慮するように構成されてもよい。オートバイ運転者は、たとえば、他の乗物の運転者より潜在的に強引かもしれない。自律性乗物は、さらに、自律性乗物と強引な運転を示す他の乗物との間の距離を考慮するように構成されてもよい。たとえば、自律性乗物と強引な乗物との間の距離が大きい場合、自律性乗物の運転挙動に対する強引な乗物の影響は最小であるかもしれず、その逆も正しい。所与の乗物の強引な運転、所与の乗物のタイプ、および自律性乗物と所与の乗物との間の距離に基づいて、自律性乗物は、その制御戦略および運転挙動を修正して、安全な軌道を判断するように構成されてもよい。
例示的な乗物制御システムは自動車において実現されてもよく、または自動車の形式をとってもよい。代替的に、乗物制御システムは、自動車、トラック、オートバイ、バス、ボート、飛行機、ヘリコプター、芝刈機、レジャー用乗物、遊園地乗物、農機具、建設機材、市街電車、ゴルフカート、列車およびトロリーのような、他の乗物において実現されるか、または他の乗物の形式をとってもよい。他の乗物も同様に可能である。
さらに、例示的システムは非一時的なコンピュータ読取可能媒体の形式をとってもよく、それは、ここに記載された機能を提供するよう少なくとも1つのプロセッサによって実行可能なプログラム命令をその上に保存している。例示的なシステムは、さらに、そのようなプログラム命令がその上に保存されるそのような非一時的なコンピュータ読取可能媒体を含む、自動車または自動車のサブシステムの形式をとってもよい。
ここで図を参照して、図1は例示的な実施の形態に従う、例示的な自動車100の簡略ブロック図である。自動車100に結合されるかまたは自動車100に含まれる構成要素は、推進システム102、センサシステム104、制御システム106、周辺機器108、電源110、コンピューティング装置111およびユーザインターフェイス112を含んでもよい。コンピューティング装置111はプロセッサ113およびメモリ114を含んでもよい。コンピューティング装置111は自動車100のコントローラまたはコントローラの一部であってもよい。メモリ114は、プロセッサ113によって実行可能な命令115を含んでもよく、さらに、地図データ116を保存してもよい。自動車100の構成要素は、相互接続された態様において、互いとともに、および/またはそれぞれのシステムに結合される他の構成要素とともに働くように構成されてもよい。たとえば、電源110は、自動車100のすべての構成要素に電力を与えてもよい。コンピューティング装置111は、推進システム102、センサシステム104、制御システム106および周辺機器108から情報を受け、それらを制御するように構成されてもよい。コンピューティング装置111は、画像の表示をユーザインターフェイス112に生じさせ、およびユーザインターフェイス112から入力を受けるように構成されてもよい。
他の実施例では、自動車100は、より多い、より少ない、または異なるシステムを含んでもよく、各システムは、より多い、より少ない、または異なる構成要素含んでもよい。加えて、示されるシステムおよび構成要素は、任意の数の態様で組合せられても、または分割されてもよい。
推進システム102は、自動車100に対する動力を供給された動きを与えるように構成されてもよい。示されるように、推進システム102はエンジン/モータ118とエネルギ源120とトランスミッション122とホイール/タイヤ124とを含む。
エンジン/モータ118は、内燃機関、電気モータ、蒸気機関およびスターリングエンジンの任意の組合わせであってもよく、またはそれを含んでもよい。他のモータおよびエンジンも同様に可能である。いくつかの実施例では、推進システム102は複数のタイプのエンジンおよび/またはモータを含み得る。たとえば、ガソリン電気ハイブリッド車はガソリンエンジンと電気モータとを含むことがある。他の例も可能である。
エネルギ源120は、エンジン/モータ118に十分にまたは部分的に動力/電力を供給するエネルギ源であってもよい。すなわち、エンジン/モータ118はエネルギ源120を機械エネルギに変換するように構成されてもよい。エネルギ源120の例は、ガソリン、ディーゼル機関、他の石油系燃料、プロパン、他の圧縮気体系燃料、エタノール、ソーラーパネル、バッテリ、および他の電力源を含む。エネルギ源120は、加えて、または代替的に、燃料タンク、バッテリ、キャパシタ、および/またはフライホイールの任意の組合わせを含み得る。いくつかの実施例では、エネルギ源120は、自動車100の他のシステムのためのエネルギも同様に与えてもよい。
トランスミッション122は、エンジン/モータ118からホイール/タイヤ124に機械的動力を伝達するように構成されてもよい。この目的のために、トランスミッション122は、ギアボックス、クラッチ、ディファレンシャル、駆動軸、および/または他の要素を含んでもよい。トランスミッション122が駆動軸を含む例では、駆動軸は、ホイール/タイヤ124に結合されるように構成される1つ以上の車軸を含むことがある。
自動車100のホイール/タイヤ124は、一輪車、自転車/オートバイ、三輪車または車/トラック4輪形式を含むさまざまな形式で構成され得る。6つ以上のホイールを含むような他のホイール/タイヤ形式も、同じように可能である。自動車100のホイール/タイヤ124は、他のホイール/タイヤ124に関して差動的に回転するよう構成されてもよい。いくつかの例では、ホイール/タイヤ124は、トランスミッション122に固定的に取付けられる少なくとも1つのホイールと、ホイールのリムに結合され運転面と接触し得る少なくとも1つのタイヤとを含んでもよい。ホイール/タイヤ124は、金属およびゴムの任意の組合わせ、または他の材料の組合わせを含んでもよい。
推進システム102は、加えてまたは代替的に、示されたもの以外の構成要素を含んでもよい。
センサシステム104は、自動車100が位置する環境についての情報を検知するよう構成された多くのセンサを含んでもよい。示されるように、センサシステムのセンサは全地球測位システム(GPS)モジュール126、慣性計測ユニット(IMU)128、レーダ(RADAR)ユニット130、レーザ測距装置および/または光検知測距(LIDAR)ユニット132、カメラ134、ならびにセンサの位置および/または向きを修正するように構成されたアクチュエータ136を含む。センサシステム104は、同様に、たとえば、自動車100の内部システム(たとえばOモニタ、燃料計、エンジンオイル温度など)を監視するセンサを含む、追加のセンサを含んでもよい。他のセンサも同様に可能である。
GPSモジュール126は、自動車100の地理的位置を推定するように構成された任意のセンサであってもよい。この目的のために、GPSモジュール126は、人工衛星に基づく測位データに基づいて、地球に対する自動車100の位置を推定するように構成されたトランシーバを含んでもよい。ある例では、コンピューティング装置111はGPSモジュール126を地図データ116との組合わせで用いて、自動車100が走行し続けているかもしれない道路上において車線境界の位置を推定するよう構成されてもよい。GPSモジュール126は他の形式をとってもよい。
IMU128は、慣性加速に基づいて自動車100の位置および向きの変化を検知するように構成されたセンサの任意の組合わせであってもよい。いくつかの例では、センサの組合わせは、たとえば、加速度計およびジャイロスコープを含んでもよい。センサの他の組合わせも同様に可能である。
RADARユニット130は、物体の範囲、高度、方向または速度などのような物体の特性を判断するために電波を用いるように構成されてもよい物体検出システムとして考えられてもよい。RADARユニット130は、電波またはマイクロ波の経路において任意の物体からはね返る電波またはマイクロ波のパルスを送信するように構成されてもよい。物体は、同様にRADARユニット130の一部であってもよいレシーバ(たとえばディッシュまたはアンテナ)に波のエネルギの一部を返してもよい。RADARユニット130は、さらに、(物体からはね返って)受取られる信号のデジタル信号処理を実行するように構成されてもよく、物体を識別するように構成されてもよい。
レーダと同様の他のシステムが、電磁スペクトルの他の部分で用いられている。一例は、電波ではなくレーザからの可視光を用いるように構成されてもよいLIDAR(光検知測距)である。
LIDARユニット132は、自動車100が位置する環境において光を用いて物体を検知するかまたは検出するように構成されたセンサを含んでもよい。一般的に、光検知測距は、目標を光で照射することによって、目標までの距離または目標の他の特性を測定することができる光学的遠隔検知技術である。例として、LIDARユニット132は、レーザパルスを発するように構成されたレーザ源および/またはレーザスキャナと、レーザパルスの反射を受けるように構成された検出器とを含んでもよい。たとえば、LIDARユニット132は、回転鏡によって反射されたレーザ測距器を含んでもよく、レーザはデジタル化されている現場のまわりで一次元または二次元で走査され、距離測定値を所定角度間隔で収集する。例では、LIDARユニット132は、光(たとえばレーザ)源、スキャナおよび光学素子、光検出器およびレシーバ電子機器、ならびに位置およびナビゲーションシステムのような構成要素を含んでもよい。
例では、LIDARユニット132は、紫外線(UV)光、可視光、または赤外線光を用いて物体を画像化するよう構成されてもよく、非金属物体を含む広範囲の目標とともに用いることができる。一例では、細いレーザビームを用いて、物体の物理的特徴を高分解能でマッピングすることができる。
例では、約10マイクロメーター(赤外線)から約250nm(UV)の範囲における波長を用いることができるかもしれない。典型的には、光は後方散乱を介して反射される。レイリー散乱、ミー散乱およびラマン散乱、ならびに蛍光のような異なるタイプの散乱が、異なる光検知測距適用例に対して用いられる。異なる種類の後方散乱に基づいて、光検知測距は、したがって、例として、レイリーLIDAR、ミーLIDAR、ラマンLIDARおよびNa/Fe/K蛍光LIDARと呼ぶことができる。たとえば、好適な波長の組合わせは、反射信号の強度における波長依存変化を探すことによって、物体の遠隔マッピングを可能にすることができる。
三次元(3D)の画像化は走査および非走査LIDARシステムの両方を用いて達成することができる。「3Dゲート制御ビューイングレーザレーダ」は、パルス化されたレーザおよび高速ゲート制御カメラを適用する非走査レーザ測距システムの例である。画像化光検知測距画像化は、典型的には、CMOS(相補型金属酸化膜半導体)およびハイブリッドCMOS/CCD(電荷結合素子)製造技術を用いてシングルチップ上に構築される高速検知器のアレイおよび変調感知可能な検出器アレイを用いて実行することもできる。これらの装置では、カメラからの画像を表現するようアレイを処理することができるように、各画素は、高速で復調またはゲート制御することによって、局所的に処理されてもよい。この技術を用いて、何千もの画素を同時に得て、LIDARユニット132によって検出されている物体または現場を表現する3D点群を形成してもよい。
点群は3次元座標系において頂点の集合を含んでもよい。たとえば、これらの頂点はX、YおよびZの座標によって規定されてもよく、物体の外部表面を表現してもよい。LIDARユニット132は、物体の表面で多くの点を測定することによって、点群を形成するように構成されてもよく、点群をデータファイルとして出力してもよい。LIDARユニット132による物体の3D走査プロセスの結果、点群を用いて物体を識別し視覚化することができる。
一例では、点群を直接レンダリングして物体を視覚化することができる。他の例では、点群は、表面再構成と呼ばれ得るプロセスを通して多角形または三角形のメッシュモデルに変換されてもよい。点群を3D面に変換するための例示的技術は、ドロネー三角形分割、α形状およびボールピボッティングを含んでもよい。これらの技術は点群の既存の頂点にわたって三角形のネットワークを構築することを含む。他の例示的な技術は、点群を三次元距離場に変換すること、およびマーチングキューブアルゴリズムを通してそのように規定される陰関数曲面を再構築することを含んでもよい。
カメラ134は、自動車100が位置する環境の画像を捕捉するように構成された任意のカメラ(たとえばスチルカメラ、ビデオカメラなど)であってもよい。この目的のために、カメラは可視光線を検出するように構成されてもよく、または、赤外線もしくは紫外線光などのようなスペクトルの他の部分から光を検出するように構成されてもよい。他のタイプのカメラも同様に可能である。カメラ134は二次元検出器であってもよく、または三次元の空間的レンジを有してもよい。いくつかの例では、カメラ134は、たとえば環境においてカメラ134から多くの点までの距離を示す二次元画像を生じさせるように構成されたレンジ検出器であってもよい。この目的のために、カメラ134は1つ以上のレンジ検出技術を用いてもよい。たとえば、カメラ134は、自動車100が環境においてグリッドまたはチェス盤のパターンのような予め定められる光パターンで物体を照射し、カメラ134を用いて物体からの予め定められる光パターンの反射を検出する、構造化された光技術を用いるように構成されてもよい。反射光パターンにおける歪みに基づいて、自動車100は物体上における点までの距離を判断するように構成されてもよい。予め定められる光パターンは、赤外線光、または他の波長の光を含んでもよい。
アクチュエータ136はたとえばセンサの位置および/または向きを修正するよう構成されてもよい。
センサシステム104は、加えてまたは代替的に、示されたもの以外の構成要素を含んでもよい。
制御システム106は自動車100およびその構成要素の動作を制御するように構成されてもよい。この目的のために、制御システム106はステアリングユニット138とスロットル140とブレーキユニット142とセンサ融合アルゴリズム144と計算機視覚システム146とナビゲーションまたは経路システム148と障害物回避システム150とを含んでもよい。
ステアリングユニット138は、自動車100の向きまたは方向を調整するように構成された機構の任意の組合わせであってもよい。
スロットル140は、エンジン/モータ118の動作速度および加速度、ならびに次いで、自動車100の速度および加速度を制御するように構成された機構の任意の組合わせであってもよい。
ブレーキユニット142は自動車100を減速させるように構成された機構の任意の組合わせであってもよい。たとえば、ブレーキユニット142は、ホイール/タイヤ124を遅くするために摩擦を用いてもよい。他の例として、ブレーキユニット142は、再生式であり、ホイール/タイヤ124の運動エネルギを電流に変換するよう構成されてもよい。ブレーキユニット142は他の形式をとってもよい。
センサ融合アルゴリズム144は、たとえば、コンピューティング装置111によって実行可能なアルゴリズム(またはアルゴリズムを保存するコンピュータプログラム製品)を含んでもよい。センサ融合アルゴリズム144は入力としてセンサシステム104からデータを受入れるように構成されてもよい。データは、たとえば、センサシステム104のセンサで検知される情報を表すデータを含んでもよい。センサ融合アルゴリズム144はたとえば、カルマンフィルタ、ベイズのネットワークまたは他のアルゴリズムを含んでもよい。センサ融合アルゴリズム144は、さらに、たとえば、自動車100が位置する環境における個々の物体および/もしくは特徴の評価、特定の状況の評価、ならびに/または特定の状況に基づく考えられ得る衝撃の評価を含む、センサシステム104からのデータに基づくさまざまな評価を与えるように構成されてもよい。他の評価も同様に可能である。
計算機視覚システム146は、たとえば車線情報、交通信号および障害物を含む、自動車100が位置する環境における物体および/または特徴を識別するためにカメラ134によって捕捉された画像を処理および解析するよう構成される任意のシステムであってもよい。この目的のために、計算機視覚システム146は、物体認識アルゴリズム、Structure from Motion(SFM)アルゴリズム、映像追跡または他の計算機視覚技術を用いてもよい。いくつかの例では、計算機視覚システム146は、加えて、環境をマッピングする、物体を追跡する、物体の速度を推定するなどのように構成されてもよい。
ナビゲーションおよび経路システム148は自動車100に対する運転経路を判断するように構成された任意のシステムであってもよい。ナビゲーションおよび経路システム148は、加えて、自動車100が動作中である間、運転経路を動的に更新するように構成されてもよい。いくつかの例では、ナビゲーションおよび経路システム148は、センサ融合アルゴリズム144、GPSモジュール126、および予め定められた1つ以上の地図から、データを組込んで、自動車100に対する運転経路を判断するように構成されてもよい。
障害物回避システム150は、自動車100が位置する環境において障害物を識別、評価、回避、または他の態様で交渉するよう構成される任意のシステムであってもよい。
制御システム106は、加えてまたは代替的に、示されたもの以外の構成要素を含んでもよい。
周辺機器108は、自動車100が外部のセンサ、他の自動車、および/またはユーザと対話することを可能にするよう構成されてもよい。この目的のために、周辺機器108はたとえば、無線通信システム152、タッチスクリーン154、マイクロホン156、および/またはスピーカ158を含んでもよい。
無線通信システム152は、直接または通信ネットワークを介して無線で1つ以上の他の自動車、センサ、または他のエンティティに結合されるように構成された任意のシステムであってもよい。この目的のために、無線通信システム152は、他の自動車、センサまたは他のエンティティと直接またはエアインターフェイスを通じて通信するためのアンテナおよびチップセットを含んでもよい。一般的にチップセットまたは無線通信システム152はさまざまな可能性のうち、特に、Bluetooth(登録商標)、(任意のIEEE 802.11修正を含む)IEEE 802.11に記載される通信プロトコル、セル方式技術(GSM(登録商標)、CDMA、UMTS、EV−DO、WiMAXまたはLTEなど)、Zigbee(登録商標)、専用狭域通信(DSRC)、および無線周波数識別(RFID)通信のような、1つ以上の他のタイプの無線通信(たとえばプロトコル)に従って通信するよう配されてもよい。無線通信システム152は他の形式をとってもよい。
自動車100にコマンドを入力するために、タッチスクリーン154がユーザによって用いられてもよい。この目的のために、タッチスクリーン154は、さまざまな可能性のうち、特に、容量性検知、抵抗検知、または表面弾性波プロセスを介して、ユーザの指の位置および移動の少なくとも1つを検知するように構成されてもよい。タッチスクリーン154は、タッチスクリーン面と平行の方向つまり当該面内の方向、タッチスクリーン面に垂直な方向、またはその両方において、指の動きを検知することができてもよく、さらに、タッチスクリーン面にかけられる圧力のレベルを検知することができてもよい。タッチスクリーン154は、1つ以上の半透明または透明な絶縁層と1つ以上の半透明または透明な導電層とから形成されてもよい。タッチスクリーン154は他の形式をとってもよい。
マイクロホン156は自動車100のユーザから音声(たとえば音声コマンドまたは他の音声入力)を受けるように構成されてもよい。マイクロホン156は、さらに、たとえば、他の乗物の警笛によって発せられた音声を受けるように構成されてもよい。同様に、スピーカ158は自動車100のユーザに音声を出力するように構成されてもよい。
周辺機器108は、加えてまたは代替的に、示されたもの以外の構成要素を含んでもよい。
電源110は、自動車100の構成要素のいくつかまたはすべてに電力を与えるよう構成されてもよい。この目的のために、電源110はたとえば、再充電可能なリチウムイオン電池または鉛酸蓄電池を含んでもよい。いくつかの例では、電力を与えるように電池からなる1つ以上のバンクを構成することができるかもしれない。他の電源材料および構成も同様に可能である。いくつかの例では、いくつかの全電気自動車におけるように、電源110およびエネルギ源120は一緒に実現されてもよい。
コンピューティング装置111に含まれるプロセッサ113は1つ以上の汎用プロセッサおよび/または1つ以上の専用プロセッサ(たとえば画像プロセッサ、デジタル信号プロセッサなど)を含んでもよい。プロセッサ113が1つより多いプロセッサを含むという点では、そのようなプロセッサは別々にまたは組合わせにおいて働くことがある。たとえば、コンピューティング装置111は、ユーザインターフェイス112を通して受けられる入力に基づいて自動車100の機能を制御するように構成されてもよい。
メモリ114は、次いで、光学的、磁気的、および/または有機的な記憶装置のような、1つ以上の揮発性および/または1つ以上の不揮発性記憶装置構成要素を含んでもよく、メモリ114はプロセッサ113と全体的または部分的に統合されてもよい。メモリ114は、ここに記載された機能または方法の任意のものを含むさまざまな自動車機能を実行するためにプロセッサ113によって実行可能な命令115(たとえばプログラム論理)を含んでもよい。
自動車100の構成要素は、相互接続された態様で、他の構成要素とともに、それらのそれぞれのシステム内および/または外部で働くように構成されることがある。この目的のために、自動車100の構成要素およびシステムは、システムバス、ネットワーク、および/または他の接続機構(図示せず)によって通信を与えるようにともにリンクされてもよい。
さらに、構成要素およびシステムの各々は自動車100において統合されるように示される一方で、いくつかの例では、1つ以上の構成要素またはシステムは、結線または無線接続を用いて、自動車100上に取り外し可能に取付けられるか、または他の態様で(機械的にまたは電気的に)自動車100に接続されてもよい。
自動車100は示されたものに加えて、またはそのものの代りに、1つ以上の要素を含んでもよい。たとえば、自動車100は1つ以上のさらなるインターフェイスおよび/または電源を含んでもよい。他の追加的構成要素も同様に可能である。これらの例では、メモリ114はさらに、追加的構成要素を制御および/または追加的構成要素と通信するようプロセッサ113によって実行可能な命令を含んでもよい。
図2は、実施の形態に従う、例示的な自動車200を示す。図2は、特に自動車200の右側図と正面図と背面図と上面図とを示す。自動車200は図2において車として示されるが、他の例も可能である。たとえば、自動車200は、さまざまな例の中で特に、トラック、バン、セミトレーラートラック、オートバイ、ゴルフカート、オフロード車、または農場乗物を表すことがある。示されるように、自動車200は第1のセンサユニット202と第2のセンサユニット204と第3のセンサユニット206と無線通信システム208とカメラ210を含む。
第1のセンサユニット、第2のセンサユニットおよび第3のセンサユニット202〜206の各々は、全地球測位システムセンサと慣性計測ユニットとRADARユニットとLIDARユニットとカメラと車線検出センサと音響センサとの任意の組合わせを含んでもよい。他のタイプのセンサも同様に可能である。
第1のセンサユニット202、第2のセンサユニットおよび第3のセンサユニットは、自動車200上における特定の位置に取付けられるように示されている一方で、いくつかの例では、センサユニット202は、自動車200のどこか他のところに、自動車200の内部または外部に、取付けられてもよい。さらに、3つのセンサユニットのみが示されているが、いくつかの例では、より多数またはより少数のセンサユニットが自動車200に含まれてもよい。
いくつかの例では、第1、第2および第3のセンサユニット202〜206の1つ以上は、センサが可動に取付けられてもよい1つ以上の可動取付部を含んでもよい。可動取付部はたとえば回転台を含んでもよい。回転台上に取付けられたセンサは、自動車200のまわりの各方向から情報を得るように、回転されることがある。代替的に、または加えて、可動取付部は傾斜させる台を含んでもよい。傾斜させる台上に取付けられたセンサは、それがさまざまな角度から情報を得るように、特定の範囲内の角度および/または方位において傾けられ得る。可動取付部は他の形式をとってもよい。
さらに、いくつかの例では、第1、第2および第3のセンサユニット202〜206の1つ以上は、センサおよび/または可動取付部を移動させることによってセンサユニットにおけるセンサの位置および/または向きを調整するように構成される1つ以上のアクチュエータを含んでもよい。例示的なアクチュエータは、モータ、空気圧アクチュエータ、油圧ピストン、リレー、ソレノイドおよび圧電アクチュエータを含む。他のアクチュエータも同様に可能である。
無線通信システム208は、無線で、1つ以上の他の自動車、センサまたは他のエンティティに、直接または図1で無線通信システム152に関して上に記載されたような通信ネットワークを介して結合するように構成された任意のシステムであってもよい。無線通信システム208は自動車200の屋根に位置決めされるよう示されているが、他の例では、無線通信システム208を完全にまたは部分的に、他のところに位置させることもあり得る。
カメラ210は、自動車200が位置する環境の画像を捕捉するように構成された任意のカメラ(たとえばスチルカメラ、ビデオカメラなど)であってもよい。この目的のために、カメラ210は、図1においてカメラ134に関して上に記載された形式の任意のものをとってもよい。カメラ210は、自動車200の正面のウインドシールドの内部に取付けられるよう示される一方で、他の例では、カメラ210は、自動車200のどこか他のところに、自動車200の内部または外部に、取付けられてもよい。
自動車200は、示されたものに加えて、またはそのものの代りに、1つ以上の他の構成要素を含んでもよい。
自動車200の制御システムは複数の可能な制御戦略の中から或る制御戦略に従って自動車200を制御するように構成されてもよい。制御システムは、(自動車200上または自動車200外において)自動車200に結合されたセンサから情報を受け、その情報に基づいて制御戦略(および関連付けられる運転挙動)を修正し、修正された制御戦略に従って自動車200を制御するように構成されてもよい。制御システムは、さらに、センサから受けた情報を監視し、継続的に運転状態を評価するように構成されてもよく、さらに、運転状態における変化に基づいて制御戦略および運転挙動を修正するように構成されてもよい。
図3は、例示的な実施の形態に従う、乗物横方向車線位置決めを制御する方法300のフローチャートである。
方法300は、ブロック302〜312の1つ以上によって示されるように1つ以上の動作、機能または行為を含んでもよい。ブロックは連続的順序で示されるが、これらのブロックは、いくつかの事例においては、並列に、および/またはここに記載されるものとは異なる順序で実行されてもよい。さらに、さまざまなブロックは、所望の実現例に基づいて、より少数のブロックに組合せられるか、さらなるブロックに分割されるか、および/または除去されてもよい。
加えて、方法300ならびにここに開示された他のプロセスおよび方法について、フローチャートは、この実施の形態の1つの考えられ得る実現例の機能および動作を示す。この点において、各ブロックは、プロセスにおける具体的な論理機能もしくはステップの実現のためにプロセッサによって実行可能な1つ以上の命令を含む、モジュール、セグメントまたはプログラムコードの一部を表してもよい。プログラムコードは、たとえばディスクもしくはハードドライブを含む記憶装置のような、任意のタイプのコンピュータ読取可能媒体またはメモリ上に保存されてもよい。コンピュータ読取可能媒体は、たとえばレジスタメモリ、プロセッサキャッシュおよびランダムアクセスメモリ(RAM)のように短時間の間データを保存する、コンピュータ読取可能媒体のような、非一時的なコンピュータ読取可能媒体を含んでもよい。コンピュータ読取可能媒体は、さらに、たとえばリードオンリメモリ(ROM)、光ディスクもしくは磁気ディスク、コンパクトディスクリードオンリメモリ(CD−ROM)のように、二次的または持続的な長期記憶装置などのような、非一時的な媒体またはメモリを含んでもよい。コンピュータ読取可能媒体はさらに任意の他の揮発性または不揮発性記憶装置システムであってもよい。たとえば、コンピュータ読取可能媒体は、コンピュータ読取可能記憶媒体、有形的記憶装置または他の製造品と考えられてもよい。
加えて、方法300ならびにここに開示される他のプロセスおよび方法について、図3における各ブロックは、プロセスにおける具体的な論理機能を実行するよう結線された回路系を表してもよい。
ブロック302では、方法300は、コンピューティング装置によって、第1の乗物の走行の道路上の乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ることを含む。図1におけるコンピューティング装置111などのようなコントローラまたはコンピューティング装置は、第1の乗物に搭載されてもよく、または搭載されずに、たとえば第1の乗物と無線通信状態であってもよい。さらに、コンピューティング装置は第1の乗物を自立または半自立動作モードで制御するように構成されてもよい。さらに、コンピューティング装置は、第1の乗物に結合されるセンサおよび装置から、たとえば第1の乗物のシステムおよびサブシステムの状態、運転状態、道路状態、道路上の他の乗物の移動および挙動などと関連付けられる情報を受けるように構成されてもよい。
コンピューティング装置は近接する車線において当該乗物の後ろおよび前における乗物、前方および背後のオートバイおよび自転車の乗用者、道路上および道路外の付近の歩行者、ならびに道路上の車線において第1の乗物に対する制御戦略に影響を及ぼすかもしれない他の物体を識別するように構成されてもよい。付近の乗物の識別に加えて、コンピューティング装置は乗物の各乗物のそれぞれの特性を判断するように構成されてもよい。たとえば、コンピューティング装置は、他の乗物のサイズ(たとえば幅および長さ)、道路上のそれぞれの車線における他方の乗物の位置、ならびに他方の乗物が車線境界およびそれぞれの近隣の乗物にどれくらい近いかもしれないか、を推定するように構成されてもよい。いくつかの例では、コンピューティング装置は、コンピューティング装置によって制御される第1の乗物に対する他方の乗物の、相対的な長手方向速度および横方向速度、ならびに加速/減速を判断するように構成されてもよい。他の例では、コンピューティング装置は、それぞれの乗物と維持された距離、他方の乗物がそれぞれの乗物の1つに接近する速度などのような、他方の乗物の車線変更パターン、および道路上のそれぞれの乗物に対する他方の乗物の挙動を監視してもよい。
他の乗物および他の乗物の特性を識別するために、コンピューティング装置は第1の乗物に結合されるセンサおよび装置を用いるように構成されてもよい。たとえば、図1におけるカメラ134または図2におけるカメラ210または任意の他の画像捕捉装置などのようなカメラが、第1の乗物に結合されてもよく、コンピューティング装置と通信状態であってもよい。カメラは道路および道路付近の画像または映像を捕捉するように構成されてもよい。コンピューティング装置は、画像または映像を受けて、画像または映像に示される乗物をたとえば画像処理技術用いて識別するように構成されてもよい。コンピューティング装置は、たとえば、画像の部分を乗物のテンプレートと比較して、乗物および乗物のタイプを識別するよう構成されてもよい。さらに、コンピューティング装置は、画像捕捉装置から受けた画像を解析し、乗物の互いに対する相対的位置、乗物間の距離などを判断するように構成されてもよい。
他の例では、コンピューティング装置は、第1の乗物に結合され、コンピューティング装置と通信にあるLIDAR装置(たとえば図1におけるLIDARユニット132)から、三次元(3D)の点群を含んでもよい、光検知測距に基づく情報を受けるように構成されてもよい。3D点群は、LIDAR装置から発せられ、道路上または道路付近における乗物のような物体から反射した光に対応する点を含んでもよい。
図1でLIDARユニット132に関して記載されているように、LIDAR装置の動作は、離れた目標のレンジおよび/または他の情報を見出すよう、散乱光の特性を測定することを可能にする光学的遠隔検知技術が関与してもよい。LIDAR装置はたとえば、レーザパルスをビームとして発し、ビームを走査して二次元または三次元範囲マトリックスを生じさせるよう構成されてもよい。或る例では、範囲マトリックスを用いて、パルスの送信とそれぞれの反射信号の検出との間の時間遅延の測定によって所与の乗物または表面までの距離を判断してもよい。
或る例では、LIDAR装置は三次元において第1の乗物を取り囲む環境を走査するように構成されてもよい。いくつかの例では、第1の乗物の完全な360度の水平線を走査するために、1つより多いLIDAR装置が第1の乗物に結合されてもよい。LIDAR装置は、コンピューティング装置に、道路上でレーザが当たった乗物を表す点データの群を与えるように構成されてもよい。点は、LIDAR装置によって、レンジに加えて方位および仰角について表されてもよく、それらは、第1の乗物に取付けられるローカル座標枠に関して(X、Y、Z)点データに変換することができる。加えて、LIDAR装置は、所与の物体の表面タイプを示してもよい、道路上の物体から反射した光またはレーザの強度値を、コンピューティング装置に与えるように構成されてもよい。
さらに他の例では、コンピューティング装置は、第1の乗物に結合され、コンピューティング装置と通信状態におけるRADAR装置(たとえば図1におけるRADARユニット130)から、道路上の乗物の位置および特性に関するレーダに基づく情報を受けるよう構成されてもよい。RADAR装置は、電波を発し、その電波の、乗物の表面からはね返った電波を受けるように構成されてもよい。受取られた信号またはレーダに基づく情報は、たとえば所与の乗物の次元的特性を示してもよく、所与の乗物の動き(たとえば速度、加速度など)の特性を示してもよい。
コンピューティング装置で受取られたセンサ情報に基づいて、コンピューティング装置は、サイズ、速度、加速度、運転挙動、他の付近の乗物および物体(たとえば交通信号灯)に対する所与の乗物の相対的位置、乗物間の距離などのような、第1の乗物の付近の乗物および乗物の特性を識別するように構成されてもよい。一例において、コンピューティング装置は、画像捕捉装置、LIDAR装置、RADAR装置などのような複数源から受けた情報に基づいて乗物および乗物の特性を検出し識別するように構成されてもよい。しかしながら、他の例では、コンピューティング装置は複数源の部分集合から受けた情報に基づいて乗物およびそれらの特性を識別するように構成されてもよい。たとえば、画像捕捉装置によって捕捉された画像は、画像捕捉装置の機能不全のためにぼやけるかもしれず、他の例では、道路の詳細は霧のために画像では不明瞭になるかもしれない。これらの例では、コンピューティング装置は、LIDARおよび/またはRADARユニットから受取られた情報に基づいて乗物を識別するように構成されてもよく、画像捕捉装置から受取られた情報を無視するように構成されてもよい。
ブロック304では、方法300は、乗物から、1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れる強引な運転挙動を示す第2の乗物を識別することを含む。ブロック302で記載されるように受取られたセンサ情報に基づいて、コンピューティング装置は、強引な運転挙動を示す乗物を判断するように構成されてもよい。
強引な運転が生じるかもしれないのは、たとえば、運転者が、安全でないかもしくは違法な運転行為または他の運転者を危険にさらし得る移動交通違反の組合わせを行なうときである。強引な運転者は、交通事故の危険性を増大する態様で乗物を運転するかもしれない。強引な運転は、他の乗物に接近して後続すること(威嚇的運転)、速度制限を超えること、交通の流れから出入りするように縫うように走行すること、速度を上げて信号を越えること、乗物間に割り込んで車線変更すること、理由なく過度に車線変更すること、警笛を過度に用いること、対向交通でヘッドライトを過度に閃かすこと、他の乗物を追い越す意図の合図をしないことなどによって現れるかもしれない。ここで「過度に」とは、所与の期間において、しきい値回数に対して、繰り返された使用を指す。強引な運転は交通事故を引起さないかもしれないが、少なくとも交通事故の危険性を増大し、したがって他の乗物を防衛運転モードで運転させてもよい。コンピューティング装置で、第1の乗物に結合される複数源またはセンサから受取られるセンサ情報に基づいて、コンピューティング装置は、第1の乗物の付近にあり、そのような強引な運転挙動の現れを示す第2の乗物を識別してもよい。
ブロック306では、方法300は、1つ以上のそれぞれの特性に基づいて、第2の乗物のタイプを判断することを含む。第2の乗物のサイズ、寸法、形状などのような乗物の特性に基づいて、コンピューティング装置は第2の乗物のタイプを推定判断するように構成されてもよい。たとえば、コンピューティング装置は、第2の乗物を、オートバイ、トラック、車などとして分類するように構成されてもよい。
ブロック308では、方法300は第1の乗物と第2の乗物との間の距離を推定することを含む。上に記載されるように、LIDAR装置はたとえば、レーザパルスをビームとして発し、ビームを走査して二次元または三次元範囲マトリックスを生じさせるよう構成されてもよい。範囲マトリックスを用いて、パルスの送信とそれぞれの反射信号の検出との間の時間遅延の測定によって所与の乗物または表面までの距離を判断してもよい。同様に、RADAR装置は、上に記載されるように、電波を発し、その発せられた電波の、第2の乗物の表面からはね返った電波を受けるように構成されてもよい。第1の乗物と第2の乗物との間の距離は、電波パルスの送信とそれぞれの反射波の検出との間の時間遅延の測定によって、受取られた信号またはレーダに基づく情報から推論または推定されてもよい。さらに、第1の乗物を制御するように構成されたコンピューティング装置にLIDAR装置によって与えられる点群は、第1の乗物に関する第2の乗物の座標を示してもよい。コンピューティング装置は、さらに、第1の乗物に結合されるカメラによって捕捉された、道路上の第2の乗物を示す画像に基づいて、距離を判断するように構成されてもよい。コンピューティング装置はカメラのパラメータ(焦点深度、解像度など)にアクセスを有するように構成されてもよく、たとえば、そのようなパラメータ、第1の乗物に結合されるカメラの位置、および画像の解析に基づいて、距離を推定してもよい。
ブロック310では、方法300は、コンピューティング装置を用いて、第2の乗物の強引な運転挙動、第2の乗物のタイプ、および第1の乗物と第2の乗物との間の距離に基づいて、第1の乗物の運転挙動と関連付けられる制御戦略を修正することを含む。第1の乗物の制御システムは、予め定められるかまたは乗物の運転環境における変化に適応性がある、複数の制御戦略および関連付けられる運転挙動を支援してもよい。たとえば、一般的に、制御戦略は、幹線道路上における運転のようなさまざまな運転文脈において交通のインターアクションと関連付けられるルールの集合を含んでもよい。制御戦略は、安全性、交通規則および懸念を考慮しながら、第1の乗物の速度、および第1の乗物が走行してもよい車線を判断するルールを含んでもよい。交通上の懸念は、例として、道路形状における変化、交差点の道を譲る状況での好機に乗物を止めること、車線追跡、速度制御、道路上の他の乗物からの距離、他の乗物を通過すること、交通渋滞において並んで待つこと、対向交通車線などのような安全でない挙動をもたらす領域、強引な運転者などを含む。たとえば、強引な運転者挙動を示す乗物が識別されるとき、コンピューティング装置は、第1の乗物の速度および位置を制御する、行為に対するルールを含む制御戦略を修正または選択して、識別された乗物と予め定められる距離を安全に維持するように構成されてもよい。
ある例では、第1の制御戦略はデフォルト運転挙動を含んでもよく、第2の制御戦略は防衛運転挙動を含んでもよい。防衛運転挙動の特性は、たとえば、他の乗物の後に続くこと、識別された乗物から離れて、デフォルト運転挙動において維持される距離より大きくてもよい予め定められる安全距離を維持すること、ライトを点灯すること、識別された乗物の死角にないようにすること、第1の乗物の速度を落すこと、または第1の乗物を停止することを含んでもよい。所与の乗物が強引な運転挙動を示し、第1の乗物を制御するように構成されたコンピューティング装置によって識別されると、コンピューティング装置は第2の運転挙動(たとえば防衛運転挙動)を選択するように構成されてもよい。
第1の乗物と第2の乗物(つまり強引な運転挙動を示す乗物)との間の距離は、制御戦略の修正に影響を及ぼすかもしれない。第2の乗物が第1の乗物に接近している場合、第2の乗物の強引な運転は、第2の乗物がより遠く離れている場合よりも、第1の乗物の制御戦略に影響を及ぼすかもしれない。したがって、代替的に、または個別の制御戦略(たとえば第1の制御戦略および第2の制御戦略)間の遷移に加えて、コンピューティング装置は、第1の乗物と第2の乗物との間の距離に基づいて運転モードまたは状態の連続体から選択するように構成されてもよい。たとえば、第2の乗物が第1の乗物に近いほど、選択される制御戦略は、より防御的である。したがって、第1の乗物の制御戦略に対する第2の乗物の影響は、2つの乗物間の距離に反比例してもよい。
他の例では、コンピューティング装置は個別の制御戦略を選択するように構成されてもよく、選択された個別の制御戦略内における運転モードの連続体から運転モードを選択するように構成されてもよい。この例では、所与の制御戦略は、複数の運転ルールの集合を含んでもよく、或る運転のルールの集合は、第1の乗物の速度および方向の制御に対する行為を記述する。コンピューティング装置はさらに、2つの乗物間の距離に基づいて、複数の運転ルールの集合のうちの所与の運転ルールの集合から他の運転ルールの集合への滑らかな遷移を引起すように構成されてもよい。滑らかな遷移はたとえば、所与の運転ルールの集合から他の運転ルールの集合への遷移は、乗物の速度または方向における突然または急動性の変化として、乗物の乗員によって知覚されなくてもよいことを示してもよい。
第2の乗物の強引な運転挙動を考慮に入れることに加えて、コンピューティング装置は、さらに、第2の乗物のタイプを考慮に入れてもよい。たとえば、第2の乗物がオートバイである場合、コンピューティング装置はオートバイが潜在的にトラックより多くの強引な運転挙動を示すかもしれないことを考慮に入れてもよい。たとえば、コンピューティング装置は、オートバイが車線を割り、道路上に印された車線に従わないかもしれないことを考慮に入れるよう構成されてもよい。車線割りは、同じ向きにおいて進んでいる乗物の車線間を移動する二輪の乗物を指してもよい。したがって、車線を割っている所与のオートバイは、周囲の交通より大きい速度で車線間を移動しているかもしれない。この事例では、コンピューティング装置はたとえば、第2の乗物が車である場合よりもより防衛的な運転挙動を達成するように制御戦略を修正するよう構成されてもよい。
或る例では、所与の制御戦略は、第1の乗物を制御するアクチュエータ(たとえばスロットル、ステアリングギア、ブレーキ、アクセルまたはトランスミッションシフタ)を特徴付けるプログラムまたはコンピュータ命令を含んでもよい。所与の制御戦略は、優先順位によってランク付けされた行為の集合を含んでもよく、行為の集合は、課題(たとえば、ある位置から他の位置に運転すること)を達成するために第1の乗物がとってもよい代替的な行為を含んでもよい。代替的な行為は、第2の乗物の強引な運転、第2の乗物のタイプ、および第1の乗物と第2の乗物との間の距離の表出に基づいてランク付けされてもよい。
他の例では、複数の制御戦略(たとえば、プログラム)は、コンピューティング装置に行為を継続的に提案してもよい。コンピューティング装置はどの戦略が選択されてもよいかを判断するように構成されてもよく、または、たとえば、重み付けされた目的の集合(安全性、速度など)に基づいて制御戦略を修正するように構成されてもよい。重み付けされた目的の集合の重みは、第2の乗物の強引な運転特性の関数、第2の乗物のタイプ、および/または第1の乗物と第2の乗物との間の距離であってもよい。重み付けされた目的の集合の評価に基づいて、コンピューティング装置は、たとえば、複数の制御戦略およびそれぞれの行為の集合をランク付けし、そのランク付けに基づいて所与の戦略およびそれぞれの行為の集合を選択または修正するように構成されてもよい。
コンピューティング装置は、図1に関して記載されたナビゲーションおよび経路システム148などのようなナビゲーションおよび経路システムを含むか、それと結合されるか、またはそれと通信状態にあってもよい。ナビゲーションおよび経路システムを用いて、コンピューティング装置は第1の乗物に対する運転経路または軌道を判断するように構成されてもよい。コンピューティング装置は、加えて、強引な運転挙動を呈すると識別された乗物、識別された乗物のタイプ、および第1の乗物と識別された乗物との間の距離を考慮するよう、第1の乗物の動作中に軌道を動的に更新するように構成されてもよい。
いくつかの例では、コンピューティング装置は、強引な運転挙動を示す複数の乗物を識別してもよい。これらの例では、コンピューティング装置は、各識別された乗物のそれぞれの特性、各乗物のタイプ、および第1の乗物と各識別された乗物との間の距離に基づいて、それぞれの乗物に与えられる優先順位を示すそれぞれの重みを割当てるように構成されてもよい。例示のための例として、第1の乗物に接近しており、車線間においてそれているオートバイは、第1の乗物の前方の速度制限を超える離れた車よりも大きな重み割当てられてもよい。したがって、第1の乗物の制御戦略を修正するとき、コンピューティング装置は、オートバイに対して、より多くの影響または重みを与えるように構成されてもよい。さらに、それぞれの乗物に割当てられたそれぞれの重みに基づいて、コンピューティング装置は、第1の乗物の付近において強引な運転を呈するそれぞれの乗物の存在から、最も安全な軌道であってもよい、修正された軌道を判断するように構成されてもよい。コンピューティング装置は、さらに、それぞれの乗物のそれぞれの特性(たとえば、それぞれの乗物のタイプ、第1の乗物からの距離など)に基づいて、修正される軌道を判断してもよい。
これらの例および運転状況は例示のみに対するものである。他の例ならびに制御戦略および運転挙動も、同様に可能である。
ブロック312では、方法300は、コンピューティング装置を用いて、修正された制御戦略に基づいて、第1の乗物を制御することを含む。例では、コンピューティング装置は、修正された制御戦略と関連付けられる行為の集合またはルールの集合を用いて、第1の乗物のアクチュエータを制御するように構成されてもよい。たとえば、コンピューティング装置は、修正された運転挙動に基づいて、乗物の並進速度もしくは回転速度またはそれら両方を調整するように構成されてもよい。
図4A〜図4Bは、例示的な実施の形態に従って、修正された制御戦略に基づいて、強引な運転挙動を示す第2の乗物404を識別することに応答して、第1の乗物402を制御する例を示す。図4Aは、道路406上を走行する両方の乗物402および404を示す。乗物404は、他の乗物408Aに接近して(たとえば乗物408Aからしきい値距離内において)後続し、たとえば、乗物404の運転者は過度に警笛を用いているかもしれない。図1におけるマイクロホン156などのようなマイクロホンは、第1の乗物に結合され、およびコンピューティング装置と通信状態であってもよい。たとえば、コンピューティング装置は、マイクロホンを介して、乗物404の警笛の音を示す音声信号を受けてもよい。コンピューティング装置は、音声信号を解析し、乗物404の警笛の使用は過剰か、つまり、警笛は、所与の期間内においてしきい値回数に対して繰り返し用いられるかどうかを判断してもよい。他の乗物408Bは、図4Aに示されるように、乗物404および408Aの車線の左側の車線上にあるが、乗物404に近くあり得る。さらに、乗物404は、乗物408Bの前で左側車線に移動し、乗物408A通過するように加速するかもしれない。コンピューティング装置は、乗物402を制御するように構成されて、乗物402に結合されるセンサシステムから受取られる情報に基づいて、 乗物404の挙動を強引な運転挙動として識別し指定してもよい。したがって、コンピューティング装置は、乗物404の強引な運転挙動から、乗物402に速度を落とさせ、より安全な車線として最も左の車線に移動させるよう構成されてもよい。
図4Bは、乗物404が強引な運転挙動を示している他の運転状況を示す。図4Bでは、乗物404はジグザグに進んでいる(乗物402、408Aおよび408B間の代替的な方向における急旋回によって進んでいる)。コンピューティング装置は、乗物402を制御するように構成されて、乗物402に結合されるセンサシステムから受取られる情報に基づいて、 乗物404のジグザグ挙動を強引な運転挙動として識別し指定してもよい。したがって、コンピューティング装置は、乗物404の強引な運転挙動から、乗物402に速度を落とさせ、車線を変更するよう構成されてもよい。
これらの制御行為および運転状況は例示のみに対するものである。他の行為および状況も同様に可能である。一例では、コンピューティング装置は、人間の運転者が乗物を制御することができるようになるまで、暫定的な制御として、修正された制御戦略に基づいて乗物を制御するように構成されてもよい。
いくつかの実施の形態では、開示された方法は、機械読取可能フォーマットでコンピュータ読取可能記憶媒体上に、または他の非一時的な媒体もしくは製造品上にエンコードされたコンピュータプログラム命令として実施されてもよい。図5は、ここで呈示された少なくともいくつかの実施の形態に従って配される、コンピューティング装置上においてコンピュータプロセスを実行することに対してコンピュータプログラムを含む、例示的なプログラム製品500の概念的部分図を示す概略図である。一実施の形態では、例示的なコンピュータプログラム製品500は信号担持媒体501を用いて与えられる。信号担持媒体501は、1つ以上のプロセッサ(たとえばコンピューティング装置111におけるプロセッサ113)によって実行されると、図1〜図4Bに関して上に記載された機能または機能の一部を与えてもよい、1つ以上のプログラム命令502を含んでもよい。したがって、たとえば、図3に示される実施の形態を参照して、ブロック302〜312の1つ以上の特徴は、信号担持媒体501と関連付けられる1つ以上の命令によって引受けられてもよい。加えて、図5におけるプログラム命令502は、同様に、例示的な命令を記載する。
いくつかの例では、信号担持媒体501は、ハードディスクドライブ、コンパクトディスク(CD)、デジタルビデオティスク(DVD)、デジタルテープおよびメモリなどのような、コンピュータ読取可能媒体503を包含してもよいが、それらに限定はされない。いくつかの実現例では、信号担持媒体501は、メモリ、読出/書込(R/W)CD、読出/書込DVDなどのようなコンピュータ記録可能媒体504を包含してもよいが、それらに限定はされない。いくつかの実現例では、信号担持媒体501は、デジタルおよび/またはアナログ通信媒体(たとえば光ファイバケーブル、導波路、結線通信リンク、無線通信リンクなど)のような通信媒体505を包含してもよいが、それらに限定はされない。したがって、たとえば、信号担持媒体501は、無線形式の通信媒体505(たとえばIEEE 802.11規格または他の伝送プロトコルに従う無線通信媒体)によって搬送されてもよい。
1つ以上のプログラミング命令502は、たとえばコンピュータ実行可能な、および/または、論理で実現される命令であってもよい。いくつかの例では、図1〜図4Bに関して記載されたコンピューティング装置などのようなコンピューティング装置は、コンピュータ読取可能媒体503、コンピュータ記録可能媒体504、および/または通信媒体505の1つ以上によってコンピューティング装置に搬送されるプログラミング命令502に応答してさまざまな動作、機能または行為を与えるように構成されてもよい。ここに記載された構成は例示の目的に対するのみであることが理解されるべきである。したがって、当業者は、他の構成および他の要素(たとえばマシン、インターフェイス、機能、順序および機能のクループ化など)を代りに用いることができ、いくつかの要素は所望の結果に従ってすべて省略されてもよいことを、十分に理解する。さらに、記載される要素の多くは、個別の構成要素もしくは分散された構成要素として、または他の構成要素と関連して、任意の好適な組合わせおよび位置で実現されてもよい機能エンティティである。
さまざまな局面および実施の形態がここに開示されたが、他の局面および実施の形態は当業者に明らかになる。ここに開示されたさまざまな局面および実施の形態は、例示の目的に対するものであり、限定的には意図されず、真の範囲は以下の特許請求の範囲によって、そのような特許請求の範囲が与えられる等価物の完全な範囲とともに示される。さらに、ここに用いられる用語は、特定の実施の形態のみを記載するためにあり、限定的であるようには意図されないことが理解される。

Claims (20)

  1. コンピューティング装置によって、第1の乗物の走行の道路上における乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ることを含み、前記コンピューティング装置は前記第1の乗物を自立動作モードで制御するように構成され、さらに、
    前記乗物から、前記1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れた強引な運転挙動を示す第2の乗物を識別することと、
    前記1つ以上のそれぞれの特性に基づいて、前記第2の乗物のタイプを判断することと、
    前記第1の乗物と前記第2の乗物との間の距離を推定することと、
    前記コンピューティング装置を用いて、前記第2の乗物の前記強引な運転挙動、前記第2の乗物のタイプ、および前記第1の乗物と前記第2の乗物との間の距離に基づいて、前記第1の乗物の運転挙動と関連付けられる制御戦略を修正することと、
    前記コンピューティング装置を用いて、修正された制御戦略に基づいて、前記第1の乗物を制御することとを含む、方法。
  2. 前記安全でないかまたは違法な運転行為は、速度制限を超えること、所与の道路状態に対して高速で運転すること、理由なく過度に車線変更すること、他の乗物を追い越す意図の合図をしないこと、他の乗物に対して威嚇的運転を行なうこと、警笛を過度に用いること、および対向交通でヘッドライトを過度に閃かすこと、の中の1つを含む、請求項1に記載の方法。
  3. 前記センサ情報を受取ることは、前記第1の乗物に結合される画像捕捉装置から画像を受取ることを含み、
    前記第2の乗物を識別することは前記画像において物体を識別することを含み、前記画像捕捉装置は、カメラまたは光検知測距(LIDAR)装置の1つである、請求項1に記載の方法。
  4. 前記第2の乗物のそれぞれの特性は、前記第2の乗物の長手方向速度、前記第2の乗物の横方向速度、前記第2の乗物の動きの方向、前記第2の乗物のサイズ、道路上の前記第2の乗物のそれぞれの位置、前記第2の乗物の軌道、および前記第2の乗物の加速または減速を含む、請求項1に記載の方法。
  5. 前記方法はさらに、前記第1の乗物に結合されるLIDAR装置からの光検知測距に基づく情報または前記第1の乗物に結合されるカメラによって捕捉される前記第2の乗物の画像の1つ以上を受取ることを含み、
    前記光検知測距に基づく情報は、前記LIDAR装置から発し、前記第2の乗物から反射された光に基づく点の集合を含む三次元(3D)の点群を含み、前記方法はさらに、
    前記第1の乗物に結合されるレーダ(RADAR)装置から、前記第2の乗物の1つ以上のそれぞれの動き特性に関係する、レーダに基づく情報を受取ることと、
    前記光検知測距に基づく情報および前記画像の1つ以上ならびに前記レーダに基づく情報に基づいて、前記第1の乗物の1つ以上のそれぞれの特性を判断することとを含む、請求項4に記載の方法。
  6. 前記修正された制御戦略に基づいて前記第1の乗物を制御することは、(i)前記第1の乗物の速度を低減すること、(ii)前記第2の乗物から予め定められる安全距離を維持すること、(iii)前記第2の乗物の死角に入らないようにすること、(iv)車線を変更して前記第2の乗物から離れること、および(v)前記第1の乗物を停止させること、の中の1つ以上を含む、請求項1に記載の方法。
  7. 前記修正された制御戦略に基づいて前記第1の乗物を制御することは、前記第1の乗物の所望の経路を判断することを含み、前記第1の乗物の所望の経路を判断することは、前記第2の乗物の前記強引な運転挙動、前記第2の乗物のタイプ、および前記第1の乗物と前記第2の乗物との間の距離を考慮に入れる、請求項1に記載の方法。
  8. コンピューティング装置に機能を実行させるよう前記コンピューティング装置によって実行可能な命令がその上に保存される非一時的なコンピュータ読取可能媒体であって、前記機能は、
    第1の乗物の走行の道路上における乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ることと、
    前記乗物から、前記1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れた強引な運転挙動を示す第2の乗物を識別することと、
    前記1つ以上のそれぞれの特性に基づいて、前記第2の乗物のタイプを判断することと、
    前記第1の乗物と前記第2の乗物との間の距離を推定することと、
    前記第2の乗物の前記強引な運転挙動、前記第2の乗物のタイプ、および前記第1の乗物と前記第2の乗物との間の距離に基づいて、前記第1の乗物の運転挙動と関連付けられる制御戦略を修正することと、
    修正された制御戦略に基づいて、前記第1の乗物を制御することとを含む、非一時的なコンピュータ読取可能媒体。
  9. 前記安全でないかまたは違法な運転行為は、速度制限を超えること、所与の道路状態に対して高速で運転すること、理由なく過度に車線変更すること、他の乗物を追い越す意図の合図をしないこと、他の乗物に対して威嚇的運転を行なうこと、警笛を過度に用いること、および対向交通でヘッドライトを過度に閃かすこと、の中の1つを含む、請求項8に記載の非一時的なコンピュータ読取可能媒体。
  10. 前記センサ情報を受取る機能は、前記第1の乗物に結合される画像捕捉装置から画像を受取ることを含み、
    前記第2の乗物を識別することは前記画像において物体を識別することを含み、前記画像捕捉装置は、カメラまたは光検知測距(LIDAR)装置の1つである、請求項8に記載の非一時的なコンピュータ読取可能媒体。
  11. 前記第2の乗物のそれぞれの特性は、前記第2の乗物の長手方向速度、前記第2の乗物の横方向速度、前記第2の乗物の動きの方向、前記第2の乗物のサイズ、道路上の前記第2の乗物のそれぞれの位置、前記第2の乗物の軌道、および前記第2の乗物の加速または減速を含む、請求項8に記載の非一時的なコンピュータ読取可能媒体。
  12. 前記機能は、さらに、前記第1の乗物に結合されるLIDAR装置からの光検知測距に基づく情報または前記第1の乗物に結合されるカメラによって捕捉される前記第2の乗物の画像の1つ以上を受取ることを含み、
    前記光検知測距に基づく情報は、前記LIDAR装置から発し、前記第2の乗物から反射された光に基づく点の集合を含む三次元(3D)の点群を含み、前記機能はさらに、
    前記第1の乗物に結合されるレーダ(RADAR)装置から、前記第2の乗物の1つ以上のそれぞれの動き特性に関係する、レーダに基づく情報を受取ることと、
    前記光検知測距に基づく情報および前記画像の1つ以上ならびに前記レーダに基づく情報に基づいて、前記第1の乗物の1つ以上のそれぞれの特性を判断することとを含む、請求項11に記載の非一時的なコンピュータ読取可能媒体。
  13. 前記修正された制御戦略に基づいて、前記第1の乗物を制御する機能は、(i)前記第1の乗物の速度を低減すること、(ii)前記第2の乗物から予め定められる安全距離を維持すること、(iii)前記第2の乗物の死角に入らないようにすること、(iv)車線を変更して前記第2の乗物から離れること、および(v)前記第1の乗物を停止させること、の1つ以上を含む、請求項8に記載の非一時的なコンピュータ読取可能媒体。
  14. 前記コンピューティング装置は前記第1の乗物を自立動作モードで制御するように構成される、請求項8に記載の非一時的なコンピュータ読取可能媒体。
  15. 制御システムであって、
    少なくとも1つのプロセッサと、
    前記少なくとも1つのプロセッサによる実行で前記制御システムに機能を実行させる命令をその上に保存したメモリとを含み、前記機能は、
    第1の乗物の走行の道路上における乗物の1つ以上のそれぞれの特性を示すセンサ情報を受取ることと、
    前記乗物から、前記1つ以上のそれぞれの特性に基づいて、安全でないかまたは違法な運転行為として現れた強引な運転挙動を示す第2の乗物を識別することと、
    前記1つ以上のそれぞれの特性に基づいて、前記第2の乗物のタイプを判断することと、
    前記第1の乗物と前記第2の乗物との間の距離を推定することと、
    前記第2の乗物の前記強引な運転挙動、前記第2の乗物のタイプ、および前記第1の乗物と前記第2の乗物との間の距離に基づいて、前記第1の乗物の運転挙動と関連付けられる制御戦略を修正することと、
    修正された制御戦略に基づいて、前記第1の乗物を制御することとを含む、制御システム。
  16. 前記安全でないかまたは違法な運転行為は、速度制限を超えること、所与の道路状態に対して高速で運転すること、理由なく過度に車線変更すること、他の乗物を追い越す意図の合図をしないこと、他の乗物に対して威嚇的運転を行なうこと、警笛を過度に用いること、および対向交通でヘッドライトを過度に閃かすこと、の中の1つを含む、請求項15に記載の制御システム。
  17. 前記センサ情報を受取る機能は、
    前記第1の乗物に結合される画像捕捉装置から画像を受取ることを含み、前記第2の乗物を識別することは前記画像において物体を識別することを含み、前記画像捕捉装置は、カメラまたは光検知測距(LIDAR)装置の1つである、請求項15に記載の制御システム。
  18. 前記第2の乗物のそれぞれの特性は、前記第2の乗物の長手方向速度、前記第2の乗物の横方向速度、前記第2の乗物の動きの方向、前記第2の乗物のサイズ、道路上の前記第2の乗物のそれぞれの位置、前記第2の乗物の軌道、および前記第2の乗物の加速または減速を含む、請求項15に記載の制御システム。
  19. 前記制御システムはさらに、前記第1の乗物に結合されるLIDAR装置を含み、前記LIDAR装置は、前記LIDAR装置から発し、前記第2の乗物から反射された光に基づく点の集合を含む三次元(3D)の点群を含む光検知測距に基づく情報を与えるように構成され、前記制御システムはさらに、
    前記第1の乗物に結合され、前記第2の乗物の画像を与えるように構成されたカメラと、
    前記第1の乗物に結合され、前記第2の乗物の1つ以上のそれぞれの動き特性に関係する、レーダに基づく情報を与えるように構成されるレーダ(RADAR)装置とを含み、
    前記機能はさらに、前記光検知測距に基づく情報および前記画像の1つ以上ならびに前記レーダに基づく情報に基づいて、前記第1の乗物の1つ以上のそれぞれの特性を判断することを含む、請求項18に記載の制御システム。
  20. 前記修正された制御戦略に基づいて、前記第1の乗物を制御する機能は、(i)前記第1の乗物の速度を低減すること、(ii)前記第2の乗物から予め定められる安全距離を維持すること、(iii)前記第2の乗物の死角に入らないようにすること、(iv)車線を変更して前記第2の乗物から離れること、および(v)前記第1の乗物を停止させること、の中の1つ以上を含む、請求項15に記載の制御システム。
JP2015559238A 2013-02-21 2014-01-16 運転モード調整 Pending JP2016509971A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/772,615 US10347127B2 (en) 2013-02-21 2013-02-21 Driving mode adjustment
US13/772,615 2013-02-21
PCT/US2014/011779 WO2014130178A1 (en) 2013-02-21 2014-01-16 A method to detect nearby aggressive drivers and adjust driving modes

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017120150A Division JP6782197B2 (ja) 2013-02-21 2017-06-20 付近の強引な運転者を検出し、運転モードを調整する方法

Publications (1)

Publication Number Publication Date
JP2016509971A true JP2016509971A (ja) 2016-04-04

Family

ID=51351828

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015559238A Pending JP2016509971A (ja) 2013-02-21 2014-01-16 運転モード調整
JP2017120150A Active JP6782197B2 (ja) 2013-02-21 2017-06-20 付近の強引な運転者を検出し、運転モードを調整する方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017120150A Active JP6782197B2 (ja) 2013-02-21 2017-06-20 付近の強引な運転者を検出し、運転モードを調整する方法

Country Status (6)

Country Link
US (1) US10347127B2 (ja)
EP (1) EP2958783B1 (ja)
JP (2) JP2016509971A (ja)
KR (2) KR20170090520A (ja)
CN (1) CN105008200B (ja)
WO (1) WO2014130178A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018041205A (ja) * 2016-09-06 2018-03-15 シャープ株式会社 自律走行装置
JP2019506324A (ja) * 2015-12-31 2019-03-07 ソニー株式会社 自動運転車のためのホーンの適応検出および適用のための方法およびシステム
JP2019127196A (ja) * 2018-01-26 2019-08-01 Kddi株式会社 周辺走行中の被観測車両の運転特性を推定するプログラム、装置及び方法
JP2020525916A (ja) * 2017-07-05 2020-08-27 パナソニックIpマネジメント株式会社 運転中の自動運転車による非行行動を検出するシステムおよび方法
CN112140895A (zh) * 2019-06-28 2020-12-29 丰田自动车株式会社 车辆的车顶结构
JP2021196978A (ja) * 2020-06-16 2021-12-27 トヨタ自動車株式会社 情報処理装置、プログラム、及び情報処理方法

Families Citing this family (226)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5316572B2 (ja) * 2011-03-28 2013-10-16 トヨタ自動車株式会社 物体認識装置
US9171268B1 (en) 2011-04-22 2015-10-27 Angel A. Penilla Methods and systems for setting and transferring user profiles to vehicles and temporary sharing of user profiles to shared-use vehicles
US11270699B2 (en) 2011-04-22 2022-03-08 Emerging Automotive, Llc Methods and vehicles for capturing emotion of a human driver and customizing vehicle response
US9536197B1 (en) 2011-04-22 2017-01-03 Angel A. Penilla Methods and systems for processing data streams from data producing objects of vehicle and home entities and generating recommendations and settings
US9180783B1 (en) 2011-04-22 2015-11-10 Penilla Angel A Methods and systems for electric vehicle (EV) charge location color-coded charge state indicators, cloud applications and user notifications
US9189900B1 (en) 2011-04-22 2015-11-17 Angel A. Penilla Methods and systems for assigning e-keys to users to access and drive vehicles
US9139091B1 (en) 2011-04-22 2015-09-22 Angel A. Penilla Methods and systems for setting and/or assigning advisor accounts to entities for specific vehicle aspects and cloud management of advisor accounts
US10286919B2 (en) 2011-04-22 2019-05-14 Emerging Automotive, Llc Valet mode for restricted operation of a vehicle and cloud access of a history of use made during valet mode use
US9285944B1 (en) 2011-04-22 2016-03-15 Angel A. Penilla Methods and systems for defining custom vehicle user interface configurations and cloud services for managing applications for the user interface and learned setting functions
US9371007B1 (en) 2011-04-22 2016-06-21 Angel A. Penilla Methods and systems for automatic electric vehicle identification and charging via wireless charging pads
US10289288B2 (en) 2011-04-22 2019-05-14 Emerging Automotive, Llc Vehicle systems for providing access to vehicle controls, functions, environment and applications to guests/passengers via mobile devices
US9963145B2 (en) 2012-04-22 2018-05-08 Emerging Automotive, Llc Connected vehicle communication with processing alerts related to traffic lights and cloud systems
US9809196B1 (en) 2011-04-22 2017-11-07 Emerging Automotive, Llc Methods and systems for vehicle security and remote access and safety control interfaces and notifications
US9104537B1 (en) 2011-04-22 2015-08-11 Angel A. Penilla Methods and systems for generating setting recommendation to user accounts for registered vehicles via cloud systems and remotely applying settings
US11370313B2 (en) 2011-04-25 2022-06-28 Emerging Automotive, Llc Methods and systems for electric vehicle (EV) charge units and systems for processing connections to charge units
US9229905B1 (en) 2011-04-22 2016-01-05 Angel A. Penilla Methods and systems for defining vehicle user profiles and managing user profiles via cloud systems and applying learned settings to user profiles
US11203355B2 (en) 2011-04-22 2021-12-21 Emerging Automotive, Llc Vehicle mode for restricted operation and cloud data monitoring
US11132650B2 (en) 2011-04-22 2021-09-28 Emerging Automotive, Llc Communication APIs for remote monitoring and control of vehicle systems
US9365188B1 (en) 2011-04-22 2016-06-14 Angel A. Penilla Methods and systems for using cloud services to assign e-keys to access vehicles
US10572123B2 (en) 2011-04-22 2020-02-25 Emerging Automotive, Llc Vehicle passenger controls via mobile devices
US9230440B1 (en) 2011-04-22 2016-01-05 Angel A. Penilla Methods and systems for locating public parking and receiving security ratings for parking locations and generating notifications to vehicle user accounts regarding alerts and cloud access to security information
US9288270B1 (en) 2011-04-22 2016-03-15 Angel A. Penilla Systems for learning user preferences and generating recommendations to make settings at connected vehicles and interfacing with cloud systems
US9215274B2 (en) 2011-04-22 2015-12-15 Angel A. Penilla Methods and systems for generating recommendations to make settings at vehicles via cloud systems
US9697503B1 (en) 2011-04-22 2017-07-04 Angel A. Penilla Methods and systems for providing recommendations to vehicle users to handle alerts associated with the vehicle and a bidding market place for handling alerts/service of the vehicle
US9123035B2 (en) 2011-04-22 2015-09-01 Angel A. Penilla Electric vehicle (EV) range extending charge systems, distributed networks of charge kiosks, and charge locating mobile apps
US9346365B1 (en) 2011-04-22 2016-05-24 Angel A. Penilla Methods and systems for electric vehicle (EV) charging, charging unit (CU) interfaces, auxiliary batteries, and remote access and user notifications
US11294551B2 (en) 2011-04-22 2022-04-05 Emerging Automotive, Llc Vehicle passenger controls via mobile devices
US9493130B2 (en) 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
US10824330B2 (en) 2011-04-22 2020-11-03 Emerging Automotive, Llc Methods and systems for vehicle display data integration with mobile device data
US10217160B2 (en) 2012-04-22 2019-02-26 Emerging Automotive, Llc Methods and systems for processing charge availability and route paths for obtaining charge for electric vehicles
US9648107B1 (en) 2011-04-22 2017-05-09 Angel A. Penilla Methods and cloud systems for using connected object state data for informing and alerting connected vehicle drivers of state changes
US9348492B1 (en) 2011-04-22 2016-05-24 Angel A. Penilla Methods and systems for providing access to specific vehicle controls, functions, environment and applications to guests/passengers via personal mobile devices
US9581997B1 (en) 2011-04-22 2017-02-28 Angel A. Penilla Method and system for cloud-based communication for automatic driverless movement
US9818088B2 (en) 2011-04-22 2017-11-14 Emerging Automotive, Llc Vehicles and cloud systems for providing recommendations to vehicle users to handle alerts associated with the vehicle
US9582006B2 (en) * 2011-07-06 2017-02-28 Peloton Technology, Inc. Systems and methods for semi-autonomous convoying of vehicles
US9063549B1 (en) * 2013-03-06 2015-06-23 Google Inc. Light detection and ranging device with oscillating mirror driven by magnetically interactive coil
US8818681B1 (en) 2013-07-24 2014-08-26 Google Inc. Detecting and responding to tailgaters
US8989944B1 (en) * 2013-11-26 2015-03-24 Google Inc. Methods and devices for determining movements of an object in an environment
US10318828B2 (en) * 2013-12-19 2019-06-11 Harman International Industries, Incorporated Vehicle behavior analysis
KR20150087985A (ko) * 2014-01-23 2015-07-31 한국전자통신연구원 안전운행정보 표출 장치 및 그 방법
EP2918974B1 (en) * 2014-03-11 2019-01-16 Volvo Car Corporation Method and system for determining a position of a vehicle
KR102051142B1 (ko) * 2014-06-13 2019-12-02 현대모비스 주식회사 차량용 운전자 위험 지수 관리 시스템 및 그 방법
KR20170041162A (ko) * 2014-09-05 2017-04-14 요코하마 고무 가부시키가이샤 충돌 회피 시스템 및 충돌 회피 방법
US9731713B2 (en) * 2014-09-10 2017-08-15 Volkswagen Ag Modifying autonomous vehicle driving by recognizing vehicle characteristics
US9764689B2 (en) * 2014-10-08 2017-09-19 Livio, Inc. System and method for monitoring driving behavior
US9892296B2 (en) 2014-11-12 2018-02-13 Joseph E. Kovarik Method and system for autonomous vehicles
CN105654023B (zh) * 2014-11-12 2019-05-03 株式会社理光 识别物体危险性的方法和装置
CN106794840B (zh) * 2014-11-27 2019-05-28 日立汽车系统株式会社 车辆行驶控制装置
TWI658441B (zh) * 2015-01-08 2019-05-01 緯創資通股份有限公司 警示牌設置裝置及其控制方法
US9555802B2 (en) * 2015-03-25 2017-01-31 Honda Motor Co., Ltd. Driving support device
US9555736B2 (en) 2015-04-03 2017-01-31 Magna Electronics Inc. Vehicle headlamp control using sensing and communication systems
KR101697857B1 (ko) * 2015-04-08 2017-01-18 엘지전자 주식회사 이동 로봇 및 그의 위치인식방법
DE102015007592A1 (de) * 2015-06-16 2016-12-22 Audi Ag Trajektoriebasierte Fahrwerksregelung
US9478137B1 (en) 2015-06-17 2016-10-25 Ford Global Technologies, Llc Detecting and communicating lane splitting maneuver
US10169400B2 (en) 2015-06-19 2019-01-01 International Business Machines Corporation Geographic space management
US9646402B2 (en) 2015-06-19 2017-05-09 International Business Machines Corporation Geographic space management
US9639537B2 (en) 2015-06-19 2017-05-02 International Business Machines Corporation Geographic space management
US10019446B2 (en) 2015-06-19 2018-07-10 International Business Machines Corporation Geographic space management
US9646493B2 (en) 2015-06-19 2017-05-09 International Business Machines Corporation Management of moving objects
US9497590B1 (en) 2015-06-19 2016-11-15 International Business Machines Corporation Management of moving objects
US10749734B2 (en) 2015-07-07 2020-08-18 International Business Machines Corporation Management of events and moving objects
KR20170015114A (ko) 2015-07-30 2017-02-08 삼성전자주식회사 자율 주행 차량 및 자율 주행 차량 제어 방법
KR20170015115A (ko) 2015-07-30 2017-02-08 삼성전자주식회사 자율 주행 차량 및 자율 주행 차량 제어 방법
KR20170019736A (ko) 2015-08-12 2017-02-22 주식회사 아이온커뮤니케이션즈 다자간 스마트카의 정보에 기초하는 스마트카 클라우드 시스템
US9682707B1 (en) 2015-08-27 2017-06-20 Waymo Llc Detecting and responding to parking behaviors in autonomous vehicles
US10358143B2 (en) 2015-09-01 2019-07-23 Ford Global Technologies, Llc Aberrant driver classification and reporting
GB2560120B (en) * 2015-10-20 2021-03-10 Ford Global Tech Llc Facilitating lane-splitting by motorcycles
US9598076B1 (en) * 2015-10-22 2017-03-21 Ford Global Technologies, Llc Detection of lane-splitting motorcycles
US9517767B1 (en) * 2015-11-04 2016-12-13 Zoox, Inc. Internal safety systems for robotic vehicles
US9864918B2 (en) 2015-11-04 2018-01-09 Ford Global Technologies, Llc Predicting vehicle movements based on driver body language
EP4180893A1 (en) * 2015-11-04 2023-05-17 Zoox, Inc. Teleoperation system and method for trajectory modification of autonomous vehicles
US9494940B1 (en) 2015-11-04 2016-11-15 Zoox, Inc. Quadrant configuration of robotic vehicles
WO2017086827A1 (en) 2015-11-20 2017-05-26 Motorola Solutions, Inc. Method, device, and system for detecting a dangerous road event and/or condition
US9460616B1 (en) 2015-12-16 2016-10-04 International Business Machines Corporation Management of mobile objects and service platform for mobile objects
US9865163B2 (en) 2015-12-16 2018-01-09 International Business Machines Corporation Management of mobile objects
US10594806B2 (en) 2015-12-16 2020-03-17 International Business Machines Corporation Management of mobile objects and resources
US9578093B1 (en) 2015-12-16 2017-02-21 International Business Machines Corporation Geographic space management
US9513134B1 (en) 2015-12-16 2016-12-06 International Business Machines Corporation Management of evacuation with mobile objects
US9467839B1 (en) 2015-12-16 2016-10-11 International Business Machines Corporation Management of dynamic events and moving objects
US9805598B2 (en) 2015-12-16 2017-10-31 International Business Machines Corporation Management of mobile objects
CN105459891A (zh) * 2015-12-21 2016-04-06 延锋伟世通电子科技(上海)有限公司 汽车智能化行车制动控制系统
DE102015226232A1 (de) * 2015-12-21 2017-06-22 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Kollisionsvermeidung eines Kraftfahrzeuges mit einem Einsatzfahrzeug und ein diesbezügliches System und Kraftfahrzeug
US9884622B2 (en) * 2015-12-29 2018-02-06 Thunder Power New Energy Vehicle Development Company Limited Vehicle condition detection and warning system
US9956956B2 (en) * 2016-01-11 2018-05-01 Denso Corporation Adaptive driving system
US10460600B2 (en) * 2016-01-11 2019-10-29 NetraDyne, Inc. Driver behavior monitoring
US10165171B2 (en) 2016-01-22 2018-12-25 Coban Technologies, Inc. Systems, apparatuses, and methods for controlling audiovisual apparatuses
US11220258B2 (en) * 2016-01-26 2022-01-11 Cambridge Mobile Telematics Inc. Systems and methods for sensor-based vehicle crash prediction, detection, and reconstruction
US9827936B2 (en) * 2016-02-11 2017-11-28 Robert Bosch Gmbh Vehicle collision energy absorbance with magnetorheological or electrorheological material
DE102016002768C5 (de) * 2016-03-05 2024-05-02 Audi Ag Verfahren zum Betreiben eines mehrere Kraftfahrzeuge umfassenden Kommunikationsnetzes und Kraftfahrzeug
CN107221182B (zh) * 2016-03-21 2020-08-14 中国移动通信集团广东有限公司 车辆终端在车联网中附着的方法、道路分段设备、车辆终端
US10068477B2 (en) * 2016-04-29 2018-09-04 Ford Global Technologies, Llc System and method for detecting and communicating slipping of non-connected vehicles
US20170322553A1 (en) * 2016-05-04 2017-11-09 Delphi Technologies, Inc. Automated Vehicle Operating System With Driving-Rule Modification Based On Observation Of Another Vehicle
US11067984B2 (en) * 2016-05-04 2021-07-20 Motional Ad Llc Automated vehicle operating system with driving-rule modification based on observation of another vehicle
US10152858B2 (en) 2016-05-09 2018-12-11 Coban Technologies, Inc. Systems, apparatuses and methods for triggering actions based on data capture and characterization
US10370102B2 (en) 2016-05-09 2019-08-06 Coban Technologies, Inc. Systems, apparatuses and methods for unmanned aerial vehicle
US10789840B2 (en) * 2016-05-09 2020-09-29 Coban Technologies, Inc. Systems, apparatuses and methods for detecting driving behavior and triggering actions based on detected driving behavior
US10086830B2 (en) * 2016-05-23 2018-10-02 Ford Global Technologies, Llc Accident attenuation systems and methods
US9945679B2 (en) 2016-06-27 2018-04-17 International Business Machines Corporation Personalized travel routes to reduce stress
US10093311B2 (en) 2016-07-06 2018-10-09 Waymo Llc Testing predictions for autonomous vehicles
WO2018026733A1 (en) 2016-07-31 2018-02-08 Netradyne Inc. Determining causation of traffic events and encouraging good driving behavior
DE102016215587A1 (de) 2016-08-19 2018-02-22 Audi Ag Verfahren zum Betreiben eines zumindest teilautonom betriebenen Kraftfahrzeugs und Kraftfahrzeug
WO2018037900A1 (ja) 2016-08-22 2018-03-01 ソニー株式会社 運転支援装置および方法、移動体、並びにプログラム
CN109564734B (zh) * 2016-08-22 2022-11-01 索尼公司 驾驶辅助装置、驾驶辅助方法、移动体和程序
CN106080397B (zh) * 2016-08-25 2019-11-26 北京奇虎科技有限公司 自适应巡航系统及车载设备
US10366310B2 (en) * 2016-09-12 2019-07-30 Aptiv Technologies Limited Enhanced camera object detection for automated vehicles
US10502574B2 (en) * 2016-09-20 2019-12-10 Waymo Llc Devices and methods for a sensor platform of a vehicle
US10049328B2 (en) * 2016-10-13 2018-08-14 Baidu Usa Llc Group driving style learning framework for autonomous vehicles
US20180113209A1 (en) * 2016-10-21 2018-04-26 Waymo Llc Radar generated occupancy grid for autonomous vehicle perception and planning
EP3532801B1 (en) 2016-10-31 2020-12-16 Mobileye Vision Technologies Ltd. Systems and methods for navigating lane merges and lane splits
KR20180060784A (ko) * 2016-11-29 2018-06-07 삼성전자주식회사 비정상 객체 판단 방법 및 장치
US10095238B2 (en) * 2016-12-14 2018-10-09 Ford Global Technologies, Llc Autonomous vehicle object detection
WO2018117631A1 (en) 2016-12-21 2018-06-28 Samsung Electronics Co., Ltd. Electronic apparatus and method of operating the same
US10986515B2 (en) * 2017-02-01 2021-04-20 Veniam, Inc. Systems and methods for context-aware and profile-based security in a network of moving things, for example including autonomous vehicles
RU2734732C1 (ru) 2017-02-10 2020-10-22 Ниссан Норт Америка, Инк. Отслеживание блокировки сети движения при оперативном управлении автономным транспортным средством
JP2020508252A (ja) * 2017-02-10 2020-03-19 ニッサン ノース アメリカ,インク 自律走行車の動作管理
JP6890757B2 (ja) 2017-02-10 2021-06-18 ニッサン ノース アメリカ,インク 部分観測マルコフ決定過程モデルインスタンスを動作させることを含む自律走行車動作管理
CN110603497B (zh) * 2017-02-10 2021-11-16 日产北美公司 自主车辆操作管理控制的自主车辆和方法
US20180292836A1 (en) * 2017-04-06 2018-10-11 Delphi Technologies, Inc. Automated vehicle operation-rules selected based on automation-level other vehicles
US10814913B2 (en) 2017-04-12 2020-10-27 Toyota Jidosha Kabushiki Kaisha Lane change assist apparatus for vehicle
WO2018196001A1 (en) * 2017-04-28 2018-11-01 SZ DJI Technology Co., Ltd. Sensing assembly for autonomous driving
CN108806018B (zh) * 2017-04-28 2021-04-20 华为技术有限公司 一种数据处理方法、数据处理设备和智能汽车
EP3401702B1 (de) * 2017-05-10 2020-10-14 Leuze electronic GmbH + Co. KG Sensorsystem
US10732627B1 (en) * 2017-05-25 2020-08-04 State Farm Mutual Automobile Insurance Company Driver re-engagement system
JP6257872B1 (ja) * 2017-06-01 2018-01-10 三菱電機株式会社 移動体制御装置、移動体制御方法及び移動体制御プログラム
JP6589941B2 (ja) * 2017-06-06 2019-10-16 トヨタ自動車株式会社 操舵支援装置
EP3416307B1 (en) * 2017-06-12 2022-07-27 STMicroelectronics (Research & Development) Limited Vehicle communications using visible light communications
US10585180B2 (en) 2017-06-21 2020-03-10 International Business Machines Corporation Management of mobile objects
US10546488B2 (en) 2017-06-21 2020-01-28 International Business Machines Corporation Management of mobile objects
US10540895B2 (en) 2017-06-21 2020-01-21 International Business Machines Corporation Management of mobile objects
US10504368B2 (en) 2017-06-21 2019-12-10 International Business Machines Corporation Management of mobile objects
US10535266B2 (en) 2017-06-21 2020-01-14 International Business Machines Corporation Management of mobile objects
US10600322B2 (en) 2017-06-21 2020-03-24 International Business Machines Corporation Management of mobile objects
CN107323380A (zh) * 2017-07-03 2017-11-07 江苏省农业科学院 一种拖拉机遥操作控制方法及系统
DE102017212432A1 (de) * 2017-07-20 2019-01-24 Robert Bosch Gmbh Verfahren und Vorrichtung zum Betreiben eines Fahrerassistenzsystems eines Kraftfahrzeugs und Fahrerassistenzsysteme
US10360599B2 (en) * 2017-08-30 2019-07-23 Ncr Corporation Tracking of members within a group
KR102400555B1 (ko) * 2017-09-04 2022-05-20 삼성전자주식회사 주행 차량을 제어하는 방법 및 장치
KR101989102B1 (ko) * 2017-09-13 2019-06-13 엘지전자 주식회사 차량용 운전 보조 장치 및 그 제어 방법
KR102007249B1 (ko) * 2017-12-08 2019-08-06 현대모비스 주식회사 자율 주행 장치, 방법 및 시스템
CN109507997B (zh) * 2017-09-15 2021-11-12 现代摩比斯株式会社 用于自动驾驶的装置、方法和系统
US10957201B2 (en) * 2017-09-15 2021-03-23 Qualcomm Incorporated System and method for relative positioning based safe autonomous driving
EP3687863A4 (en) 2017-09-29 2020-12-02 Netradyne, Inc. MULTIPLE EXPOSURE EVENT DETERMINATION
US10902336B2 (en) * 2017-10-03 2021-01-26 International Business Machines Corporation Monitoring vehicular operation risk using sensing devices
EP4283575A3 (en) 2017-10-12 2024-02-28 Netradyne, Inc. Detection of driving actions that mitigate risk
WO2019076444A1 (en) * 2017-10-17 2019-04-25 Blackberry Limited METHOD AND SYSTEM FOR EVALUATING A CONTEXTUAL RISK PROFILE IN A VEHICLE
US10955259B2 (en) * 2017-10-20 2021-03-23 Telenav, Inc. Navigation system with enhanced navigation display mechanism and method of operation thereof
US10836405B2 (en) 2017-10-30 2020-11-17 Nissan North America, Inc. Continual planning and metareasoning for controlling an autonomous vehicle
US11027751B2 (en) 2017-10-31 2021-06-08 Nissan North America, Inc. Reinforcement and model learning for vehicle operation
WO2019089015A1 (en) 2017-10-31 2019-05-09 Nissan North America, Inc. Autonomous vehicle operation with explicit occlusion reasoning
US10860018B2 (en) * 2017-11-30 2020-12-08 Tusimple, Inc. System and method for generating simulated vehicles with configured behaviors for analyzing autonomous vehicle motion planners
US11084504B2 (en) 2017-11-30 2021-08-10 Nissan North America, Inc. Autonomous vehicle operational management scenarios
KR102463720B1 (ko) * 2017-12-18 2022-11-07 현대자동차주식회사 차량의 경로 생성 시스템 및 방법
US11874120B2 (en) 2017-12-22 2024-01-16 Nissan North America, Inc. Shared autonomous vehicle operational management
US10802489B1 (en) 2017-12-29 2020-10-13 Apex Artificial Intelligence Industries, Inc. Apparatus and method for monitoring and controlling of a neural network using another neural network implemented on one or more solid-state chips
KR102035922B1 (ko) * 2018-01-25 2019-10-24 주식회사 에프에스솔루션 전방 차량 위험도 예측 방법 및 장치
JP6911779B2 (ja) * 2018-01-26 2021-07-28 トヨタ自動車株式会社 車両制御装置
CN110146100B (zh) * 2018-02-13 2021-08-13 华为技术有限公司 轨迹预测方法、装置及存储介质
CN111758124A (zh) * 2018-02-23 2020-10-09 住友电气工业株式会社 交通信号控制装置、交通信号控制方法以及计算机程序
CN111819606A (zh) * 2018-02-23 2020-10-23 住友电气工业株式会社 通过可行性确定设备、通过可行性确定方法和计算机程序
EP3759563B1 (en) 2018-02-26 2023-11-22 Nissan North America, Inc. Centralized shared autonomous vehicle operational management
KR102507115B1 (ko) * 2018-02-27 2023-03-07 삼성전자주식회사 차량의 주행 경로를 계획하는 방법 및 이를 위한 장치
AU2019235551B2 (en) 2018-03-12 2022-02-03 Jayant RATTI On-demand artificial intelligence and roadway stewardship system
JP2019162988A (ja) * 2018-03-20 2019-09-26 本田技研工業株式会社 車両制御装置及び車両制御方法
US10384718B1 (en) * 2018-03-26 2019-08-20 Zoox, Inc. Vehicle parking assist
US10661808B2 (en) * 2018-04-09 2020-05-26 Arnold Chase Dynamic vehicle separation system
US10730529B2 (en) 2018-04-09 2020-08-04 Arnold Chase Dynamic vehicle separation system
US11073405B2 (en) * 2018-06-29 2021-07-27 International Business Machines Corporation Comparative priority and target destination based lane assignment of autonomous vehicles
US11120688B2 (en) 2018-06-29 2021-09-14 Nissan North America, Inc. Orientation-adjust actions for autonomous vehicle operational management
CN110871810A (zh) * 2018-08-21 2020-03-10 上海博泰悦臻网络技术服务有限公司 车辆、车机设备及其基于驾驶模式的行车信息提示方法
US11117572B2 (en) 2018-08-29 2021-09-14 International Business Machines Corporation Cognition enabled driving pattern detection
US10768637B2 (en) * 2018-08-30 2020-09-08 Pony Ai Inc. Prioritizing vehicle navigation
KR102637599B1 (ko) * 2018-10-08 2024-02-19 주식회사 에이치엘클레무브 차량간 통신 정보를 이용한 차선변경 제어장치 및 방법과, 그를 위한 성향 정보 산출 장치
CN109444916B (zh) * 2018-10-17 2023-07-04 上海蔚来汽车有限公司 一种无人驾驶可行驶区域确定装置及方法
US20200133308A1 (en) * 2018-10-18 2020-04-30 Cartica Ai Ltd Vehicle to vehicle (v2v) communication less truck platooning
US10766460B2 (en) 2018-11-13 2020-09-08 Toyota Research Institute, Inc. Operation of vehicle window wipers based on perceived vehicle stops to drop off passengers
US11294382B2 (en) 2018-11-26 2022-04-05 Toyota Research Institute, Inc. Systems and methods for determining routes to destinations for a vehicle
US11208107B2 (en) 2018-11-26 2021-12-28 Toyota Research Institute, Inc. Systems and methods for selecting among different driving modes for autonomous driving of a vehicle
JP7163152B2 (ja) * 2018-11-28 2022-10-31 京セラ株式会社 画像処理装置、撮像装置、移動体及び画像処理方法
EP3671692A1 (en) * 2018-12-19 2020-06-24 Ningbo Geely Automobile Research & Development Co. Ltd. Time for passage of a platoon of vehicles
US10814871B2 (en) 2018-12-26 2020-10-27 Gm Cruise Holdings Llc Computing system for assigning maneuver labels to autonomous vehicle sensor data
AU2019100368B4 (en) * 2019-01-25 2019-11-28 Norman BOYLE A driverless impact attenuating traffic management vehicle
JP7207438B2 (ja) * 2019-02-04 2023-01-18 日本電気株式会社 車両管理装置、車両管理方法、プログラム
US11604284B2 (en) 2019-05-06 2023-03-14 Waymo Llc Methods and systems to determine a strategy for a drop process associated with a light detection and ranging (LIDAR) device
EP3745376B1 (en) * 2019-05-29 2024-03-27 Zenuity AB Method and system for determining driving assisting data
KR20200144176A (ko) * 2019-06-17 2020-12-29 현대자동차주식회사 차량 및 차량의 제어방법
JP7326041B2 (ja) * 2019-06-25 2023-08-15 京セラ株式会社 画像処理装置、撮像装置、移動体、および画像処理方法
KR20210002959A (ko) * 2019-07-01 2021-01-11 현대자동차주식회사 자율주행차량의 차선변경 제어 장치 및 그 방법
WO2020117319A1 (en) * 2019-07-08 2020-06-11 Futurewei Technologies, Inc. System and method for improving interaction of a plurality of autonomous vehicles with a driving environment including said vehicles
DE102019213222B4 (de) * 2019-09-02 2022-09-29 Volkswagen Aktiengesellschaft Verfahren zum Vorhersagen einer zukünftigen Fahr-Situation eines am Straßenverkehr teilnehmenden Fremd-Objektes, Vorrichtung, Fahrzeug
CN110775069B (zh) * 2019-10-29 2021-04-27 长安大学 一种混行模式下车辆驾驶模式识别装置和方法
EP3819891A1 (en) * 2019-11-07 2021-05-12 Ningbo Geely Automobile Research & Development Co. Ltd. Threat mitigation for vehicles
US11884302B2 (en) * 2019-11-15 2024-01-30 Massachusetts Institute Of Technology Social behavior for autonomous vehicles
US10956807B1 (en) 2019-11-26 2021-03-23 Apex Artificial Intelligence Industries, Inc. Adaptive and interchangeable neural networks utilizing predicting information
US11635758B2 (en) 2019-11-26 2023-04-25 Nissan North America, Inc. Risk aware executor with action set recommendations
US10691133B1 (en) 2019-11-26 2020-06-23 Apex Artificial Intelligence Industries, Inc. Adaptive and interchangeable neural networks
US11367290B2 (en) 2019-11-26 2022-06-21 Apex Artificial Intelligence Industries, Inc. Group of neural networks ensuring integrity
US11366434B2 (en) 2019-11-26 2022-06-21 Apex Artificial Intelligence Industries, Inc. Adaptive and interchangeable neural networks
US11899454B2 (en) 2019-11-26 2024-02-13 Nissan North America, Inc. Objective-based reasoning in autonomous vehicle decision-making
US11433892B2 (en) * 2019-12-02 2022-09-06 Gm Cruise Holdings Llc Assertive vehicle detection model generation
US11613269B2 (en) 2019-12-23 2023-03-28 Nissan North America, Inc. Learning safety and human-centered constraints in autonomous vehicles
US11300957B2 (en) 2019-12-26 2022-04-12 Nissan North America, Inc. Multiple objective explanation and control interface design
US11414088B2 (en) 2020-01-16 2022-08-16 Toyota Motor Engineering & Manufacturing North America, Inc. Anomalous driver detection system
US11577746B2 (en) 2020-01-31 2023-02-14 Nissan North America, Inc. Explainability of autonomous vehicle decision making
US11714971B2 (en) 2020-01-31 2023-08-01 Nissan North America, Inc. Explainability of autonomous vehicle decision making
US11945447B2 (en) 2020-02-13 2024-04-02 Toyota Motor North America, Inc. Transport boundary expansion
US11772672B2 (en) 2020-02-13 2023-10-03 Toyota Motor North America, Inc. Unsafe transport operation
US11782438B2 (en) 2020-03-17 2023-10-10 Nissan North America, Inc. Apparatus and method for post-processing a decision-making model of an autonomous vehicle using multivariate data
US11735051B2 (en) * 2020-03-27 2023-08-22 Toyota Research Institute, Inc. Detection of bicyclists near ego vehicles
US11518388B2 (en) 2020-03-31 2022-12-06 Wipro Limited Method and system for determining lane change feasibility for autonomous vehicles
JP7343438B2 (ja) * 2020-04-02 2023-09-12 トヨタ自動車株式会社 自律走行車両及び自律走行車両の運行管理装置
US11368991B2 (en) 2020-06-16 2022-06-21 At&T Intellectual Property I, L.P. Facilitation of prioritization of accessibility of media
US11233979B2 (en) 2020-06-18 2022-01-25 At&T Intellectual Property I, L.P. Facilitation of collaborative monitoring of an event
US11184517B1 (en) 2020-06-26 2021-11-23 At&T Intellectual Property I, L.P. Facilitation of collaborative camera field of view mapping
US11411757B2 (en) 2020-06-26 2022-08-09 At&T Intellectual Property I, L.P. Facilitation of predictive assisted access to content
US11037443B1 (en) 2020-06-26 2021-06-15 At&T Intellectual Property I, L.P. Facilitation of collaborative vehicle warnings
DE102020208641A1 (de) 2020-07-09 2022-01-13 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zur Beruhigung des Verkehrs bei einem gemischten Einsatz von autonomen Fahrzeugen und von Fahrern selbst gesteuerten Fahrzeugen
US11356349B2 (en) 2020-07-17 2022-06-07 At&T Intellectual Property I, L.P. Adaptive resource allocation to facilitate device mobility and management of uncertainty in communications
US11768082B2 (en) 2020-07-20 2023-09-26 At&T Intellectual Property I, L.P. Facilitation of predictive simulation of planned environment
CN111968372B (zh) * 2020-08-25 2022-07-22 重庆大学 一种考虑主观因素的多车型混合交通跟驰行为仿真方法
US11938941B2 (en) 2020-08-31 2024-03-26 Denso International America, Inc. Mode selection according to system conditions
FR3114788B1 (fr) * 2020-10-07 2022-08-19 Psa Automobiles Sa Procédé et dispositif de détermination d’un indicateur de comportement latéral dangereux d’un véhicule autonome circulant sur une voie de circulation
KR102261527B1 (ko) * 2021-01-14 2021-06-08 성균관대학교산학협력단 인휠 모터를 장착한 차량의 토크 벡터링 제어 장치 및 방법
US11869361B2 (en) * 2021-04-01 2024-01-09 Gm Cruise Holdings Llc Coordinated multi-vehicle routing
DE102021109425B3 (de) * 2021-04-15 2022-07-21 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Steuern eines Fahrzeugs und Steuervorrichtung für ein Fahrzeug
KR20230014344A (ko) * 2021-07-21 2023-01-30 현대모비스 주식회사 차량의 주변 환경 모니터링 장치 및 방법
US20230138325A1 (en) * 2021-10-29 2023-05-04 Tusimple, Inc. Autonomous Vehicle Navigation in Response to a Closed Railroad Crossing
US20230286514A1 (en) * 2022-03-08 2023-09-14 Toyota Motor Engineering & Manufacturing North America, Inc. Detection of abnormal driving based on behavior profiles

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085285A (ja) * 2004-09-14 2006-03-30 Matsushita Electric Ind Co Ltd 危険車両予測装置
JP2009037561A (ja) * 2007-08-03 2009-02-19 Toyota Motor Corp 走行計画生成装置
JP2010067235A (ja) * 2008-09-12 2010-03-25 Fujitsu Ten Ltd 運転支援装置および運転支援プログラム
JP2012507088A (ja) * 2008-10-24 2012-03-22 グレイ・アンド・カンパニー・インコーポレーテッド 自律運転乗物用の制御及びシステム

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH113499A (ja) 1997-06-10 1999-01-06 Hitachi Ltd 移動体管理システム,移動体載装置,基地局備装置および移動体管理方法
US6233515B1 (en) * 1998-12-07 2001-05-15 Jaguar Car, Limited Adaptive vehicle cruise control system and methodology
JP4193266B2 (ja) 1999-02-22 2008-12-10 株式会社エクォス・リサーチ 周辺車両報知装置
US6392564B1 (en) * 1999-10-05 2002-05-21 John J. Mackey Aggressive driver monitoring and reporting system
DE10218010A1 (de) 2002-04-23 2003-11-06 Bosch Gmbh Robert Verfahren und Vorrichtung zur Querführungsunterstützung bei Kraftfahrzeugen
US7124027B1 (en) * 2002-07-11 2006-10-17 Yazaki North America, Inc. Vehicular collision avoidance system
US7389178B2 (en) * 2003-12-11 2008-06-17 Greenroad Driving Technologies Ltd. System and method for vehicle driver behavior analysis and evaluation
DE102005050310A1 (de) 2004-10-22 2006-06-08 Irobot Corp., Burlington Systeme und Verfahren zum Steuern eines Fahrzeuges
DE602005017144D1 (de) * 2005-08-18 2009-11-26 Honda Res Inst Europe Gmbh Fahrerassistenzsystem
DE102006008981A1 (de) * 2006-02-23 2007-08-30 Siemens Ag Assistenzsystem zur Unterstützung eines Fahrers
US7633383B2 (en) * 2006-08-16 2009-12-15 International Business Machines Corporation Systems and arrangements for providing situational awareness to an operator of a vehicle
WO2008038369A1 (fr) * 2006-09-28 2008-04-03 Pioneer Corporation Dispositif de commande de conduite, procédé de commande de conduite, programme de commande de conduite et support d'enregistrement
US20080167820A1 (en) * 2007-01-04 2008-07-10 Kentaro Oguchi System for predicting driver behavior
US8605947B2 (en) * 2008-04-24 2013-12-10 GM Global Technology Operations LLC Method for detecting a clear path of travel for a vehicle enhanced by object detection
US8428843B2 (en) 2008-06-20 2013-04-23 GM Global Technology Operations LLC Method to adaptively control vehicle operation using an autonomic vehicle control system
KR20100028279A (ko) 2008-09-04 2010-03-12 주식회사 만도 차량의 자동 주행 중 위험 지역을 우회하기 위한 자동 주행시스템
JP4614005B2 (ja) 2009-02-27 2011-01-19 トヨタ自動車株式会社 移動軌跡生成装置
EP2316705B1 (en) 2009-10-28 2012-06-20 Honda Research Institute Europe GmbH Behavior-based learning of visual characteristics from real-world traffic scenes for driver assistance systems
US8258934B2 (en) * 2009-10-30 2012-09-04 Ford Global Technologies, Llc Vehicle and method of advising a driver therein
US8260539B2 (en) * 2010-05-12 2012-09-04 GM Global Technology Operations LLC Object and vehicle detection and tracking using 3-D laser rangefinder
US8509982B2 (en) * 2010-10-05 2013-08-13 Google Inc. Zone driving
CN103391823B (zh) * 2010-10-06 2016-11-16 布拉德伯里有限公司 用于增加辊轧成型和整平系统的效率的装置和方法
US8195394B1 (en) * 2011-07-13 2012-06-05 Google Inc. Object detection and classification for autonomous vehicles
US9146898B2 (en) * 2011-10-27 2015-09-29 Magna Electronics Inc. Driver assist system with algorithm switching
US9771070B2 (en) * 2011-12-09 2017-09-26 GM Global Technology Operations LLC Method and system for controlling a host vehicle

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085285A (ja) * 2004-09-14 2006-03-30 Matsushita Electric Ind Co Ltd 危険車両予測装置
JP2009037561A (ja) * 2007-08-03 2009-02-19 Toyota Motor Corp 走行計画生成装置
JP2010067235A (ja) * 2008-09-12 2010-03-25 Fujitsu Ten Ltd 運転支援装置および運転支援プログラム
JP2012507088A (ja) * 2008-10-24 2012-03-22 グレイ・アンド・カンパニー・インコーポレーテッド 自律運転乗物用の制御及びシステム

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019506324A (ja) * 2015-12-31 2019-03-07 ソニー株式会社 自動運転車のためのホーンの適応検出および適用のための方法およびシステム
JP2018041205A (ja) * 2016-09-06 2018-03-15 シャープ株式会社 自律走行装置
JP2020525916A (ja) * 2017-07-05 2020-08-27 パナソニックIpマネジメント株式会社 運転中の自動運転車による非行行動を検出するシステムおよび方法
JP2019127196A (ja) * 2018-01-26 2019-08-01 Kddi株式会社 周辺走行中の被観測車両の運転特性を推定するプログラム、装置及び方法
CN112140895A (zh) * 2019-06-28 2020-12-29 丰田自动车株式会社 车辆的车顶结构
JP2021008152A (ja) * 2019-06-28 2021-01-28 トヨタ自動車株式会社 車両のルーフ構造
JP2021196978A (ja) * 2020-06-16 2021-12-27 トヨタ自動車株式会社 情報処理装置、プログラム、及び情報処理方法
US11721215B2 (en) 2020-06-16 2023-08-08 Toyota Jidosha Kabushiki Kaisha Information processing device, program, and information processing method
JP7375683B2 (ja) 2020-06-16 2023-11-08 トヨタ自動車株式会社 情報処理装置、プログラム、及び情報処理方法

Also Published As

Publication number Publication date
US10347127B2 (en) 2019-07-09
KR20170090520A (ko) 2017-08-07
EP2958783A4 (en) 2016-11-23
WO2014130178A1 (en) 2014-08-28
CN105008200B (zh) 2018-11-13
JP6782197B2 (ja) 2020-11-11
EP2958783B1 (en) 2018-10-24
JP2017171296A (ja) 2017-09-28
KR20150108891A (ko) 2015-09-30
CN105008200A (zh) 2015-10-28
US20140236414A1 (en) 2014-08-21
EP2958783A1 (en) 2015-12-30

Similar Documents

Publication Publication Date Title
JP6782197B2 (ja) 付近の強引な運転者を検出し、運転モードを調整する方法
JP6411595B2 (ja) 車両の速度を制御する方法
US9090259B2 (en) Controlling vehicle lateral lane positioning
US9821807B2 (en) Methods and systems for determining instructions for pulling over an autonomous vehicle
US9440652B1 (en) Filtering noisy/high-intensity regions in laser-based lane marker detection
ES2749698T3 (es) Modificación activa de un campo de visión de un vehículo autónomo en vista de restricciones

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150909

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150909

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160729

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161101

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170411

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20170519

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170524