JP6693570B2 - 自己位置推定方法及び自己位置推定装置 - Google Patents

自己位置推定方法及び自己位置推定装置 Download PDF

Info

Publication number
JP6693570B2
JP6693570B2 JP2018544647A JP2018544647A JP6693570B2 JP 6693570 B2 JP6693570 B2 JP 6693570B2 JP 2018544647 A JP2018544647 A JP 2018544647A JP 2018544647 A JP2018544647 A JP 2018544647A JP 6693570 B2 JP6693570 B2 JP 6693570B2
Authority
JP
Japan
Prior art keywords
vehicle
target
stored
parking
surrounding situation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018544647A
Other languages
English (en)
Other versions
JPWO2018070022A1 (ja
Inventor
早川 泰久
泰久 早川
山口 一郎
一郎 山口
康裕 櫻井
康裕 櫻井
田中 大介
大介 田中
雪徳 西田
雪徳 西田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Publication of JPWO2018070022A1 publication Critical patent/JPWO2018070022A1/ja
Application granted granted Critical
Publication of JP6693570B2 publication Critical patent/JP6693570B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/06Automatic manoeuvring for parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • B62D15/0285Parking performed automatically
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/168Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11Instrument graphical user interfaces or menu aspects
    • B60K2360/117Cursors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • B60K2360/1468Touch gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/165Videos and animations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/173Reversing assist
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/177Augmented reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/179Distances to obstacles or vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/06Automatic manoeuvring for parking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30244Camera pose
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30264Parking

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、自己位置推定方法及び自己位置推定装置に関する。
従来、移動体の位置を測位する測位手段と、移動体の移動状況を検出するセンサ手段とを備え、測位手段による測位結果及びセンサ手段による検出結果に基づき、地図上へのマッチングを行うことにより、地図上の自車両の位置を算出する技術が知られている(特許文献1参照)。
特開2007−263844号公報
しかしながら、地図を参照して駐車目標位置への自動駐車を実行する際に、地図上の自車両の位置を推定するために特許文献1に記載の技術を用いると、駐車環境によっては、測位手段による測位結果やセンサ手段による検出結果に誤差が生じる。このため、地図上の自車両の位置を精度良く推定することが困難な場合がある。
上記課題に鑑み、本発明は、記憶された駐車目標位置の周囲状況を参照して駐車目標位置への自動駐車を実行する際に、記憶された周囲状況における自車両や物標の位置を精度良く推定することができる自己位置推定方法及び自己位置推定装置を提供することを目的とする。
本発明の一態様によれば、記憶された駐車目標位置の周囲状況を参照して駐車目標位置への自動駐車を実行する際に、記憶された周囲状況を提示する。そして、記憶された周囲状況と、自車両又は物標との位置関係を設定する操作を受け付け、その操作に基づいて、記憶された周囲状況における自車両の位置又は物標の位置を設定することを特徴とする自己位置推定方法及び自己位置推定装置が提供される。
本発明によれば、記憶された駐車目標位置の周囲状況を参照して駐車目標位置への自動駐車を実行する際に、記憶された周囲状況における自車両や物標の位置を精度良く推定することができる自己位置推定方法及び自己位置推定装置を提供することができる。
本発明の実施形態に係る自己位置推定装置の一例を示すブロック図である。 本発明の実施形態に係る記憶装置に記憶された地図データの一例を示す概略図である。 本発明の実施形態に係る周囲状況センサの検出結果の一例を示す概略図である。 図4Aは、本発明の実施形態に係る提示ユニットに提示される画像の一例を示す概略図であり、図4Bは、本発明の実施形態に係る提示ユニットに提示される画像に対する操作の一例を示す概略図であり、図4Cは、本発明の実施形態に係る提示ユニットに提示される画像に対する操作の他の一例を示す概略図である。 本発明の実施形態に係る地図データの生成方法の一例を説明するフローチャートである。 本発明の実施形態に係る自己位置推定方法の一例を説明するフローチャートである。 図7Aは、本発明の実施形態の第1の変形例に係る提示ユニットに提示される画像の一例を示す概略図であり、図7Bは、本発明の実施形態の第1の変形例に係る提示ユニットに提示される画像に対する操作の一例を示す概略図である。 図8Aは、本発明の実施形態の第2の変形例に係る提示ユニットに提示される画像の一例を示す概略図であり、図8Bは、本発明の実施形態の第2の変形例に係る提示ユニットに提示される画像に対する操作の一例を示す概略図である。 図9Aは、本発明の実施形態の第3の変形例に係る提示ユニットに提示される画像の一例を示す概略図であり、図9Bは、本発明の実施形態の第3の変形例に係る提示ユニットに提示される画像に対する操作の一例を示す概略図である。 図10Aは、本発明の実施形態の第4の変形例に係る記憶装置に記憶された地図データの一例を示す概略図であり、図10Bは、本発明の実施形態の第4の変形例に係る周囲状況センサの検出結果の一例を示す概略図であり、図10Cは、本発明の実施形態の第4の変形例に係る周囲状況センサの検出結果に対する操作の一例を示す概略図であり、図10Dは、本発明の実施形態の第4の変形例に係る周囲状況センサの検出結果の補正の一例を示す概略図である。 図11Aは、本発明の実施形態の第5の変形例に係る提示ユニットに提示される画像の一例を示す概略図であり、図11Bは、本発明の実施形態の第5の変形例に係る提示ユニットに提示される画像に対する操作の一例を示す概略図である。 図12Aは、本発明の実施形態の第6の変形例に係る提示ユニットに提示される画像の一例を示す概略図であり、図12Bは、本発明の実施形態の第6の変形例に係る提示ユニットに提示される画像に対する操作の一例を示す概略図である。
以下において、図面を参照して、本発明の実施形態を説明する。以下の図面の記載において、同一又は類似の部分には同一又は類似の符号を貼付している。但し、図面は模式的なものであり、厚みと平面寸法との関係、厚みの比率等は現実のものとは異なることに留意すべきである。また、図面相互間においても互いの寸法の関係や比率が異なる部分が含まれていることは勿論である。また、以下に示す実施形態は、本発明の技術的思想を具体化するための装置や方法を例示するものであって、本発明の技術的思想は、構成部品の材質、形状、構造、配置等を下記のものに特定するものではない。本発明の技術的思想は、特許請求の範囲に記載された請求項が規定する技術的範囲内において、種々の変更を加えることができる。
<自己位置推定装置の構成>
本発明の実施形態に係る自己位置推定装置は、駐車目標位置の周囲状況を記憶装置に記憶し、記憶された周囲状況を用いて自動駐車を実行する駐車支援装置で利用可能な、記憶された周囲状況における自車両の位置(自己位置)等を推定するための装置である。本発明の実施形態に係る自己位置推定装置は、車両に搭載可能である(以下、本発明の実施形態に係る自己位置推定装置が搭載された車両を「自車両」と称する)。本発明の実施形態に係る自己位置推定装置は、図1に示すように、制御装置(コントローラ)1、記憶装置2、周囲状況センサ3、提示ユニット4及び操作ユニット(インターフェース)5を備える。
記憶装置2は、半導体記憶装置、磁気記憶装置又は光学記憶装置等からなり、レジスタ、キャッシュメモリ、主記憶装置等を構成できる。記憶装置2は、駐車目標位置への自動駐車を実行する際に参照される駐車目標位置の周囲状況を記憶する。記憶装置2は、図2に示すように、駐車目標位置P1の周囲状況の一例としての地図データを記憶する。図2は、地図データが俯瞰画像であり且つコンピュータ・グラフィックス(CG)画像である場合を例示するが、これに限定されない。地図データは、駐車目標位置P1の周辺に存在する物標21,22,23,24の位置関係を示す。物標21,22,23,24は、標識、電柱、壁、樹木、駐車中の他車両等の静止立体物(障害物)や、道路上の白線や駐車枠等を含む。地図データの範囲は特に限定されず、駐車目標位置P1への自動駐車が可能な範囲であればよい。
記憶装置2に記憶される地図データ等の駐車目標位置の周囲状況は、1回又は複数回の駐車をする際に、駐車目標位置の周囲状況を周囲状況センサ3により検出することにより学習結果として得られる。ここで、「1回の駐車」には、例えば、自車両が駐車目標位置に到達するまでの動作が含まれる。更に、「1回の駐車」には、自車両が駐車目標位置に到達しない場合であっても、周囲状況センサ3で駐車目標位置の周囲状況を検出可能であれば、自車両が駐車目標位置の周囲を走行する動作や、自車両が駐車目標位置の周囲で切り返すまでの動作が含まれる。
また、「複数回の駐車」は、1回の駐車を繰り返すことを意味するが、繰り返すタイミングは特に限定されず、例えば1回目の駐車直後に2回目の駐車を行ってもよく、1回目の駐車の翌日に2回目の駐車を行ってもよい。また、複数回の駐車は、互いに同様の駐車動作であってもよく、互いに異なる駐車動作であってもよい。例えば、2回の駐車のうち1回目の駐車が駐車目標位置に到達するまでの動作であり、2回目の駐車が駐車目標位置の周囲を走行する動作であってもよい。複数回の駐車を繰り返した場合には、駐車毎に得られた周囲状況を統合・補完することにより、より精度の高い地図データを生成可能である。
記憶装置2に記憶された駐車目標位置の周囲状況は、次回以降の駐車の際に参照可能である。「次回以降の駐車」のタイミングは特に限定されず、例えば駐車目標位置の周囲状況を学習直後や、駐車目標位置の周囲状況を学習した日の翌日以降を含む。また、「次回以降の駐車」の駐車動作には、自車両が駐車目標位置に到達する動作、駐車目標位置の周囲を走行する動作等の駐車目標位置を目標としてした車両の動作が含まれる。
図1に示した周囲状況センサ3は、自車両の前方、側方及び後方を含む自車両の周囲状況を検出する。周囲状況センサ3としては、例えばレーザレーダ、ミリ波レーダ、カメラ、レーザレンジファインダ(LRF)等が使用可能である。周囲状況センサ3の個数や種類、配置位置は特に限定されず、例えば自車両の前方、側方及び後方に複数個設置されていてもよい。図3は、周囲状況センサ3により検出された自車両の周囲状況(点群データ)の一例を示し、図3中の点群26が、物標(障害物)のエッジ位置を示している。図3に示した点群データの範囲は、図2に示した地図データの範囲と略共通する。なお、図3に示した点群データの範囲は、図2に示した地図データの範囲よりも狭くてもよく、図2に示した地図データの範囲よりも広くてもよい。
図1に示した提示ユニット4としては、例えば液晶ディスプレイ等のディスプレイが使用可能である。提示ユニット4は、車室内のインストルメントパネル等の乗員から視認しやすい位置に設置される。操作ユニット5は、乗員からの操作を受け付ける。操作ユニット5は、提示ユニット4のタッチパネルやボタン、スイッチであってもよく、提示ユニット4とは個別にセンターコンソール等に設けられたボタンやスイッチ等であってもよい。
制御装置1は、例えば電子制御ユニット(ECU)等のコントローラであり、中央演算処理装置(CPU)を含むコンピュータやコンピュータに等価なプロセッサ等で構成することができる。制御装置1は、フィールド・プログラマブル・ゲート・アレイ(FPGA)等のプログラマブル・ロジック・デバイス(PLD)等を有していてもよく、汎用の半導体集積回路中に設定される機能的な論理回路等でも構わない。
制御装置1は、推定部11、提示制御部12、設定部13及び駐車支援部14を機能的に備える。推定部11は、周囲状況センサ3により検出された自車両の周囲状況における自車両の位置及び物標の位置と、記憶装置2に記憶された地図データとを照合(マッチング)することにより、地図データ上の自車両の位置(自己位置)及び物標の位置を推定する。例えば、推定部11は、図2に示した地図データと、図3に示した自車両の周囲状況とを、対応する物標21,22,23,24が一致するように重ね合わせる。そして、図3に示した自車両の周囲状況と、自車両との相対的な位置関係に基づいて、地図データ上の自車両の位置(自己位置)を推定する。ここで、周囲状況センサ3の精度や、天候、日照条件、立体駐車場等の駐車環境によっては、自車両の周囲状況と地図データとを精度良くマッチングできず、地図データ上の自車両の位置を精度良く推定できない場合がある。
提示制御部12は、周囲状況センサ3により検出された自車両の周囲状況として、予め定めた特定の物標(例えば、図2の物標24に対応する点群)が検出されたか否かを判定し、判定結果を音声や表示により乗員に対して提示する。特定の物標は、その位置や形状に起因して自車両の位置が推定し易くなる物標であり、適宜設定可能である。特定の物標が検出されたと判定された場合に、特定の物標が検出されたことを乗員に対して提示することで、乗員は、自車両の位置を推定し易い環境であることを把握できる。一方、特定の物標が検出されなかったと判定された場合に、特定の物標が検出されなかったことを乗員に対して提示することで、乗員は、自車両の位置を推定し難い環境であることを把握できる。なお、特定の物標としては、1つの物標だけ設定されていてもよく、複数の物標が設定されていてもよい。複数の物標が設定されている場合、提示制御部12は、複数の物標がすべて検出されたか否かを判定してもよく、複数の物標のうち所定数以上が検出されたか否かを判定してもよい。
提示制御部12は、図4Aに示すように、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況(点群データ)とを照合(マッチング)した画像I1を提示ユニット4に提示させる。提示ユニット4には地図データ全体を提示してもよく、地図データの一部を提示してもよい。提示ユニット4に地図データの一部を提示する場合には、地図データが上下左右にスクロール可能であってもよい。同様に、提示ユニット4には、周囲状況センサ3により検出された自車両の周囲状況全体を提示してもよく、周囲状況の一部を提示してもよい。提示ユニット4に周囲状況の一部を提示する場合には、周囲状況が上下左右にスクロール可能であってもよい。また、提示ユニット4に提示される地図データと周囲状況とはサイズが一致していてもよく、サイズが異なっていても構わない。例えば、提示ユニット4に提示される地図データの一部に周囲状況全体が重畳されていてもよい。或いは、提示ユニット4に提示される周囲状況の一部に地図データ全体が重畳されていてもよい。
提示制御部12は更に、図4Aに示すように、推定部11により推定された地図データ上の自車両の位置に模擬車両(アイコン)27を提示させる。なお、推定部11により推定された地図データ上の自車両の位置であることを乗員が識別できればよいので、模擬車両27に限らず、矩形等の図形を提示ユニット4に提示してもよい。
提示制御部12は更に、「地図データと周囲状況との位置合わせをして下さい」或いは「地図データとアイコンとの位置合わせをして下さい」等の文字情報や音声情報を乗員に対して提示することにより、乗員に対して操作を要求してもよい。
図4Aに示す画像I1が提示ユニット4に提示されているときに、操作ユニット5は、地図データと、自車両及び自車両の周囲に存在する物標の位置の少なくとも一方との位置関係を設定(調整)する操作を乗員から受け付ける。例えば操作ユニット5がタッチパネルである場合には、図4Bに示すように、乗員は、地図データ上の物標24を指31で矢印の方向(下方向)にタッチスクロールすることにより、物標21,22,23,24を含む地図データ全体が下方向にシフトする。この結果、地図データ上の物標21,22,23,24と対応する点群26を一致させることができる。また、地図データの方位と自車両の周囲状況の方位がずれている場合には、地図データ上の任意の位置に2本の指を接触させて回転させる等の操作により、地図データ全体を回転させてもよい。
また、図4Cに示すように、乗員は、模擬車両27を指31で矢印の方向(上方向)にタッチスクロールすることにより、模擬車両27及び自車両の周囲状況全体を上方向にシフトしてもよい。模擬車両27の位置に対応する自車両の位置は、自車両の周囲状況との相対的な位置関係から求めているため、模擬車両27の移動に伴い自車両の周囲状況も移動する。この結果、地図データ上の物標21,22,23,24と対応する点群26を一致させることができる。また、乗員は、自車両の周囲状況である点群26の任意の位置を指31でタッチスクロールすることにより、模擬車両27及び自車両の周囲状況全体をシフトしてもよい。
なお、乗員は、模擬車両27をタッチスクロールする代わりに、地図データ上の自車両の位置をタッチすることにより、地図データ上の自車両の位置を直接設定してもよい。操作ユニット5がタッチパネルではなくボタンである場合には、ボタンを押すことにより模擬車両27を移動させてもよい。このように、地図データと、自車両の周囲状況又は自車両との位置関係を設定する操作方法は特に限定されず、種々の方法を採用可能である。また、地図データと、自車両の周囲状況又は自車両との位置関係を設定する操作方法は予め設定されていてもよく、操作ユニット5の操作により適宜選択可能であってもよい。
設定部13は、地図データと、自車両の周囲状況又は自車両との位置関係を設定する操作情報に基づいて、地図データ上における自車両の位置及び物標の位置の少なくとも一方を設定する。例えば、図4Bに示すように、乗員が、地図データと自車両の周囲状況との位置関係を設定する操作を実行した場合には、設定部13は、推定部11による自車両の周囲状況と地図データとの照合(マッチング)の結果を図4Bに対応する位置関係に補正する。設定部13は更に、補正された照合(マッチング)の結果に基づいて、推定部11により推定された自車両の位置を補正する。また、図4Cに示すように、乗員が、地図データと自車両との位置関係を設定する操作を実行した場合には、設定部13は、推定部11により推定された地図データ上の自車両の位置を図4Cに対応する位置に補正する。
例えば、設定部13は、検出した自車両の地図データ上の位置関係が操作ユニット5を介して設定された場合に、自車両と物標の相対位置関係に基づいて、検出した物標の地図データ上の位置関係を設定してもよい。また、設定部13は、検出した物標の地図データ上の位置関係が操作ユニット5を介して設定された場合に、自車両と物標の相対位置関係に基づいて、検出した自車両の地図データ上の位置関係を設定してもよい。
駐車支援部14は、自動駐車を行う際に、設定部13により設定された地図データ上の自車両の位置を駐車開始位置として初期化する。そして、駐車支援部14は、駐車開始位置から駐車目標位置P1へ自動駐車するように、自車両に搭載された各種のアクチュエータに対して制御信号を出力する。駐車支援部14は、制御装置1とは個別に駐車支援装置として設けられていてもよい。
<地図データ生成方法>
ここで、図5のフローチャートを参照して、記憶装置2に記憶されている地図データの生成方法の一例を説明する。ステップS11において、自車両の現在位置を駐車開始位置として初期化する。ステップS12において、周囲状況センサ3により自車両の周囲状況を検出しながら、駐車開始位置から駐車目標位置P1へ駐車する。ステップS13において、駐車目標位置P1へ駐車が完了し、周囲状況の検出が完了したか否かを判定する。周囲状況の検出が完了したと判定されるまで、周囲状況センサ3により自車両の周囲状況の検出を継続し、周囲状況の検出が完了したと判定された場合にステップS14に移行する。ステップS14において、周囲状況センサ3により検出された周囲状況を用いて地図データを生成し、生成した地図データを記憶装置2に記憶させる。なお、図5のフローチャートの処理を複数回実行して、各回で得られた地図データを統合した地図データを採用してもよい。
<自己位置推定方法>
次に、図6のフローチャートを参照しながら、本発明の実施形態に係る自己位置推定方法の一例を説明する。
ステップS20において、推定部11は、全地球測位システム(GPS)信号等に基づいて、自車両の現在位置を推定する。推定部11は、推定された自車両の現在位置に基づいて、記憶装置2に記憶されたデータから、図2に示すように、自動駐車で使用するための駐車目標位置P1の周辺の地図データを特定する。周囲状況センサ3が、図3に示すように、自車両の周囲状況を検出する。
ステップS21において、推定部11が、周囲状況センサ3により検出された自車両の周囲状況として予め定めた特定の物標(例えば物標24)が検出されているか否かを判定することにより、自車両の位置を推定可能か否か(或いは推定し易いか否か)を判定する。特定の物標が検出されず、自車両の位置を推定不可能である(或いは推定し難い)と判定された場合には、ステップS22に移行し、自車両の位置を推定不可能である(或いは推定し難い)ことを音声や提示等により乗員に対して提示し、処理を完了する。
一方、ステップS21において、周囲状況センサ3により検出された自車両の周囲状況として特定の物標が検出され、自車両の位置を推定可能((或いは推定し易い)と判定された場合には、ステップS23に移行する。ステップS23において、推定部11は、自車両の位置を推定可能である(或いは推定し易い)ことを音声や提示等により乗員に対して提示する。推定部11は更に、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを照合(マッチング)することにより、地図データ上の自車両の位置を推定する。
ステップS24において、提示制御部12は、図4Aに示すように、地図データと、自車両の周囲状況との照合(マッチング)結果である画像I1を提示ユニット4に提示させる。更に、提示制御部12は、推定部11により推定された自車両の位置に模擬車両27を提示する。操作ユニット5は、提示ユニット4に画像I1が提示された時に、地図データと、自車両及び物標の少なくとも一方との位置関係を設定する操作を受け付ける。乗員は、地図データと、物標又は模擬車両27との正しい位置関係を設定する(位置関係のずれを補正する)ように操作ユニット5を操作する。なお、地図データと物標又は模擬車両27とに位置ずれが生じていない場合には、乗員は、地図データと物標又は模擬車両27との位置関係が正しい旨を入力する操作を行ってもよい。提示制御部12は、乗員の操作情報に応じて、図4B又は図4Cに示すように、提示ユニット4の提示を変更する。
ステップS25において、提示制御部12は、操作ユニット5を介して乗員の操作を受け付けたか否かを判定する。乗員の操作を受け付けたと判定されるまで提示ユニット4の提示を継続し、乗員の操作を受け付けたと判定された場合にステップS26に移行する。
ステップS26において、設定部13は、乗員の操作情報に基づいて、推定部11による自車両の周囲状況と地図データとの照合結果、即ち地図データ上の自車両の位置又は物標の位置を補正する。
ステップS27において、駐車支援部14は、設定部13により設定された地図データ上の自車両の位置を駐車開始位置として初期化する。駐車支援部14は、地図データを用いて、駐車開始位置から駐車目標位置へ自動駐車するように、自車両に搭載された各種のアクチュエータに対して制御信号を出力する。
本発明の実施形態に係る自己位置推定プログラムは、図6に示した自己位置推定方法の手順を、制御装置1を構成するコンピュータに実行させる。本発明の実施の形態に係る自己位置推定プログラムは、例えば記憶装置2に格納可能である。
以上説明したように、本発明の実施形態によれば、駐車目標位置への駐車に際し、記憶装置2に記憶された駐車目標位置の周囲状況を用いて自動駐車を実行する際に、提示制御部12が記憶された周囲状況(地図データ)を、提示ユニット4に提示する。そして、操作ユニット5が、記憶された周囲状況と、自車両及び自車両の周囲に存在する物標と、の位置関係を設定する操作を受け付ける。そして、設定部13が、その操作に基づいて、記憶された周囲状況における自車両の位置又は物標の位置を設定する。これにより、駐車環境に関わらず、地図上の自車両の位置や物標の位置を精度良く推定することができる。したがって、自動駐車の際には、駐車開始位置の推定の精度が重要となるが、駐車開始位置を高精度に推定できるので、駐車開始位置から駐車目標位置に至る経路も精度良く算出可能となり、駐車目標位置に精度良く駐車することができる。
更に、推定部11が、周囲状況センサ3により検出された自車両の周囲状況に基づいて、記憶された駐車目標位置の周囲状況(地図データ)における自車両又は物標の位置を推定する。提示制御部12が、記憶された周囲状況における自車両の位置又は物標を提示ユニット4に提示するとともに、検出された周囲状況における自車両の位置又は物標を提示ユニット4に提示する。操作ユニット5が、記憶された周囲状況における自車両の位置又は物標と、検出された周囲状況における自車両の位置又は物標とを対応付ける操作を受け付ける。これにより、乗員は、提示ユニット4の提示を視認しながら、地図データ上の物標21,22,23,24と、対応する自車両の周囲状況(点群データ)の物標の位置を示す点群26とが一致するように設定する操作を行うことができる。
更に、記憶装置2に記憶された周囲状況である地図データとして俯瞰画像を採用し、俯瞰画像である地図データを提示ユニット4に提示させることにより、乗員は、自車両と自車両の周囲状況との相対的な位置関係を正確に把握することができる。更に、周囲状況センサ3により検出された自車両の周囲状況を俯瞰画像として提示ユニット4に提示させてもよい。この場合、乗員は、自車両と自車両の周囲状況との相対的な位置関係を正確に把握することができる。
更に、推定部11が、周囲状況センサ3により検出された自車両の周囲状況として、特定の物標が検出されたか否かを判定して、特定の物標が検出された場合には特定の物標の検出を乗員に対して提示する。これにより、特定の物標を検出することができて、特定の物標と自車両との相対的な位置関係から自車両の位置を推定し易い環境であることを乗員に対して容易に把握させることができる。一方、特定の物標が検出されなかった場合には特定の物標が不検出である旨を乗員に対して提示する。これにより、特定の物標を検出することができずに、自車両の位置を推定し難い環境であるかを、乗員に対して容易に把握させることができる。
更に、推定部11が、周囲状況センサ3により検出された自車両の周囲状況により、検出した周囲状況における自車両と物標の相対位置関係を検出(推定)する。そして、操作ユニット5を介して、検出した自車両又は物標の内の何れかの記憶された周囲状況における位置関係が設定された場合に、自車両と物標の相対位置関係に基づいて、検出した自車両又は物標の内のもう一方の記憶された周囲状況における位置関係を設定する。これにより、自車両と物標の相対位置関係を用いて、記憶された周囲状況における自車両の位置や物標の位置を精度良く推定することができる。
<第1の変形例>
本発明の実施形態では、図4Aに示すように、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを重畳した画像I1を提示ユニット4に提示する場合を説明した。これに対して、本発明の実施形態の第1の変形例では、図7Aに示すように、周囲状況センサ3により検出された自車両の周囲状況を提示せずに、記憶装置2に記憶された地図データのみを提示する点が、本発明の実施形態と異なる。地図データは、物標21,22,23,24を含む。更に、図7Aに示すように、推定部11により推定された地図データ上の自車両の位置に模擬車両27を提示する。
この場合、乗員は、実際の自車両の周囲状況を目視して、実際の自車両の周囲状況と提示された地図データとの対応関係を把握する。そして、操作ユニット5がタッチパネルである場合には、乗員は、例えば図7Bに示すように、模擬車両27を指31で矢印方向(下方向)にドラッグして、実際の自車両の周囲状況における自車両の位置に対応する地図データ上の位置でドロップする。これにより、地図データに対して模擬車両27を移動させることにより、地図データと自車両との位置関係を設定する。なお、乗員は、地図データ上の物標21,22,23,24のいずれかをタッチスクロールして、模擬車両27に対して物標21,22,23,24を含む地図データ全体を移動させることにより、地図データと自車両との位置関係を設定してもよい。設定部13は、乗員の操作情報に基づいて、推定部11により推定された地図データ上の自車両の位置を図7Bに対応する位置に補正する。
なお、図7Aでは、地図データ上に模擬車両27を提示する場合を例示したが、地図データ上に模擬車両27を提示しなくてもよい。この場合、乗員は、地図データ上の自車両の位置に対応する位置をタッチすることにより、地図データ上の自車両の位置を設定してもよい。地図データ上に模擬車両27を提示しない場合には、周囲状況センサ3により自車両の周囲状況を検出しなくてもよく、更には、推定部11により地図データ上の自車両の位置を推定しなくてもよい。
本発明の実施形態の第1の変形例によれば、周囲状況センサ3により検出された自車両の周囲状況を提示せずに地図データのみを提示する場合でも、乗員は、地図データと自車両との正しい位置関係を設定することができる。そして、設定部13は、乗員の操作情報に基づいて、地図データ上の自車両の位置を設定することにより、地図データ上の自車両の位置を精度良く推定可能となる。
<第2の変形例>
本発明の実施形態では、図4Aに示すように、提示ユニット4に、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを重畳した画像I1を提示するとともに、模擬車両27を提示する場合を説明した。これに対して、本発明の実施形態の第2の変形例では、図8Aに示すように、提示ユニット4に、地図データと自車両の周囲状況とを重畳した画像I1を提示する点は本発明の実施形態と同様であるが、模擬車両27を提示しない点が、本発明の実施形態と異なる。
この場合、乗員は、例えば図8Bに示すように、地図データ上の物標24を指31で矢印方向(下方向)にタッチスクロールして、物標21,22,23,24を含む地図データ全体を下方向に移動させることにより、地図データと自車両の周囲状況(点群データ)とを一致させる。なお、乗員は、自車両の周囲状況(点群データ)の点群26の任意の箇所をタッチスクロールして、自車両の周囲状況(点群データ)全体を移動させることにより、地図データと自車両の周囲状況(点群データ)とを一致させてもよい。設定部13は、乗員の操作情報に基づいて、地図データ上の自車両の位置を設定する。
本発明の実施形態の第2の変形例によれば、模擬車両27を提示しない場合でも、記憶装置2に記憶された地図データと周囲状況センサ3により検出された自車両の周囲状況とを提示することにより、乗員は、地図データと自車両の周囲状況との位置関係を設定することができる。そして、設定部13は、乗員の操作情報に基づいて、地図データ上の自車両の位置を設定することにより、地図データ上の自車両の位置を精度良く推定可能となる。
<第3の変形例>
本発明の実施形態では、図4Aに示すように、周囲状況センサ3により検出された自車両の周囲状況として点群データを用いる場合を説明した。これに対して、本発明の実施形態の第3の変形例では、図9Aに示すように、周囲状況センサ3により検出された自車両の周囲状況としてカメラ画像を用いる点が、本発明の実施形態と異なる。
図9Aに示すように、提示ユニット4には、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況としてのカメラ画像とを重畳した画像I2を提示する。カメラ画像は物標21a,22a,23a,24aを含み、これらの物標21a,22a,23a,24aは、記憶装置2に記憶された地図データの物標21,22,23,24と対応する。この場合、乗員は、例えば図9Bに示すように、地図データ上の物標24を指31で矢印方向(下方向)にタッチスクロールすることにより物標21,22,23,24を含む地図データ全体を下方向に移動して、地図データをカメラ画像に一致させる。なお、乗員は、カメラ画像の物標21a,22a,23a,24aのいずれかをタッチスクロールすることにより物標21a,22a,23a,24aを含むカメラ画像全体を移動して、カメラ画像を地図データに一致させてもよい。
本発明の実施形態の第3の変形例によれば、周囲状況センサ3により検出された自車両の周囲状況としてカメラ画像を提示することにより、CG画像を提示する場合と比較して、乗員は、地図データと自車両の周囲状況との位置関係を直感的に把握し易くなる。
<第4の変形例>
本発明の実施形態の第4の変形例として、周囲状況センサ3により検出された自車両の周囲状況の物標の位置を個別に設定する場合を説明する。図10Aは、記憶装置2に記憶された地図データの画像I3であり、物標41,42が存在する。図10Bは、周囲状況センサ3により検出された自車両の周囲状況の画像I4であり、物標41a,42aを含む。物標41a,42aは、図10Aに示した地図データの物標41,42に対応するが、物標41aの位置が実際の位置からずれて誤検出されている。図10Bには、推定部11により推定された自車両の位置に模擬車両43が提示されている。
提示制御部12は、図10Aに示した地図データの画像I3と、図10Bに示した自車両の周囲状況の画像I4とを並べて提示ユニット4に提示させる。乗員は、図10Cに示すように、自車両の周囲状況の物標41aを指31で矢印の方向(右方向)にドラッグして、正しい位置でドロップすることにより、物標41aの位置を設定する操作を行う。設定部13は、乗員の操作情報に基づいて、周囲状況センサ3により検出された自車両の周囲状況の物標41aの位置を設定(補正)する。設定部13は更に、補正後の物標41a,42aと自車両との相対的位置関係に基づいて、図10Dに示すように自車両の位置を設定(補正)する。
本発明の実施形態の第4の変形例によれば、周囲状況センサ3により検出された自車両の周囲状況の物標の位置を個別に設定することができ、設定された自車両の周囲状況に基づいて自車両の位置を設定することができる。
<第5の変形例>
本発明の実施形態では、図4Aに示すように、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを重畳した画像I1を提示ユニット4に提示する場合を説明した。これに対して、本発明の実施形態の第5の変形例では、図11Aに示すように、地図データと自車両の周囲状況とを重畳させずに並べて提示する点が、本発明の実施形態と異なる。
図11Aの左側が、記憶装置2に記憶された地図データの画像I5であり、物標21,22,23,24を含む。なお、地図データの画像I5中には、推定部11により推定された地図データ上の自車両の位置を表す模擬車両を提示してもよい。図11Aの右側が、周囲状況センサ3により検出された自車両の周囲状況のCG画像I6であり、物標21a,22a,23a,24aを含む。自車両の周囲状況のCG画像I6は、例えば点群データやカメラ画像に基づいて生成可能である。自車両の周囲状況のCG画像I6には、推定部11により推定された自車両の位置に模擬車両27を提示している。
乗員は、例えば図11Aに示すように、右側の自車両の周囲状況の画像I6の模擬車両27をドラッグし、矢印で示すように移動して、左側の地図データの画像I5上の位置でドロップすることにより、地図データ上の自車両の位置を設定する。設定部13は、乗員の操作情報に基づいて、地図データ上の模擬車両27がドラッグされた位置を、自車両の位置として設定する。
或いは、乗員は、図11Bに示すように、右側の自車両の周囲状況の画像I6の物標22aをドラッグし、矢印で示すように移動して、左側の地図データの画像I5の物標22の位置でドロップすることにより、自車両の周囲状況の物標22aと、地図データの物標22とが一致することを設定してもよい。設定部13は、乗員の操作情報に基づいて、地図データの物標22の位置と、自車両の周囲状況の物標22aの位置とが一致するように地図データと自車両の周囲状況の照合(マッチング)結果を補正する。設定部13は更に、補正された地図データと自車両の周囲状況の照合(マッチング)結果に基づいて、推定部11により推定された地図データ上の自車両の位置を補正する。
本発明の実施形態の第5の変形例によれば、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを並べて提示する場合でも、乗員は地図データと自車両の周囲状況又は自車両との位置関係を設定することができる。そして、設定部13は、乗員の操作情報に基づいて、推定部11により推定された地図データ上の自車両の位置を補正することにより、地図データ上の自車両の位置を精度良く推定可能となる。
<第6の変形例>
本発明の実施形態では、図4Aに示すように、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを重畳した俯瞰画像I1を提示ユニット4に提示する場合を説明した。これに対して、本発明の実施形態の第6の変形例では、図12Aに示すように、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを重畳した前方画像I7を提示する点が、本発明の実施形態と異なる。
図12Aに示すように、記憶装置2に記憶された地図データは、標識51に対応する十字マーク52を含む。図12Aでは、周囲状況センサ3により検出された自車両の周囲状況は、駐車枠と標識51を含む。推定部11が、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを照合(マッチング)する際に、周囲状況センサ3により検出された水たまり等を標識51と誤認識し、記憶装置2に記憶された地図データの十字マーク52と標識51の位置とが相対的にずれて位置合わせされている。
乗員は、図12Bに示すように、地図データの十字マーク52を指でドラッグし、標識51の位置でドロップすることにより、十字マーク52と標識51とが一致することを設定する。設定部13は、乗員の操作情報に基づいて、地図データの十字マーク52の位置と、標識51の位置とが一致するように地図データと自車両の周囲状況の照合(マッチング)結果を補正する。設定部13は更に、補正された地図データと自車両の周囲状況との照合(マッチング)結果に基づいて、推定部11により推定された地図データ上の自車両の位置を補正する。
本発明の実施形態の第6の変形例によれば、記憶装置2に記憶された地図データと、周囲状況センサ3により検出された自車両の周囲状況とを重畳した前方画像I7を提示する場合にも、乗員は、地図データと自車両の周囲状況との位置関係を設定することができる。そして、設定部13は、乗員の操作情報に基づいて、推定部11により推定された地図データ上の自車両の位置を補正することにより、地図データ上の自車両の位置を精度良く推定可能となる。
(その他の実施の形態)
上記のように、本発明は実施形態によって記載したが、この開示の一部をなす論述及び図面は本発明を限定するものであると理解すべきではない。この開示から当業者には様々な代替実施の形態、実施例及び運用技術が明らかとなろう。
本発明の実施形態においては、地図データをCG画像で提示するとともに、周囲状況センサ3により検出された自車両の周囲状況を点群データで提示する場合を説明したが、これに限定されない。例えば、地図データをカメラ画像で提示するとともに、周囲状況センサ3により検出された自車両の周囲状況をカメラ画像で提示してもよい。或いは、地図データをカメラ画像で提示するとともに、周囲状況センサ3により検出された自車両の周囲状況をCG画像で提示してもよい。或いは、地図データをCG画像で提示するとともに、周囲状況センサ3により検出された自車両の周囲状況をカメラ画像で提示してもよい。
また、本発明の実施形態においては、提示ユニット4がディスプレイである場合を説明したが、提示ユニット4がディスプレイ以外のデバイスであってもよい。例えば、提示ユニット4がスピーカである場合、提示ユニット4は、記憶された駐車目標位置の周囲状況や、周囲状況センサ3により検出された自車両の周囲状況を説明する音声を出力することにより、記憶された駐車目標位置の周囲状況や、周囲状況センサ3により検出された自車両の周囲状況を乗員に対して提示することができる。
このように、本発明はここでは記載していない様々な実施の形態等を含むことは勿論である。したがって、本発明の技術的範囲は上記の説明から妥当な特許請求の範囲に係る発明特定事項によってのみ定められるものである。
1…制御装置
2…記憶装置
3…周囲状況センサ
4…提示ユニット
5…操作ユニット
11…推定部
12…提示制御部
13…設定部
14…駐車支援部

Claims (8)

  1. 駐車目標位置への駐車に際し、前記駐車目標位置の周囲状況を記憶装置に記憶し、前記記憶された周囲状況を用いて自動駐車を実行する駐車支援装置の自己位置推定方法において、
    前記記憶された周囲状況を提示するステップと、
    前記記憶された周囲状況と、自車両又は前記自車両の周囲に存在する物標と、の相対位置関係を設定する乗員からの操作を受け付けるステップと、
    前記操作に基づいて、前記記憶された周囲状況における前記自車両の位置又は前記物標の位置を設定するステップ
    とを含むことを特徴とする自己位置推定方法。
  2. 駐車目標位置への駐車に際し、前記駐車目標位置の周囲状況を記憶装置に記憶し、前記記憶された周囲状況を用いて自動駐車を実行する駐車支援装置の自己位置推定方法において、
    前記記憶された周囲状況を提示するステップと、
    前記記憶された周囲状況と、自車両又は自車両の周囲に存在する物標と、の位置関係の乗員からの操作を受け付けるステップと、
    前記操作に基づいて、前記記憶された周囲状況における前記自車両の位置又は物標の位置を補正するステップ
    とを含むことを特徴とする自己位置推定方法。
  3. 前記自車両の周囲状況を検出するステップと、
    前記検出された周囲状況に基づいて、前記記憶された周囲状況における前記自車両又は前記物標の位置を推定するステップ
    とを更に含み、
    前記提示するステップは、前記記憶された周囲状況における前記自車両の位置又は前記物標を提示するとともに、前記検出された周囲状況における前記自車両の位置又は前記物標を提示し、
    前記受け付けるステップは、前記記憶された周囲状況における前記自車両の位置又は前記物標と、前記検出された周囲状況における前記自車両の位置又は前記物標と、を対応付ける前記乗員からの操作を受け付けることを特徴とする請求項1又は2に記載の自己位置推定方法。
  4. 前記記憶された周囲状況又は前記検出された周囲状況を俯瞰画像で提示することを特徴とする請求項3に記載の自己位置推定方法。
  5. 前記検出された周囲状況として予め定めた特定の物標が検出されたか否かを判定するステップと、
    前記特定の物標が検出された場合に、前記特定の物標の検出を前記乗員に対して提示するステップ
    とを更に含むことを特徴とする請求項3又は4に記載の自己位置推定方法。
  6. 前記自車両の周囲状況により、検出した周囲状況における前記自車両と物標の相対位置関係を検出するステップと、
    をさらに含み、
    前記自車両の位置又は前記物標の位置を設定するステップは、検出した自車両又は物標の内の何れかの前記記憶された周囲状況における位置関係が設定された場合に、前記相対位置関係に基づいて、検出した自車両又は物標の内のもう一方の前記記憶された周囲状況における位置関係を設定する
    ことを特徴とする請求項3〜5のいずれか1項に記載の自己位置推定方法。
  7. 駐車目標位置への駐車に際し、前記駐車目標位置の周囲状況を記憶装置に記憶し、前記記憶された周囲状況を用いて自動駐車を実行する駐車支援装置の自己位置推定装置において、
    前記記憶された周囲状況を提示する提示ユニットと、
    前記記憶された周囲状況が提示された時に、前記記憶された周囲状況と、自車両又は前記自車両の周囲に存在する物標と、の相対位置関係を設定する乗員からの操作を受け付けるインターフェースと、
    前記操作に基づいて、前記記憶された周囲状況における前記自車両の位置又は前記物標の位置を設定するコントローラと、
    を備えることを特徴とする自己位置推定装置。
  8. 駐車目標位置への駐車に際し、前記駐車目標位置の周囲状況を記憶装置に記憶し、前記記憶された周囲状況を用いて自動駐車を実行する駐車支援装置の自己位置推定装置において、
    前記記憶された周囲状況を提示する提示ユニットと、
    前記記憶された周囲状況が提示された時に、前記記憶された周囲状況と、自車両又は自車両の周囲に存在する物標と、の位置関係の乗員からの操作を受け付けるインターフェースと、
    前記操作に基づいて、前記記憶された周囲状況における前記自車両の位置又は物標の位置を補正するコントローラと、
    を備えることを特徴とする自己位置推定装置。
JP2018544647A 2016-10-13 2016-10-13 自己位置推定方法及び自己位置推定装置 Active JP6693570B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/080387 WO2018070022A1 (ja) 2016-10-13 2016-10-13 自己位置推定方法及び自己位置推定装置

Publications (2)

Publication Number Publication Date
JPWO2018070022A1 JPWO2018070022A1 (ja) 2019-07-18
JP6693570B2 true JP6693570B2 (ja) 2020-05-13

Family

ID=61905352

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018544647A Active JP6693570B2 (ja) 2016-10-13 2016-10-13 自己位置推定方法及び自己位置推定装置

Country Status (11)

Country Link
US (1) US11027725B2 (ja)
EP (1) EP3527456A4 (ja)
JP (1) JP6693570B2 (ja)
KR (1) KR102233901B1 (ja)
CN (1) CN109843688B (ja)
BR (1) BR112019007386B1 (ja)
CA (1) CA3041177C (ja)
MX (1) MX2019004336A (ja)
MY (1) MY183913A (ja)
RU (1) RU2711245C1 (ja)
WO (1) WO2018070022A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102420476B1 (ko) * 2018-05-25 2022-07-13 에스케이텔레콤 주식회사 차량의 위치 추정 장치, 차량의 위치 추정 방법, 및 이러한 방법을 수행하도록 프로그램된 컴퓨터 프로그램을 저장하는 컴퓨터 판독가능한 기록매체
US11869251B2 (en) * 2018-07-02 2024-01-09 Nissan Motor Co., Ltd. Driving support method and driving support device
JP7296265B2 (ja) * 2019-07-03 2023-06-22 日立Astemo株式会社 運転情報制御装置および運転情報制御システム
JP7349909B2 (ja) * 2019-12-27 2023-09-25 株式会社Ihiエアロスペース 位置同定装置、移動体位置同定システム、及び位置同定方法
WO2024157442A1 (ja) * 2023-01-27 2024-08-02 日産自動車株式会社 駐車支援方法及び駐車支援装置

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05216407A (ja) * 1992-01-31 1993-08-27 Suzuki Motor Corp 現在位置補正装置
JP2952816B2 (ja) * 1996-12-17 1999-09-27 本田技研工業株式会社 車両の自動操舵装置
JP3632563B2 (ja) * 1999-10-19 2005-03-23 株式会社豊田自動織機 映像位置関係補正装置、該映像位置関係補正装置を備えた操舵支援装置、及び映像位置関係補正方法
JP3949073B2 (ja) * 2003-03-27 2007-07-25 トヨタ自動車株式会社 駐車支援装置
US7085634B2 (en) * 2003-04-11 2006-08-01 Toyota Jidosha Kabushiki Kaisha Parking assist apparatus and parking assist method for vehicle
JP4167562B2 (ja) 2003-07-18 2008-10-15 トヨタ自動車株式会社 車両用走行支援装置
JP3931857B2 (ja) 2003-07-23 2007-06-20 トヨタ自動車株式会社 駐車支援装置及び後退支援装置
JP3883529B2 (ja) * 2003-08-28 2007-02-21 アイシン精機株式会社 車両後退支援装置
JP3938559B2 (ja) * 2003-08-28 2007-06-27 アイシン精機株式会社 車両後退支援装置
JPWO2005107261A1 (ja) * 2004-04-27 2008-03-21 松下電器産業株式会社 車両周囲表示装置
CN1737501A (zh) 2004-08-20 2006-02-22 爱信精机株式会社 用于车辆的停车辅助装置与停车辅助方法
JP2007099261A (ja) * 2005-09-12 2007-04-19 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP4661639B2 (ja) * 2006-03-08 2011-03-30 アイシン・エィ・ダブリュ株式会社 運転支援装置
JP4732937B2 (ja) 2006-03-29 2011-07-27 パイオニア株式会社 位置検出装置、その方法、そのプログラム及びその記録媒体
JP4818816B2 (ja) * 2006-06-05 2011-11-16 富士通株式会社 駐車支援プログラム及び駐車支援装置
JP4899826B2 (ja) * 2006-11-28 2012-03-21 アイシン・エィ・ダブリュ株式会社 駐車支援方法及び駐車支援装置
US7679527B2 (en) * 2007-04-23 2010-03-16 Roland Edward Chemali Method and apparatus for automated parking assistance
JP5380941B2 (ja) * 2007-10-01 2014-01-08 日産自動車株式会社 駐車支援装置及び方法
KR101250040B1 (ko) * 2009-02-25 2013-04-03 도요타 지도샤(주) 차재 정보 처리 장치 및 정보 처리 방법
DE102010020204A1 (de) * 2010-05-12 2011-11-17 Volkswagen Ag Verfahren zum Einparken eines Fahrzeugs sowie entsprechendes Einparkassistenzsystem und Fahrzeug
DE102010039634B4 (de) * 2010-08-23 2013-05-08 Ford Global Technologies, Llc Anordnung und Verfahren zur Verkehrszeichenerkennung
MX352872B (es) * 2010-11-29 2017-12-13 Nissan Motor Vehículo y método para el control de la dirección del mismo.
JP5516992B2 (ja) * 2010-11-30 2014-06-11 アイシン精機株式会社 駐車位置調整装置
US20120249342A1 (en) 2011-03-31 2012-10-04 Koehrsen Craig L Machine display system
JP5857224B2 (ja) * 2012-03-30 2016-02-10 パナソニックIpマネジメント株式会社 駐車支援装置、及び駐車支援方法
JP6328369B2 (ja) * 2012-11-27 2018-05-23 クラリオン株式会社 車載用制御装置
JP6094266B2 (ja) * 2013-02-28 2017-03-15 アイシン精機株式会社 駐車支援装置、駐車支援方法およびプログラム
DE102013012930A1 (de) * 2013-08-02 2015-02-05 Connaught Electronics Ltd. Verfahren zum Bestimmen eines aktuellen Abstands und/oder einer aktuellen Geschwindigkeit eines Zielobjekts anhand eines Referenzpunkts in einem Kamerabild, Kamerasystem und Kraftfahrzeug
KR102003339B1 (ko) * 2013-12-06 2019-07-25 한국전자통신연구원 정밀 위치 설정 장치 및 방법
EP2886420B1 (en) * 2013-12-20 2017-05-10 Nokia Technologies OY Method and Apparatus for Causing Sending of a Parking Directive
JP6248836B2 (ja) 2014-07-10 2017-12-20 株式会社デンソー 運転支援装置
JP6275006B2 (ja) * 2014-09-12 2018-02-07 アイシン精機株式会社 駐車支援装置
JP5957745B1 (ja) * 2015-07-31 2016-07-27 パナソニックIpマネジメント株式会社 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両
US9676326B2 (en) * 2015-09-25 2017-06-13 Ford Global Technologies, Llc Drive history parking barrier alert
CN105774815A (zh) * 2016-03-07 2016-07-20 江苏大学 一种高适应性人机交互型智能泊车方法
JP6726244B2 (ja) * 2018-09-07 2020-07-22 本田技研工業株式会社 自動駐車装置及び自動駐車方法

Also Published As

Publication number Publication date
EP3527456A1 (en) 2019-08-21
EP3527456A4 (en) 2019-10-23
CN109843688B (zh) 2020-07-17
US20190283735A1 (en) 2019-09-19
RU2711245C1 (ru) 2020-01-15
CN109843688A (zh) 2019-06-04
CA3041177A1 (en) 2018-04-19
BR112019007386B1 (pt) 2023-02-07
JPWO2018070022A1 (ja) 2019-07-18
WO2018070022A1 (ja) 2018-04-19
KR20190052709A (ko) 2019-05-16
KR102233901B1 (ko) 2021-03-31
MY183913A (en) 2021-03-17
CA3041177C (en) 2021-08-31
BR112019007386A2 (pt) 2019-07-02
US11027725B2 (en) 2021-06-08
MX2019004336A (es) 2019-07-15

Similar Documents

Publication Publication Date Title
JP6693570B2 (ja) 自己位置推定方法及び自己位置推定装置
JP4341649B2 (ja) ナビゲーション装置、位置検出方法
US10618528B2 (en) Driving assistance apparatus
KR102452556B1 (ko) 차량 주차 제어 장치, 그를 포함한 시스템 및 그 방법
US9477315B2 (en) Information query by pointing
US20190270458A1 (en) Autonomous driving control parameter changing device and autonomous driving control parameter changing method
US10473480B2 (en) Display control device, and display device having a virtual image displayed on a windshield, and display control method thereof
US20200062173A1 (en) Notification control apparatus and method for controlling notification
JP4833384B1 (ja) ナビゲーション装置、ナビゲーション方法、ナビゲーションプログラムおよび記録媒体
EP3339808B1 (en) Positioning objects in an augmented reality display
JP2008262481A (ja) 車両制御装置
JP2011122994A (ja) ナビゲーション装置
TWI657230B (zh) 導航定位裝置及應用其之導航定位方法
JP2011207383A (ja) 後退駐車支援制御装置および後退駐車支援制御装置用のプログラム
JP2017117414A (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP4989937B2 (ja) 車両用モニタ装置および目印表示方法
JP6483421B2 (ja) 車載装置
JP2015020677A (ja) 画像認識装置、ジェスチャ入力装置及びコンピュータプログラム
US20230315280A1 (en) Information display device and program
JP5024682B2 (ja) ナビゲーション装置及びプログラム
JP5356483B2 (ja) ナビゲーション装置及びナビゲーション方法
JP6822723B2 (ja) 経路設定装置、経路設定方法及び経路設定プログラム
JP2014191818A (ja) 操作支援システム、操作支援方法及びコンピュータプログラム
CN114061613A (zh) 用于提供车辆导航服务的方法、装置、介质及车辆
JP2013073422A (ja) 携帯端末装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190328

A529 Written submission of copy of amendment under article 34 pct

Free format text: JAPANESE INTERMEDIATE CODE: A5211

Effective date: 20190328

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190328

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191210

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200207

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200317

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200330

R151 Written notification of patent or utility model registration

Ref document number: 6693570

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151