JP2017124751A - 駐車支援装置および駐車支援方法 - Google Patents

駐車支援装置および駐車支援方法 Download PDF

Info

Publication number
JP2017124751A
JP2017124751A JP2016005376A JP2016005376A JP2017124751A JP 2017124751 A JP2017124751 A JP 2017124751A JP 2016005376 A JP2016005376 A JP 2016005376A JP 2016005376 A JP2016005376 A JP 2016005376A JP 2017124751 A JP2017124751 A JP 2017124751A
Authority
JP
Japan
Prior art keywords
vehicle
image
parking
range
estimated movement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016005376A
Other languages
English (en)
Other versions
JP6545108B2 (ja
Inventor
亮平 須田
Ryohei Suda
亮平 須田
康介 棟方
Kosuke Munakata
康介 棟方
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2016005376A priority Critical patent/JP6545108B2/ja
Priority to US15/381,350 priority patent/US10189501B2/en
Publication of JP2017124751A publication Critical patent/JP2017124751A/ja
Application granted granted Critical
Publication of JP6545108B2 publication Critical patent/JP6545108B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D15/00—Steering not otherwise provided for
    • B62D15/02—Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027—Parking aids, e.g. instruction means
    • B62D15/0275—Parking aids, e.g. instruction means by overlaying a vehicle path based on present steering angle over an image without processing that image
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/002—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles specially adapted for covering the peripheral part of the vehicle, e.g. for viewing tyres, bumpers or the like
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/168—Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Computer Graphics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

【課題】疑似駐車枠の位置に誤差が生じている可能性がある場合には、ユーザがその誤差の可能性を踏まえて車両を移動させることが可能な「駐車支援装置および駐車支援方法」を提供する。
【解決手段】車両の移動に伴って車両から得られる車速情報および舵角情報に基づいて現在の駐車範囲を特定する駐車範囲特定部１０５と、特定された現在の駐車範囲を示す画像を、見た車両周辺画像に重ねて表示する表示制御部１０６と、車速が徐々に低下する過程において、車速情報が得られなくなった場合、それ以前に得られた車速情報による車両の減速度と、舵角情報とに基づいて、車両の推定移動範囲を算出する推定移動範囲算出部１０７と、駐車範囲を示す画像の周囲に、推定移動範囲算出部１０７によって算出された推定移動範囲を示す画像を表示する推定移動範囲表示部１０８とを備えることにより、ユーザが、車両の推定移動範囲を直観的に把握することができるようにする。
【選択図】図１

Description

本発明は、駐車支援装置および駐車支援方法に関し、特に、車両の移動に伴って車両から得られる車速情報および舵角情報に基づいて、車両の駐車範囲を示す画像を視点変換画像に重ねて表示するようになされた駐車支援装置および駐車支援方法に用いて好適なものである。
従来、車両を後方駐車させる際に、リアカメラで撮像した車両後方画像またはこの車両後方画像から生成された視点変換画像を、車内のディスプレイに表示させる技術が利用されている。視点変換画像とは、車両後方画像を視点変換することにより、車両後方を自車両の上方の仮想視点から見たときの画像である。運転者は、ディスプレイに表示された画像内における駐車枠と車両との位置関係を見ながら運転することにより、所定の駐車枠内に車両を駐車させることができるようになる。
しかしながら、車両が後方に進むにつれて、車両後方画像に写し出される駐車枠の範囲が徐々に狭くなってゆき、最終的には、車両後方画像に駐車枠が殆ど写し出されなくなる。この場合、ドライバーは、駐車枠内に車両がうまく駐車されているか否かを画像から確認することは困難である。
図８は、従来の車両周辺画像の一例を示す図である。図８（ａ）に示す車両周辺画像８００は、車両後方画像を視点変換した視点変換画像８２０と、自車両の画像８１０とから生成されたものである。視点変換画像８２０には、車両の後方にある白線８２１と、車両の左側方にある白線８２２と、車両の右側方にある白線８２３とからなる駐車枠が写し出されている。図８（ａ）に示すように、車両がその後方にある白線８２１から離間している場合には、車両の左右にある白線８２２，８２３が、比較的長い長さをもって視点変換画像８２０に写し出される。この場合、ドライバーは、車両周辺画像８００によって、自車両の画像８１０と、視点変換画像８２０に写し出されている白線８２２，８２３との位置関係を確認することにより、駐車枠内に車両がうまく駐車されているか否かを確認することができる。
一方、図８（ｂ）に示す車両周辺画像８００’は、車両が白線８２１の近くまで移動したときに、車両後方画像を視点変換した視点変換画像８２０と、自車両の画像８１０とから生成されたものである。図８（ｂ）に示すように、車両がその後方にある白線８２１に近接すると、車両の左右にある白線８２２，８２３は、視点変換画像８２０に殆ど写し出されなくなる。この場合、ドライバーは、駐車枠内に車両がうまく駐車されているか否かを車両周辺画像８００’から確認することは困難である。
そこで、従来、カメラによって撮像された車両後方画像から視点変換画像を生成して表示するようになされた技術において、過去の車両後方画像から検出した過去の駐車枠の位置と車両の移動に関する情報とに基づいて現在の駐車枠の位置を算出し、算出した現在の駐車枠の位置を示す疑似駐車枠の画像を、現在の視点変換画像と組み合わせて表示するようにした技術が考案されている。
例えば、下記特許文献１，２には、カメラによって撮像された車両後方の生画像をディスプレイの後方画像表示領域に表示するとともに、ＣＧの車両と、メモリに記憶された過去画像から検出した白線（疑似駐車枠の画像）とを、ディスプレイの履歴表示領域における対応する位置に描画する技術が開示されている。特に、下記特許文献１，２の技術は、車両の走行に合わせ、車両の移動に関する信号（移動量および回転方向）を用いて、自車両（ＣＧの車両）に対する白線（疑似駐車枠の画像）の正確な位置を保持するようにしている。
なお、下記特許文献３には、実際に白線等の駐車用の目印が無い場合であっても、カメラによって撮像された画像を視点変換した画像から、他車両の隣接位置に駐車スペースがあると判定した場合には、その駐車スペースに駐車可能な台数分の疑似的な駐車白線の画像を、視点変換した画像における駐車スペース上に描画する技術が開示されている。また、下記特許文献３には、自車両の動き（回転動作）に合わせて駐車白線の画像を再描画する技術が開示されている。
特開２０１０−２３２７２３号公報 特開２０１０−１８４６０７号公報 特開２００６−１６０１９４号公報 特開２０１３−５５４１０号公報
上記特許文献１，２には、車両の移動量を車輪の回転数から求めることが記載されているが、一般的には、車両の車速情報から車両の移動量を求めることができる。しかしながら、一般的な車両においては、車速が１ｋｍ／ｈ未満の場合には、車速情報を取得することができない。このため、車速情報に基づいて車両の移動量を算出する方法では、車両が１ｋｍ／ｈ未満の速度で移動している場合には、車両が停車していると見做してしまうため、車両の移動量を正しく算出することができない。このため、車両に対する疑似駐車枠の表示位置を正しく表示することができないといった問題が生じる。
ここで、特許文献４には、最新の撮影画像に基づく実画像と、過去の撮影画像を用いて車両移動量情報に基づいて作成した履歴画像とを合成したものを車両周辺画像としてディスプレイに表示させるようになされた車両周辺画像表示制御装置において、次に車両移動量情報を取得する時点まで間、それまでに取得した車両移動量情報に基づいて、車両の予想移動量を推定する技術が開示されている。この技術を利用すれば、車速が１ｋｍ／ｈ未満の場合に車速情報を取得することができなくとも、それまでに取得した車両移動量情報に基づいて車両の予想移動量を推定し、その予想移動量に応じた位置に疑似駐車枠を表示することができると考えられる。
しかしながら、このように予想移動量を算出して、予想される位置に疑似駐車枠を表示したとしても、実際には車両がどのように移動しているのかが不明であるため、疑似駐車枠の表示位置に誤差が生じる場合がある。しかしながら、従来、あたかも正確であるかの如く疑似駐車枠を表示するため、ユーザがこの疑似駐車枠の表示が正確であると信じて車両を移動させてしまうと、意図した位置に駐車することができないといった問題が生じる。なお、上記特許文献３の技術は、実際には存在しない駐車白線を描画するものであり、また、車両の移動量を用いていない。このため、特許文献３の技術を用いても、このような問題を解決することはできない。
本発明は、このような問題を解決するために成されたものであり、疑似駐車枠の位置に誤差が生じている可能性がある場合には、ユーザがその誤差の可能性を踏まえて車両を移動させることができるようにすることを目的とする。
上記した課題を解決するために、本発明では、車両の移動に伴って車両から得られる車速情報および舵角情報に基づいて現在の駐車範囲を特定し、特定された現在の駐車範囲を示す画像を、前記車両の周辺を上方の仮想視点から見た車両周辺画像に重ねて表示する。そして、車速が徐々に低下する過程において、車速情報が得られなくなった場合、それ以前に得られた車速情報による車両の減速度と、舵角情報とに基づいて、それ以降の車両の推定移動範囲を算出し、車両の駐車範囲を示す画像の周囲に、算出された推定移動範囲を示す画像を表示するようにしている。
上記のように構成した本発明によれば、車速が所定速度未満に低下して車速情報が得られなくなった場合、駐車範囲を示す画像の周囲に表示された推定移動範囲の画像により、ユーザは、車両の推定移動範囲を直観的に把握することができる。このため、本発明によれば、疑似駐車枠の位置に誤差が生じている可能性がある場合には、ユーザがその誤差の可能性を踏まえて車両を移動させることができる。
本発明の一実施形態に係る駐車支援装置を備えた車載システムの機能構成例を示すブロック図である。 本発明の一実施形態に係る駐車支援装置による処理の一例を示すフローチャートである。 推定移動範囲算出部による推定移動範囲の算出例を示す図である。 推定移動範囲算出部による推定移動範囲の算出例を示す図である。 推定移動範囲算出部による推定移動範囲の算出例を示す図である。 本発明の一実施形態に係る車両周辺画像および推定移動範囲画像の一例を示す図である。 本発明の一実施形態に係る駐車範囲画像および推定移動範囲画像の変形例を示す図である。 従来の車両周辺画像の一例を示す図である。
以下、本発明の一実施形態を図面に基づいて説明する。図１は、本発明の一実施形態に係る駐車支援装置１００を備えた車載システム１０の機能構成例を示すブロック図である。
図１に示す本実施形態の車載システム１０は、自動車等の車両に搭載されているシステムである。車載システム１０は、車両が後退しながら駐車する際に、カメラ１１によって撮像された車両後方画像（特許請求の範囲に記載の「車両撮像画像」の一例）から生成された視点変換画像と、車両画像記憶部１１０に予め記憶されている車両の画像と、車両の駐車範囲を示す画像（以下、「駐車範囲画像」と示す）とから、車両の周辺を上方の仮想視点から見た画像（以下、「車両周辺画像」と示す）を生成し、当該車両周辺画像をディスプレイ１２に表示することで、車両の駐車を支援するようになされたシステムである。
図１に示すように、本実施形態の車載システム１０は、カメラ１１、ディスプレイ１２、車速センサ１３、舵角センサ１４および駐車支援装置１００を備えている。駐車支援装置１００は、その機能構成として、画像取得部１０１、視点変換画像生成部１０２、車両周辺画像生成部１０３、駐車枠検出部１０４、駐車範囲特定部１０５、表示制御部１０６、推定移動範囲算出部１０７および推定移動範囲表示部１０８を備えている。また、駐車支援装置１００は、車両画像記憶部１１０を備えている。
上記各機能ブロック１０１〜１０８は、ハードウェア、ＤＳＰ（Digital Signal Processor）、ソフトウェアの何れによっても構成することが可能である。例えばソフトウェアによって構成する場合、上記各機能ブロック１０１〜１０８は、実際にはコンピュータのＣＰＵ、ＲＡＭ、ＲＯＭなどを備えて構成され、ＲＡＭやＲＯＭ、ハードディスクまたは半導体メモリ等の記録媒体に記憶されたプログラムが動作することによって実現される。
カメラ１１は、車両の後部に設置されており、車両後方画像を撮像する。ディスプレイ１２は、各種表示画面（例えば、車両周辺画像等）を表示する。車速センサ１３は、車両の車速に応じた車速情報を出力する。なお、車速センサ１３は、車速が１ｋｍ／ｈ未満の場合には、車速情報が出力されない。舵角センサ１４は、車両の前輪の舵角に応じた舵角情報を出力する。車両画像記憶部１１０は、車両の画像（図６，７参照）を予め記憶する。
画像取得部１０１は、カメラ１１によって撮像された車両後方画像を取得する。視点変換画像生成部１０２は、画像取得部１０１によって取得された車両後方画像を視点変換することにより、車両の上方の仮想視点から見た視点変換画像を生成する。
車両周辺画像生成部１０３は、視点変換画像生成部１０２によって生成された視点変換画像と、予め車両画像記憶部１１０に記憶されている車両の画像とから、車両周辺画像を生成する。
駐車枠検出部１０４は、画像取得部１０１によって取得された車両後方画像、または、視点変換画像生成部１０２によって生成された視点変換画像から、駐車枠を検出する。例えば、駐車枠検出部１０４は、画像に写し出されている矩形状またはその一部の形状の白線を駐車枠として検出する。駐車枠の検出には、公知の画像認識技術を用いることができる。
駐車範囲特定部１０５は、駐車枠検出部１０４によって過去の車両後方画像または過去の視点変換画像から検出された駐車枠の位置（自車両に対する駐車枠の位置）と、車両の移動に伴って車両から得られる車速情報（車速センサ１３から得られた車速情報）および舵角情報（舵角センサ１４から得られた舵角情報）とに基づいて、現在の駐車範囲を特定する。駐車範囲の特定には、公知の駐車範囲特定方法を用いることができる。
表示制御部１０６は、駐車範囲特定部１０５によって特定された現在の駐車範囲を示す駐車範囲画像を、車両周辺画像生成部１０３によって生成された車両周辺画像に重ねてディスプレイ１２に表示させる。
推定移動範囲算出部１０７は、車両の車速が徐々に低下する過程において、車速センサ１３から車速情報が得られなくなった場合、それ以前に車速センサ１３から得られた車速情報による車両の減速度と、舵角センサ１４から得られた舵角情報とに基づいて、それ以降の車両の推定移動範囲（車速がゼロになると推定されるまでの推定移動範囲）を算出する。なお、車両の推定移動範囲の算出方法の詳細については、図３〜５を用いて後述する。
推定移動範囲表示部１０８は、駐車範囲画像の周囲に、推定移動範囲算出部１０７によって算出された推定移動範囲を示す画像（以下、「推定移動範囲画像」と示す）を表示する。特に、本実施形態では、推定移動範囲表示部１０８は、駐車範囲画像の周囲に、推定移動範囲画像をグラデーション表示させるようにしている。具体的には、推定移動範囲表示部１０８は、駐車範囲画像から離れるにつれて徐々に色が薄くなってゆくように、推定移動範囲画像をグラデーション表示する。
〔駐車支援装置１００による処理の一例〕
図２は、本発明の一実施形態に係る駐車支援装置１００による処理の一例を示すフローチャートである。図２に示す処理は、車両周辺画像をディスプレイ１２に写し出すタイミング（例えば、車両のバックギアセンサにより、バックギアに切り替えられたことが検出されたタイミング）で実行される。
まず、画像取得部１０１が、カメラ１１によって撮像された車両後方画像を取得する（ステップＳ２０２）。次に、視点変換画像生成部１０２が、ステップＳ２０２で取得された車両後方画像を視点変換することにおより、車両の上方の仮想視点から見た視点変換画像を生成する（ステップＳ２０４）。そして、車両周辺画像生成部１０３が、ステップＳ２０４で生成された視点変換画像と、予め車両画像記憶部１１０に記憶されている車両の画像とから、車両周辺画像を生成する（ステップＳ２０６）。また、駐車枠検出部１０４が、ステップＳ２０２で取得された車両後方画像、または、ステップＳ２０４で生成された視点変換画像から、駐車枠を検出する（ステップＳ２０８）。
次に、駐車範囲特定部１０５が、車両の移動に伴って車両から得られる車速情報および舵角情報を取得する（ステップＳ２１０）。そして、駐車範囲特定部１０５が、ステップＳ２０８で検出された駐車枠と、ステップＳ２１０で取得した車速情報および舵角情報とに基づいて、現在の駐車範囲を特定する（ステップＳ２１２）。さらに、表示制御部１０６が、ステップＳ２１２で特定された現在の駐車範囲を示す駐車範囲画像を、ステップＳ２０６で生成された車両周辺画像に重ねてディスプレイ１２に表示させる（ステップＳ２１４）。
その後、推定移動範囲算出部１０７が、車速センサ１３から車速情報が得られなくなったか否かを判断する（ステップＳ２１６）。ここで、車速センサ１３から車速情報が得られていると推定移動範囲算出部１０７が判断した場合（ステップＳ２１６：Ｎｏ）、駐車支援装置１００は、ステップＳ２１０以降の処理を再度実行する。
一方、車速センサ１３から車速情報が得られなくなったと推定移動範囲算出部１０７が判断した場合（ステップＳ２１６：Ｙｅｓ）、推定移動範囲算出部１０７が、車速情報が得られなくなった以前に車速センサ１３から得られた車速情報による車両の減速度と、舵角センサ１４から得られた舵角情報とに基づいて、車速情報が得られなくなった以降の車両の推定移動範囲を算出する（ステップＳ２１８）。
そして、推定移動範囲表示部１０８が、ディスプレイ１２に表示された駐車範囲画像の周囲に、ステップＳ２１８で算出された推定移動範囲を示す推定移動範囲画像を表示する（ステップＳ２２０）。そして、駐車支援装置１００は、図２に示す一連の処理を終了する。
〔推定移動範囲の算出例〕
図３〜５は、推定移動範囲算出部１０７による推定移動範囲の算出例を示す図である。
はじめに、図３にその概念図を示すように、推定移動範囲算出部１０７は、車両の推定移動量L［mm］を算出する。まず、下記数式（１）により、加速度a［m/s2］を求める。なお、diffは、車速が1［km/h］のときと、その500ミリ秒前の車速との速度差を示す。
a［m/s2］ ＝-2・diff（1000/3600）
＝-5/9diff［m/s2］・・・（１）
次に、下記数式（２）により、時速1［km/h］のときの秒速v0を求める。
v0 ＝1［km/h］
＝1000/3600
＝5/18［m/s］・・・（２）
そして、下記数式（３）により、車速が時速1［km/h］（秒速v0）未満となってから、上記数式（１）により求めた加速度a［m/s2］にて徐々に減速し、ゼロになるまでの推定移動量L［mm］を求める。
L［mm］ ＝（（v2−v0 2）/2a）・1000
＝（（02-（5/18）2）/2）・（−9/5diff）・1000
＝5000/72diff［mm］・・・（３）
次に、図４にその概念図を示すように、推定移動範囲算出部１０７は、上記数式（３）により求めた推定移動量L［mm］と、車両の前輪の舵角に応じた回転半径R［mm］とに応じて、下記数式（４）により、回転角θ[rad]を算出する。
θ[rad] ＝L/R・・・（４）
そして、下記数式（５）により、車両のｙ方向（前後方向）の推定移動量Dy［mm］を算出する。
Dy［mm］ ＝Rsinθ・・・（５）
また、下記数式（６）により、車両のｘ方向（左右方向）の推定移動量Dx［mm］を算出する。
Dx［mm］ ＝R-Rcosθ
＝R（1-cosθ）・・・（６）
次に、図５にその概念図を示すように、推定移動範囲算出部１０７は、上記数式（５）により求めた車両のy方向（前後方向）の推定移動量Dy［mm］と、上記数式（６）により求めた車両のｘ方向（左右方向）の推定移動量Dx［mm］とに基づいて、下記数式（７）により、車両の移動に相対する駐車範囲（駐車範囲特定部１０５によって特定された駐車範囲）のy'方向（前後方向）の推定移動量Dy'［mm］を算出する。また、下記数式（８）により、駐車範囲（駐車範囲特定部１０５によって特定された駐車範囲）のx'方向（左右方向）の推定移動量Dx'［mm］を算出する。なお、αは、車両の前後方向であるy軸と、駐車範囲の前後方向であるy'軸とがなす角である。
Dy'［mm］ ＝Dycosα+ Dxsinα・・・（７）
Dx'［mm］ ＝Dysinα+ Dxcosα・・・（８）
推定移動範囲表示部１０８は、このように算出された推定移動量Dx'，Dy'を推定移動範囲として、当該推定移動範囲を示す推定移動範囲画像を生成し、生成した推定移動範囲画像を駐車範囲画像の周囲に表示する。
〔車両周辺画像および推定移動範囲画像の一例〕
図６は、本発明の一実施形態に係る車両周辺画像および推定移動範囲画像の一例を示す図である。図６（ａ）〜（ｃ）に示す車両周辺画像６００ａ〜６００ｃは、カメラ１１によって撮像された車両後方画像を視点変換した視点変換画像６２０と、予めメモリに記憶されている自車両の画像６１０とから生成されたものである。視点変換画像６２０には、車両の後方にある白線６２１と、車両の左側方にある白線６２２と、車両の右側方にある白線６２３とからなる駐車枠が写し出されている。
また、車両周辺画像６００ａ〜６００ｃにおいて、自車両の画像６１０の周囲には、駐車範囲画像６３０が表示されている。この駐車範囲画像６３０は、過去の車両後方画像または過去の視点変換画像６２０から検出された駐車枠の位置と、車両の移動に伴って車両から得られた車速情報および舵角情報とに基づいて特定された、現在の駐車範囲を示す画像である。この例では、駐車範囲画像６３０は、あたかも駐車範囲がくり抜かれているかの如く、黒色に塗りつぶされている。ドライバーは、車両周辺画像６００ａ〜６００ｃにおいて、自車両の画像６１０と、視点変換画像６２０に写し出されている駐車枠と、駐車範囲画像６３０との位置関係を確認することにより、駐車枠内に車両がうまく駐車されているか否かを確認することができる。
ここで、車両周辺画像６００ｂには、駐車範囲画像６３０の前方のみ、推定移動範囲画像６４０が写し出されている。これは、車速が１ｋｍ／ｈ未満となったことにより、車速情報が車速センサ１３から得られなくなり、且つ、その時の車両の舵角が０度となっているからである。この推定移動範囲画像６４０において、駐車範囲画像６３０から前方へ広がる部分の縦幅は、推定移動範囲算出部１０７によって算出された推定移動量Dy'［mm］に応じたものとなっている。また、この推定移動範囲画像６４０はグラデーション表示（便宜上、図中では斜線で示しているが、実際にはグラデーション表示となっている）されており、ドライバーが推定移動範囲を容易に識別できるようになっている。具体的には、推定移動範囲画像６４０は、駐車範囲画像６３０から離れるにつれて徐々に色（駐車範囲画像６３０の黒色と同色）が薄くなってゆくようにグラデーション表示されている。これにより、駐車範囲画像６３０から離れるにつれて、誤差の生じている可能性が低くなっていることをドライバーが直観的に把握できるようになっている。
また、車両周辺画像６００ｃには、駐車範囲画像６３０の前方および右方に、推定移動範囲画像６４０’が写し出されている。これは、車速が１ｋｍ／ｈ未満となったことにより、車速情報が車速センサ１３から得られなくなり、且つ、その時の車両の舵角が左方向へ１度以上となっているからである。この推定移動範囲画像６４０’において、駐車範囲画像６３０から前方へ広がる部分の縦幅は、推定移動範囲算出部１０７によって算出された推定移動量Dy'［mm］に応じたものとなっている。また、駐車範囲画像６３０から右方へ広がる部分の横幅は、推定移動範囲算出部１０７によって算出された推定移動量Dx'［mm］に応じたものとなっている。また、この推定移動範囲画像６４０’は、車両周辺画像６００ｂの推定移動範囲画像６４０と同様にグラデーション表示されており、ドライバーが推定移動範囲を容易に識別できるようになっている。
なお、車両周辺画像６００ａには、推定移動範囲画像は表示されていない。これは、車速が１ｋｍ／ｈ以上であるため、車速情報が車速センサ１３から得られている（すなわち、正確な駐車範囲が駐車範囲画像６３０によって提示されている）からである。
以上説明したとおり、本発明の一実施形態によれば、車速が所定速度未満に低下して車速センサ１３から車速情報が得られなくなった場合、駐車範囲画像の周囲に表示された推定移動範囲画像により、ユーザは、車両の推定移動範囲を直観的に把握することができる。このため、本発明の一実施形態によれば、疑似駐車枠の位置に誤差が生じている可能性がある場合には、ユーザがその誤差の可能性を踏まえて車両を移動させることができる。
なお、上記実施形態では、駐車範囲画像を黒色に塗りつぶして表示し、推定移動範囲画像をグラデーション表示するようにしているが、本発明はこれに限らない。例えば、図７に示すように、駐車範囲画像および推定移動範囲画像の表示形態を変形してもよい。
図７は、本発明の一実施形態に係る駐車範囲画像および推定移動範囲画像の変形例を示す図である。図７（ａ），（ｂ）に示す車両周辺画像６００ｄ，６００ｅは、図６（ａ）〜（ｃ）に示す車両周辺画像６００ａ〜６００ｃと同様に、カメラ１１によって撮像された車両後方画像を視点変換した視点変換画像６２０と、予めメモリに記憶されている自車両の画像６１０とから生成されたものである。
図７（ａ）に示す車両周辺画像６００ｄでは、駐車範囲画像７３０は、駐車範囲を取り囲む白線によって構成されている。また、推定移動範囲画像７４０は、推定移動範囲を取り囲む白線によって構成されている。すなわち、車両周辺画像６００ｄでは、駐車範囲画像７３０の前枠と、推定移動範囲画像７４０の前枠との間隔により、推定移動量Dy'［mm］を表している。また、駐車範囲画像７３０の右枠と、推定移動範囲画像７４０の右枠との間隔により、推定移動量Dx'［mm］を表している。
図７（ｂ）に示す車両周辺画像６００eでは、駐車範囲画像７３０’は、推定移動範囲画像７４０’を示す白枠線によって取り囲まれている部分である。推定移動範囲画像７４０’は、推定移動範囲を白枠で塗りつぶすように構成されている。すなわち、車両周辺画像６００eでは、駐車範囲画像７３０’から前方へ広がる白枠部分の縦幅により、推定移動量Dy'［mm］を表している。また駐車範囲画像７３０’から右方へ広がる白枠部分の横幅により、推定移動量Dx'［mm］を表している。
また、上記実施形態では、車両撮像画像の一例として車両後方画像を用いて、車両の後方駐車を支援する例を説明しているが、本発明はこれに限らない。例えば、車両撮像画像として、車両の前方を撮像するフロントカメラによって撮像された車両前方画像を用いて、車両の前方駐車を支援するようにしてもよい。
その他、上記実施形態は、何れも本発明を実施するにあたっての具体化の一例を示したものに過ぎず、これによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその要旨、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。
１０ 車載システム
１１ カメラ
１２ ディスプレイ
１３ 車速センサ
１４ 舵角センサ
１００ 駐車支援装置
１０１ 画像取得部
１０２ 視点変換画像生成部
１０３ 車両周辺画像生成部
１０４ 駐車枠検出部
１０５ 駐車範囲特定部
１０６ 表示制御部
１０７ 推定移動範囲算出部
１０８ 推定移動範囲表示部
１１０ 車両画像記憶部

Claims (3)

  1. 車両の駐車を支援する駐車支援装置であって、
    前記車両に設置されたカメラによって撮像された車両撮像画像を取得する画像取得部と、
    前記画像取得部によって取得された前記車両撮像画像を視点変換することにより、前記車両の上方の仮想視点から見た視点変換画像を生成する視点変換画像生成部と、
    前記視点変換画像生成部によって生成された前記視点変換画像と、予め記憶部に記憶されている前記車両の画像とから、前記車両の周辺を上方の仮想視点から見た車両周辺画像を生成する車両周辺画像生成部と、
    過去の前記車両撮像画像または過去の前記視点変換画像から検出された駐車枠と、前記車両の移動に伴って前記車両から得られる車速情報および舵角情報とに基づいて、現在の駐車範囲を特定する駐車範囲特定部と、
    前記駐車範囲特定部によって特定された現在の駐車範囲を示す画像を、前記車両周辺画像に重ねて表示させる表示制御部と、
    前記車両の車速が徐々に低下する過程において、前記車速情報が得られなくなった場合、それ以前に得られた前記車速情報による前記車両の減速度と、前記舵角情報とに基づいて、それ以降の前記車両の推定移動範囲を算出する推定移動範囲算出部と、
    前記駐車範囲を示す画像の周囲に、前記推定移動範囲算出部によって算出された前記推定移動範囲を示す画像を表示する推定移動範囲表示部と
    を備えたことを特徴とする駐車支援装置。
  2. 前記推定移動範囲表示部は、前記駐車範囲を示す画像の周囲に、前記推定移動範囲示す画像を、前記駐車範囲を示す画像から離間するにつれて徐々に色が薄くなっていくようにグラデーション表示させる
    ことを特徴とする請求項１に記載の駐車支援装置。
  3. 車両の駐車を支援する駐車支援装置による駐車支援方法であって、
    前記駐車支援装置の画像取得部が、前記車両に設置されたカメラによって撮像された車両撮像画像を取得する画像取得工程と、
    前記駐車支援装置の視点変換画像生成部が、前記画像取得部によって取得された前記車両撮像画像を視点変換することにより、前記車両の上方の仮想視点から見た視点変換画像を生成する視点変換画像生成工程と、
    前記駐車支援装置の車両周辺画像生成部が、前記視点変換画像生成部によって生成された前記視点変換画像と、予め記憶部に記憶されている前記車両の画像とから、前記車両の周辺を上方の仮想視点から見た車両周辺画像を生成する車両周辺画像生成工程と、
    前記駐車支援装置の駐車範囲特定部が、過去の前記車両撮像画像または過去の前記視点変換画像から検出された駐車枠と、前記車両の移動に伴って前記車両から得られる車速情報および舵角情報とに基づいて、現在の駐車範囲を特定する駐車範囲特定工程と、
    前記駐車支援装置の表示制御部が、前記駐車範囲特定部によって特定された現在の駐車範囲を示す画像を、前記車両周辺画像に重ねて表示させる表示制御工程と、
    前記駐車支援装置の推定移動範囲算出部が、前記車両の車速が徐々に低下する過程において、前記車速情報が得られなくなった場合、それ以前に得られた前記車速情報による前記車両の減速度と、前記舵角情報とに基づいて、それ以降の前記車両の推定移動範囲を算出する推定移動範囲算出工程と、
    前記駐車支援装置の推定移動範囲表示部が、前記駐車範囲を示す画像の周囲に、前記推定移動範囲算出部によって算出された前記推定移動範囲を示す画像を表示する推定移動範囲表示工程と
    を含むことを特徴とする駐車支援方法。
JP2016005376A 2016-01-14 2016-01-14 駐車支援装置および駐車支援方法 Active JP6545108B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016005376A JP6545108B2 (ja) 2016-01-14 2016-01-14 駐車支援装置および駐車支援方法
US15/381,350 US10189501B2 (en) 2016-01-14 2016-12-16 Parking assist apparatus and parking assist method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016005376A JP6545108B2 (ja) 2016-01-14 2016-01-14 駐車支援装置および駐車支援方法

Publications (2)

Publication Number Publication Date
JP2017124751A true JP2017124751A (ja) 2017-07-20
JP6545108B2 JP6545108B2 (ja) 2019-07-17

Family

ID=59314349

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016005376A Active JP6545108B2 (ja) 2016-01-14 2016-01-14 駐車支援装置および駐車支援方法

Country Status (2)

Country Link
US (1) US10189501B2 (ja)
JP (1) JP6545108B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115742962A (zh) * 2022-11-25 2023-03-07 重庆长安汽车股份有限公司 一种全景影像控制方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10683035B2 (en) * 2015-12-08 2020-06-16 Panasonic Intellectual Property Management Co., Ltd. Parking assistance device, parking assistance method, and non-transitory computer readable medium

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000097713A (ja) * 1998-09-24 2000-04-07 Denso Corp 車両用現在位置検出装置、車両用現在位置表示装置、ナビゲーション装置および記録媒体
JP2003322533A (ja) * 2002-04-26 2003-11-14 Pioneer Electronic Corp 移動状況算出装置、この方法、このプログラム、このプログラムを記録する記録媒体、および、ナビゲーション装置
JP2006160194A (ja) * 2004-12-10 2006-06-22 Alpine Electronics Inc 駐車支援装置
JP2006327498A (ja) * 2005-05-27 2006-12-07 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP2007114020A (ja) * 2005-10-19 2007-05-10 Aisin Aw Co Ltd 車両の移動距離検出方法、車両の移動距離検出装置、車両の現在位置検出方法及び車両の現在位置検出装置
JP2007161193A (ja) * 2005-12-16 2007-06-28 Denso Corp 駐車支援装置
JP2007288282A (ja) * 2006-04-12 2007-11-01 Toyota Motor Corp 車両周辺監視装置
JP2010184607A (ja) * 2009-02-12 2010-08-26 Nippon Soken Inc 車両周辺表示装置
JP2010232723A (ja) * 2009-03-25 2010-10-14 Nippon Soken Inc 車両周辺表示装置
JP2013055410A (ja) * 2011-09-01 2013-03-21 Denso Corp 車両周辺画像表示制御装置
CN103328261A (zh) * 2010-11-12 2013-09-25 法雷奥开关和传感器有限责任公司 用于产生车辆周围环境的图像的方法以及成像装置
US20160034768A1 (en) * 2014-08-04 2016-02-04 Hyundai Mobis Co., Ltd. Around view monitoring apparatus and method thereof

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4108314B2 (ja) * 2001-10-31 2008-06-25 トヨタ自動車株式会社 車両用周辺監視装置
JP4561479B2 (ja) * 2005-05-26 2010-10-13 アイシン・エィ・ダブリュ株式会社 駐車支援方法及び駐車支援装置
JP5115782B2 (ja) * 2006-11-07 2013-01-09 アイシン精機株式会社 駐車支援装置
JP5088074B2 (ja) * 2007-10-01 2012-12-05 日産自動車株式会社 駐車支援装置及び方法
JPWO2009060663A1 (ja) * 2007-11-08 2011-03-17 ボッシュ株式会社 駐車支援装置
WO2010084591A1 (ja) * 2009-01-22 2010-07-29 トヨタ自動車株式会社 カーブ半径推定装置
JP5397697B2 (ja) * 2010-03-12 2014-01-22 アイシン精機株式会社 画像制御装置
US9365104B2 (en) * 2010-04-21 2016-06-14 Toyota Jidosha Kabushiki Kaisha Parking assist device for vehicle and electrically powered vehicle including the same
JP2012071635A (ja) * 2010-09-28 2012-04-12 Aisin Seiki Co Ltd 駐車支援装置
DE112010005944T5 (de) * 2010-10-19 2013-08-14 Mitsubishi Electric Corporation Stereoskopische Dreidimensionen-Anzeigevorichtung
JP5682788B2 (ja) * 2011-09-27 2015-03-11 アイシン精機株式会社 車両周辺監視装置
JP6000693B2 (ja) * 2012-07-03 2016-10-05 日立オートモティブシステムズ株式会社 駐車支援装置
CN104797488B (zh) * 2012-11-27 2017-06-30 日产自动车株式会社 驾驶辅助装置
US9002564B2 (en) * 2013-04-23 2015-04-07 Ford Global Technologies, Llc Enhanced park assist wheel speed compensation technique
US10210761B2 (en) * 2013-09-30 2019-02-19 Sackett Solutions & Innovations, LLC Driving assistance systems and methods
EP3330146B1 (en) * 2015-07-31 2023-06-14 Hitachi Astemo, Ltd. Parking assist device for vehicle

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000097713A (ja) * 1998-09-24 2000-04-07 Denso Corp 車両用現在位置検出装置、車両用現在位置表示装置、ナビゲーション装置および記録媒体
JP2003322533A (ja) * 2002-04-26 2003-11-14 Pioneer Electronic Corp 移動状況算出装置、この方法、このプログラム、このプログラムを記録する記録媒体、および、ナビゲーション装置
JP2006160194A (ja) * 2004-12-10 2006-06-22 Alpine Electronics Inc 駐車支援装置
JP2006327498A (ja) * 2005-05-27 2006-12-07 Aisin Aw Co Ltd 駐車支援方法及び駐車支援装置
JP2007114020A (ja) * 2005-10-19 2007-05-10 Aisin Aw Co Ltd 車両の移動距離検出方法、車両の移動距離検出装置、車両の現在位置検出方法及び車両の現在位置検出装置
JP2007161193A (ja) * 2005-12-16 2007-06-28 Denso Corp 駐車支援装置
JP2007288282A (ja) * 2006-04-12 2007-11-01 Toyota Motor Corp 車両周辺監視装置
US20080129539A1 (en) * 2006-04-12 2008-06-05 Toyota Jidosha Kabushiki Kaisha Vehicle surrounding monitoring system and vehicle surrounding monitoring method
JP2010184607A (ja) * 2009-02-12 2010-08-26 Nippon Soken Inc 車両周辺表示装置
JP2010232723A (ja) * 2009-03-25 2010-10-14 Nippon Soken Inc 車両周辺表示装置
CN103328261A (zh) * 2010-11-12 2013-09-25 法雷奥开关和传感器有限责任公司 用于产生车辆周围环境的图像的方法以及成像装置
JP2013055410A (ja) * 2011-09-01 2013-03-21 Denso Corp 車両周辺画像表示制御装置
US20160034768A1 (en) * 2014-08-04 2016-02-04 Hyundai Mobis Co., Ltd. Around view monitoring apparatus and method thereof

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115742962A (zh) * 2022-11-25 2023-03-07 重庆长安汽车股份有限公司 一种全景影像控制方法及装置
CN115742962B (zh) * 2022-11-25 2024-05-14 重庆长安汽车股份有限公司 一种全景影像控制方法及装置

Also Published As

Publication number Publication date
US10189501B2 (en) 2019-01-29
JP6545108B2 (ja) 2019-07-17
US20170203789A1 (en) 2017-07-20

Similar Documents

Publication Publication Date Title
JP6675448B2 (ja) 車両位置検出方法及び装置
JP5620472B2 (ja) 車両の駐車に使用するためのカメラシステム
US9886859B2 (en) Parking assistance device
US20200086793A1 (en) Periphery monitoring device
WO2016002163A1 (ja) 画像表示装置、画像表示方法
JP2016097896A (ja) 画像表示制御装置
US10099617B2 (en) Driving assistance device and driving assistance method
JP4797877B2 (ja) 車両用映像表示装置及び車両周囲映像の表示方法
JP2017220760A (ja) 車両用画像処理装置
JP7091624B2 (ja) 画像処理装置
JP2018063294A (ja) 表示制御装置
JP2016189576A (ja) 画像表示制御装置
JP2018056951A (ja) 表示制御装置
JP7271908B2 (ja) 周辺監視装置
JP2019054439A (ja) 画像処理装置
JP2017124751A (ja) 駐車支援装置および駐車支援方法
JP4768499B2 (ja) 車載周辺他車検出装置
JP7217090B2 (ja) 情報提供装置及び情報提供方法
JP6977318B2 (ja) 周辺表示装置
JP2020083048A (ja) 画像表示装置
JP2016018354A (ja) 安全運転支援装置および安全運転支援方法
JP7209442B2 (ja) 画像処理装置及び画像処理方法
JP2010202058A (ja) 車載表示装置
JP2017118409A (ja) 車両用表示装置および車両用表示方法
US20230087958A1 (en) Vehicular display device, vehicle, display method, and non-transitory computer-readable medium storing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180906

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190618

R150 Certificate of patent or registration of utility model

Ref document number: 6545108

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150