JP2020085688A - 表示システム、表示制御方法、およびプログラム - Google Patents
表示システム、表示制御方法、およびプログラム Download PDFInfo
- Publication number
- JP2020085688A JP2020085688A JP2018221427A JP2018221427A JP2020085688A JP 2020085688 A JP2020085688 A JP 2020085688A JP 2018221427 A JP2018221427 A JP 2018221427A JP 2018221427 A JP2018221427 A JP 2018221427A JP 2020085688 A JP2020085688 A JP 2020085688A
- Authority
- JP
- Japan
- Prior art keywords
- image
- vehicle
- display
- roundabout
- road
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 20
- 238000004804 winding Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 14
- 238000012545 processing Methods 0.000 description 10
- 102100022406 60S ribosomal protein L10a Human genes 0.000 description 9
- 101000755323 Homo sapiens 60S ribosomal protein L10a Proteins 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 239000008186 active pharmaceutical agent Substances 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000001133 acceleration Effects 0.000 description 4
- 238000005401 electroluminescence Methods 0.000 description 4
- 238000002485 combustion reaction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000007499 fusion processing Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/373—Details of the operation on graphic patterns for modifying the size of the graphic pattern
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/22—Display screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/23—Head-up displays [HUD]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/37—Details of the operation on graphic patterns
- G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/166—Navigation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/16—Type of output information
- B60K2360/167—Vehicle dynamics information
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/21—Optical features of instruments using cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/80—Arrangements for controlling instruments
- B60K35/81—Arrangements for controlling instruments for controlling displays
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Multimedia (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】乗員に環状交差点の道路状況をより正確に把握させることができる表示システム、表示制御方法、およびプログラムを提供すること。【解決手段】表示システムにおいて、車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部と、前記車両の周辺の道路形状を示す情報を取得する道路形状取得部と、前記道路形状取得部により取得された情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記表示部に表示させる道路に関する画像の表示態様を変更する表示制御部と、を備える。【選択図】図1
Description
本発明は、表示システム、表示制御方法、およびプログラムに関する。
従来、目的地までの経路を画面に表示して運転者の運転を支援する運転支援システムが存在する。これに関連して、環状交差点(ラウンドアバウド;roundabout)が所定の大きさ以上である場合に、2画面表示を行う技術が存在する(例えば、特許文献1参照)。
しかしながら、従来の技術では、AR(Augmented Reality;拡張現実)技術を用いて前方の風景に画像を重畳させて、その画像を乗員に視認させる場合については考慮されていなかった。そのため、乗員は、環状交差点の道路状況が認識できない可能性があった。
本発明は、このような事情を考慮してなされたものであり、乗員に環状交差点の道路状況をより正確に把握させることができる表示システム、表示制御方法、およびプログラムを提供することを目的の一つとする。
この発明に係る表示システム、表示制御方法、およびプログラムは、以下の構成を採用した。
(1):この発明の一態様に係る表示システムは、車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部と、前記車両の周辺の道路形状を示す情報を取得する道路形状取得部と、前記道路形状取得部により取得された情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記表示部に表示させる道路に関する画像の表示態様を変更する表示制御部と、を備える、表示システムである。
(1):この発明の一態様に係る表示システムは、車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部と、前記車両の周辺の道路形状を示す情報を取得する道路形状取得部と、前記道路形状取得部により取得された情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記表示部に表示させる道路に関する画像の表示態様を変更する表示制御部と、を備える、表示システムである。
(2):上記(1)の態様において、前記表示制御部は、前記環状交差点の道路形状の曲率に対応付けられた円弧画像を前記表示部に表示させるとともに、前記環状交差点の道路形状に直線成分が含まれる場合に、前記表示部に表示させる画像に直線画像を含めるものである。
(3):上記(2)の態様において、前記表示制御部は、前記車両が直線成分の道路を走行する場合に、前記車両の位置と、前記環状交差点の形態とに基づいて、前記表示部に表示させる前記直線画像の長さを変更するものである。
(4):上記(3)の態様において、前記表示制御部は、前記表示部に表示させる前記直線画像の長さを変更する場合に、前記直線画像の長さの変化に基づいて、前記円弧画像の先端部を、前記曲率に対応させて伸出させた画像を前記表示部に表示させるものである。
(5):上記(2)〜(4)のうち何れ一つの態様において、前記表示制御部は、前記環状交差点の外径が、所定値未満である場合に、前記円弧画像の先端部に内巻き成分を含めた画像を前記表示部に表示させるものである。
(6):上記(1)〜(5)のうち何れ一つの態様において、前記表示制御部は、前記環状交差点の出口に関する画像を、前記環状交差点に関する画像に対応付けられた位置に表示させるものである。
(7):この発明の一態様に係る表示制御方法は、コンピュータが、車両の周辺の道路形状を示す情報を取得し、取得された前記情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部に表示させる道路に関する画像の表示態様を変更する、表示制御方法である。
(8):この発明の一態様に係るプログラムは、コンピュータに、車両の周辺の道路形状を示す情報を取得させ、取得された前記情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部に表示させる道路に関する画像の表示態様を変更させる、プログラムである。
(1)〜(8)によれば、乗員に環状交差点の道路状況をより正確に把握させることができる。
以下、図面を参照し、本発明の表示システム、表示制御方法、およびプログラムの実施形態について説明する。なお、実施形態では、表示システムが、ADAS(Advanced Driver Assistance Systems)等の運転支援装置や、目的地までの経路を案内するナビゲーション装置を備えた車両に搭載された例について説明する。実施形態における運転支援には、例えば、ACC(Adaptive Cruise Control System)やLKAS(Lane Keeping Assistance System)、CMBS(Collision Mitigation Brake System)等が含まれる。また、以下では、左側通行の法規が適用される場合について説明するが、右側通行の法規が適用される場合、左右を逆に読み替えればよい。
[全体構成]
図1は、実施形態の表示システムを含む車両システム1の構成図である。車両システム1が搭載される車両(以下、車両Mと称する)は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジン等の内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
図1は、実施形態の表示システムを含む車両システム1の構成図である。車両システム1が搭載される車両(以下、車両Mと称する)は、例えば、二輪や三輪、四輪等の車両であり、その駆動源は、ディーゼルエンジンやガソリンエンジン等の内燃機関、電動機、或いはこれらの組み合わせである。電動機は、内燃機関に連結された発電機による発電電力、或いは二次電池や燃料電池の放電電力を使用して動作する。
図1において、車両システム1は、例えば、カメラ10と、レーダ装置12と、ファインダ14と、物体認識装置16と、車両センサ40と、ナビゲーション装置50と、運転操作子60と、HMI(Human Machine Interface)80と、運転支援装置100と、走行駆動力出力装置200と、ブレーキ装置210と、ステアリング装置220とを備える。これらの装置や機器は、CAN(Controller Area Network)通信線等の多重通信線やシリアル通信線、無線通信網等によって互いに接続される。なお、図1に示す車両システム1の構成はあくまで一例であり、構成の一部が省略されてもよいし、更に別の構成が追加されてもよい。また、ナビゲーション装置50と、HMI80と、HMI制御部150とを合わせたものが「表示システム」の一例である。
カメラ10は、車両Mの周辺を撮像し、撮像画像を生成する。カメラ10は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、車両システム1が搭載される車両Mの任意の箇所に取り付けられる。車両Mの周辺とは、車両Mの前方を含み、車両Mの側方又は後方を含んでいてもよい。例えば、車両Mの前方を撮像する場合、カメラ10は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、ステレオカメラであってもよい。
レーダ装置12は、車両Mの周辺の所定の照射方向に対してミリ波等の電波を放射するとともに、物体によって反射された電波(反射波)を検出して、少なくとも物体の位置(距離および方位)を検出する。物体とは、例えば、車両Mの周辺に存在する他車両、人、構造物、樹木、走行の障害となる障害物(例えば、車両Mの前方に存在する駐車車両や歩行者等も含む)等である。レーダ装置12は、車両Mの任意の箇所に一つまたは複数が取り付けられる。レーダ装置12は、FMCW(Frequency Modulated Continuous Wave)方式によって物体の位置および速度を検出してもよい。
ファインダ14は、車両Mの周辺の所定の照射方向に対して照射された照射光に対する散乱光を測定し、物体までの距離を検出するLIDAR(Light Detection and Ranging、或いはLaser Imaging Detection and Ranging)である。ファインダ14は、車両Mの任意の箇所に一つまたは複数が取り付けられる。
物体認識装置16は、カメラ10、レーダ装置12、およびファインダ14のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、車両Mの周辺に存在する物体の位置、種類、速度等を認識する。また、物体認識装置16は、センサフュージョン処理によって、車両Mの周辺の道路形状を認識してもよい。認識される道路形状の情報には、例えば、道路の車線数や曲率、環状交差点の有無等の情報が含まれてもよい。環状交差点とは、環状交差点とは、例えば、車両の通行部分の一部または全部に、環状(円形や楕円形を含む)形状を含む交差点である。環状形状の中心付近には、車両が旋回する基準となる領域(以下、中央島と称する)等が設けられている。環状交差点では、車両が環状交差点内の通行部分(以下、環道と称する)を、所定の方向(例えば、右周り)に通行する。物体認識装置16は、認識結果を運転支援装置100に出力する。
車両センサ40は、例えば、車両Mの速度(以下、車速と称する)を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、車両Mの向きを検出する方位センサ等が含まれる。
ナビゲーション装置50は、例えば、GNSS(Global Navigation Satellite System)受信機51と、ナビHMI52と、経路決定部53とを備え、HDD(Hard Disk Drive)やフラッシュメモリ等の記憶装置に地図情報54を保持している。地図情報54は、後述する記憶部156に記憶されてもよい。地図情報54は、例えば、道路を示すリンクと、リンクによって接続されたノードとによって道路形状が表現された情報である。また、地図情報54は、リンク形状、交通規制、道路種別、車線幅、車線数、道路構造、道路の曲率、環状交差点の有無や形態、標識情報、POI(Point Of Interest)情報等を含んでもよい。環状交差点の形態には、例えば、環状形状部分における形状成分または外径のうち、一方または双方が含まれる。形状成分には、例えば、円弧成分と直線成分とが含まれる。円弧成分とは、曲率が第1閾値以上(または曲率半径が第2閾値未満)道路の形状成分であり、直線成分とは、曲率が第1閾値未満(または曲率半径が第2閾値以上)の直線とみなせる道路の形状成分である。道路の形状成分は、環状交差点における所定の道路区間ごとに設定されてよい。したがって、環状交差点には、例えば、円弧成分のみの場合や、円弧成分と直線成分とを含む場合がある。標識情報には、例えば、道路名称、道路識別情報、制限速度、交通規制(一方通行、直進レーン、右折レーン、駐車禁止)、その道路の行き先に関する情報(例えば、地域や道路)等が含まれる。また、地図情報54は、例えば、車線の中央の情報あるいは車線の境界の情報等を含んでもよい。
GNSS受信機51は、GNSS衛星から受信した信号に基づいて、車両Mの位置を特定する。ナビHMI52は、表示装置、スピーカ、タッチパネル、キー等を含む。ナビHMI52は、後述するHMI80と一部または全部が共通化されてもよい。経路決定部53は、例えば、GNSS受信機51により特定された車両Mの位置(或いは入力された任意の位置)から、ナビHMI52を用いて乗員(運転者を含む)により入力された目的地までの経路(例えば、目的地まで走行するときの経由地に関する情報を含む)と、目的地までの経路に基づく推奨車線とを、地図情報54を参照して決定する。例えば、経路決定部53は、目的地までの地図上の経路を複数のブロックに分割し(例えば、車両進行方向に関して100[m]毎に分割し)、分割したブロックごとに推奨車線を決定する。経路決定部53は、推奨車線を決定する際、例えば、左から何番目の車線を走行するといった決定を行う。経路決定部53は、地図上経路に分岐箇所や合流箇所が存在する場合に、車両Mが分岐先や合流先で目的地方面に進行しやすくなるように、推奨車線を決定する。ナビゲーション装置50は、作動時に経路決定部53により決定された経路または推奨車線に基づいて、ナビHMI52を用いた経路案内を行う。
運転操作子60は、例えば、運転者が手動運転により車両Mの操舵および車速を制御するための操作子である。運転操作子60は、例えば、アクセルペダル、ブレーキペダル、シフトレバー、ステアリングホイール等を含む。
HMI80は、車両Mの乗員に対して各種情報を出力するとともに、乗員による入力操作を受け付ける。HMI80は、例えば、HUD82およびメーター表示部84等の各種表示装置と、スピーカ86と、バイブレータ88とを備える。HUD82やメーター表示部84は、「表示部」の一例である。また、HMI80は、発光部、ブザー、マイク、各種操作スイッチ、キー等が含まれてもよい。また、HMI80には、例えば、走行制御部120およびナビゲーション装置50の作動の開始または終了を切り替えるための操作部、HMI制御部150により制御される画像を表示させる表示部を選択するための操作部等が含まれてもよい。HMI80の詳細については、後述する。
運転支援装置100は、例えば、走行制御部120と、HMI制御部150とを備える。走行制御部120は、HMI80により走行制御部120の作動を開始する指示を受け付けた場合に、走行制御部120の作動を終了する指示を受け付けるまでの間、または車両Mが目的地に到着するまでの間、物体認識装置16や車両センサ40等から得られる情報に基づいて、車両Mの運転支援制御を実行する。例えば、走行制御部120は、ACCを実行する際には、カメラ10、レーダ装置12、およびファインダ14から物体認識装置16を介して入力される情報に基づいて、車両Mと、前走車両との車間距離を一定に保った状態で走行するように走行駆動力出力装置200およびブレーキ装置210を制御する。すなわち、走行制御部120は、前走車両との車間距離に基づく加減速制御(速度制御)を行う。また、走行制御部120は、LKASを実行する際には、車両Mが、現在走行中の走行車線を維持(レーンキープ)しながら走行するようにステアリング装置220を制御する。すなわち、運転支援装置100は、車線維持のための操舵制御を行う。また、走行制御部120は、CMBSを実行する際には、車両Mとの距離が近づいている障害物との接触を回避するように、走行駆動力出力装置200、ブレーキ装置210、およびステアリング装置220を制御する。すなわち、運転支援装置100は、物体との接触を回避するための加減速制御および操舵制御を行う。
HMI制御部150は、HMI80により乗員に情報を出力する。また、HMI80から受け付けられた情報に基づいて、車両Mに搭載された各機器を制御する。例えば、HMI制御部150は、車両Mの周辺の道路に関する情報をHUD82に表示させる。道路に関する情報には、例えば、道路状況(道路形状、曲率)、車両Mが走行可能な車線や進行方向を示す情報、環状交差点の形態、環状交差点の入口または出口の道路(例えば、環状交差点と連結する道路)に関する情報、および道路の制限速度等の交通規定に関する情報等のうち、少なくとも一つが含まれる。
また、HMI80は、上述した道路に関する情報に加えて、車線変更に関する情報や、運転支援に関する情報を所定の出力態様でHMI80に出力させてもよい。車線変更に関する情報には、例えば、ナビゲーション装置50により決定された目的地までの経路に対応付けられた推奨車線への車線変更を乗員に案内する案内情報が含まれる。案内情報には、例えば、車線変更の開始地点や可能区間を示す情報、車線変更先や目的地方面を示す情報、車線変更を行うタイミングを示す情報等が含まれる。運転支援に関する情報には、例えば、周辺の道路形状に関する情報、運転支援装置100により実行されている運転支援機能(例えば、ACC、LKAS、CMBS)の動作状態、推奨車線に関する情報、道路標識等が含まれる。HMI制御部150の機能の詳細については後述する。
走行駆動力出力装置200は、車両Mが走行するための走行駆動力(トルク)を駆動輪に出力する。走行駆動力出力装置200は、例えば、内燃機関、電動機、および変速機等の組み合わせと、これらを制御するECU(Electronic Control Unit)とを備える。ブレーキ装置210は、例えば、ブレーキキャリパーと、ブレーキキャリパーに油圧を伝達するシリンダと、シリンダに油圧を発生させる電動モータと、ブレーキECUとを備える。ブレーキECUは、運転操作子60から入力される情報、或いは走行制御部120から入力される情報に従って電動モータを制御し、制動操作に応じたブレーキトルクが各車輪に出力されるようにする。ステアリング装置220は、例えば、ステアリングECUと、電動モータとを備える。ステアリングECUは、運転操作子60から入力される情報、或いは走行制御部120から入力される情報に従って、電動モータを駆動し、転舵輪の向きを変更させる。
[HMI]
次に、HMI80について説明する。図2は、HMI80の各部が搭載された車両Mの車室内の様子を例示した図である。ナビHMI52は、例えば、図2に示すように、インスツルメントパネルIPの中央部に配置されたLCD(Liquid Crystal Display)や有機EL(Electro Luminescence)ディスプレイ等の表示装置である。また、ナビHMI52は、例えば、乗員の手指の接触による入力操作を受け付けるタッチパネルを備える。ナビHMI52は、地図情報54により取得した車両Mの周辺の道路形状や、経路決定部53により決定された目的地までの地図および経路を表示する。また、ナビHMI52は、HMI制御部150により制御された出力態様で運転支援に関する情報や車線変更に関する情報等の出力を行ってもよい。
次に、HMI80について説明する。図2は、HMI80の各部が搭載された車両Mの車室内の様子を例示した図である。ナビHMI52は、例えば、図2に示すように、インスツルメントパネルIPの中央部に配置されたLCD(Liquid Crystal Display)や有機EL(Electro Luminescence)ディスプレイ等の表示装置である。また、ナビHMI52は、例えば、乗員の手指の接触による入力操作を受け付けるタッチパネルを備える。ナビHMI52は、地図情報54により取得した車両Mの周辺の道路形状や、経路決定部53により決定された目的地までの地図および経路を表示する。また、ナビHMI52は、HMI制御部150により制御された出力態様で運転支援に関する情報や車線変更に関する情報等の出力を行ってもよい。
HUD82は、AR技術を用いて前方の風景に画像を重畳させて、その画像を乗員に視認させる。HUD82は、例えば、図2に示すように、インスツルメントパネルIP上または内部に設けられ、運転席DSの前方のフロントウインドシールドFWSの一部の表示領域82Aに画像を含む光を投射する(投光する)ことで、運転席DSに着座した運転者に虚像を視認させる。フロントウインドシールドFWSは、光透過性を有する部材である。また、HUD82は、フロントウインドシールドFWSに取り付けられた光透過性を有する表示装置に投光し、または光透過性の表示装置が取り付けられたものであってもよい。ここで、表示装置とは、例えば、液晶ディスプレイや有機ELによって実現されてもよいし、人が身体に装着するデバイスが備える透明な部材(バイザー、眼鏡のレンズ等)であってもよい。
HUD82は、例えば、道路に関する情報を画像化した像を、虚像として、HMI制御部150により制御された表示態様で運転者に視認させる。また、HUD82は、運転支援に関する情報や車線変更に関する情報を画像化した像を、虚像として、HMI制御部150により制御された表示態様で運転者に視認させてもよい。また、HUD82は、車速、駆動力配分比率、エンジン回転数、運転支援機能の動作状態、シフト位置等を画像化した像を、虚像として、HMI制御部150により制御された表示態様で運転者に視認させてもよい。以下では、HMI制御部150がHUD82に上述した処理を実行させることを、「HUD82に画像を表示させる」と称するものとする。
メーター表示部84は、例えば、インストルメントパネルIPにおける運転席DSの正面付近に設けられ、運転者が運転操作子60の一例であるステアリングホイール62の間隙から、或いはステアリングホイール62越しに視認可能な表示装置である。メーター表示部84は、例えば、LCDや有機ELディスプレイ等の表示装置である。メーター表示部84は、例えば、速度計や回転速度計等の計器類を表示する。また、メーター表示部84は、計器類を表示する領域以外の領域において、上述した道路に関する情報や車線変更に関する情報、運転支援に関する情報を、HMI制御部150により制御された出力態様で表示してもよい。
スピーカ86は、例えば、インストルメントパネルIPに設けられる。また、スピーカ86は、ドアや天井、座席等に設けられてもよい。スピーカ86は、車室内に対して、上述した運転支援に関する情報や車線変更に関する情報を、HMI制御部150により制御された出力態様で音声出力する。
バイブレータ88は、例えば、運転席DSやステアリングホイール62、シートベルト等に設けられる。図2の例では、運転席DS内にバイブレータ88Aが設けられ、ステアリングホイール62内の左右にバイブレータ88B、88Cが設けられている。バイブレータ88は、HMI制御部150により制御された出力態様で、上述した道路に関する情報や車線変更に関する情報、運転支援に関する情報を出力するタイミングで、所定の振動を行う。なお、所定の振動は、例えば、出力される情報の種類に応じて変更してもよい。バイブレータ88による振動出力により、運転者は、運転席DSやステアリングホイール62の振動を体または手で感じることで、道路に関する情報や車線変更に関する情報、運転支援に関する情報がHUD82や音声等により出力されていること等を容易に把握することができる。
[HMI制御部]
次に、HMI制御部150の構成例について説明する。図3は、実施形態のHMI制御部150の機能構成図である。HMI制御部150は、例えば、道路形状取得部151と、経路取得部152と、出力判定部153と、出力態様制御部154と、出力情報生成部155、記憶部156とを備える。これらの構成要素は、例えば、CPU(Central Processing Unit)等のハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)等のハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。上述のプログラムは、例えば、予めHMI制御部150が備えるHDD(Hard Disk Drive)やフラッシュメモリ等の記憶部156に格納されていてもよいし、DVDやCD−ROM等の着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで記憶部156にインストールされてもよい。また、出力判定部153と、出力態様制御部154と、出力情報生成部155とを合わせたものが、「表示制御部」の一例である。
次に、HMI制御部150の構成例について説明する。図3は、実施形態のHMI制御部150の機能構成図である。HMI制御部150は、例えば、道路形状取得部151と、経路取得部152と、出力判定部153と、出力態様制御部154と、出力情報生成部155、記憶部156とを備える。これらの構成要素は、例えば、CPU(Central Processing Unit)等のハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)等のハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。上述のプログラムは、例えば、予めHMI制御部150が備えるHDD(Hard Disk Drive)やフラッシュメモリ等の記憶部156に格納されていてもよいし、DVDやCD−ROM等の着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで記憶部156にインストールされてもよい。また、出力判定部153と、出力態様制御部154と、出力情報生成部155とを合わせたものが、「表示制御部」の一例である。
記憶部156は、例えば、HDD(Hard Disk Drive)、フラッシュメモリ、EEPROM(Electrically Erasable Programmable Read Only Memory)、ROM(Read Only Memory)、またはRAM(Random Access Memory)等により実現される。記憶部156は、例えば、表示態様決定テーブル156A、プロセッサによって読み出されて実行されるプログラム、その他各種情報等を格納する。表示態様決定テーブル156Aの内容については、後述する。
道路形状取得部151は、GNSS受信機51により特定された車両Mの位置情報に基づいて地図情報54を参照し、車両Mの周辺の道路に関する情報を取得する。また、道路形状取得部151は、例えば、過去に同一の環状交差点を走行したときの走行履歴を記憶部156に記憶しておき、記憶された走行履歴に基づいて、道路に関する情報を取得してもよい。道路形状取得部151は、物体認識装置16により認識された情報から車両Mの周辺の道路に関する情報の一部または全部を取得してもよい。また、道路形状取得部151は、上述した複数の取得方法により取得した結果の一部または全部を組み合わせて道路に関する情報を取得してもよい。
経路取得部152は、ナビゲーション装置50が作動中である場合に、目的地までの経路を取得する。また、経路取得部152は、経路に対応付けられた推奨車線に関する情報を取得する。
出力判定部153は、例えば、道路形状取得部151により取得された道路に関する情報や車両Mの走行状況(位置情報等)に基づいて、HMI80に出力させる必要があるか否かを判定する。また、出力判定部153は、ナビゲーション装置50により得られる情報や、物体認識装置16により認識された情報、道路形状取得部151により取得された道路に関する情報等に基づいて、車線変更に関する情報や運転支援に関する情報をHMI80に出力させる必要があるか否かを判定してもよい。
出力態様制御部154は、例えば、出力判定部153により道路に関する情報を出力する必要があると判定された場合に、乗員に対して車線変更に関する情報を通知するための出力態様を制御する。出力態様の具体例については、後述する。この場合の出力態様には、例えば、HMI80において情報を出力する一以上の対象機器、情報を出力するタイミング、出力を継続する区間、出力内容等が含まれる。
また、出力態様制御部154は、出力判定部153により車線変更に関する情報を出力する必要があると判定された場合に、運転者に対して車線変更に関する情報を通知するための出力態様を制御してもよい。また、出力態様制御部154は、出力判定部153により運転支援に関する情報を出力する必要があると判定された場合に、運転者に対して、運転支援に関する情報を通知するための出力態様を制御してもよい。
出力情報生成部155は、道路に関する情報を、出力態様制御部154により設定された出力態様で、乗員に出力する情報を生成し、生成した情報を対象機器から出力させる。例えば、出力情報生成部155は、HUD82に道路に関する情報を表示する場合には、道路に関する情報に対応する画像を生成し、生成した画像を対象のHUD82に表示させる。生成される画像には、アニメーション画像が含まれてもよい。また、出力情報生成部155は、スピーカ86により音声出力する場合に、道路に関する情報に対応する音声を生成し、生成した音声をスピーカ86により出力させる。生成される音声には、例えば、道路形状を通知する音声や、走行可能な車線の位置および方向を示す音声等が含まれる。また、出力情報生成部155は、バイブレータ88により所定の振動を出力する場合に、道路に関する情報に対応する振動情報を生成し、生成した振動情報に基づいてバイブレータ88を振動させる。
また、出力情報生成部155は、道路に関する情報代えて(または加えて)、車線変更に関する情報や運転支援に関する情報を、出力態様制御部154により設定された出力態様で乗員に出力する情報を生成し、生成した情報を対象機器から出力させてもよい。
また、出力情報生成部155は、ナビゲーション装置50が作動中である場合に、目的地までの経路や、経路に対応付けられた推奨車線に関する情報を取得し、取得した情報に基づいて、出力態様制御部154により設定された出力態様で乗員に出力する情報を生成し、生成した情報を対象機器から出力させてもよい。
次に、HMI制御部150の機能の詳細について説明する。なお、以下では、主に、出力判定部153における判定内容と、判定内容に基づく出力態様制御部154における出力制御の内容とを、幾つかのパターンに分けて説明する。また、以下では、ナビゲーション装置50による目的地までの経路案内が実行されていない状態で、車両Mが走行中の環状交差点の道路に関する画像をHUD82に表示させて、道路状況を乗員に視認させる場合の表示制御パターンについて説明するものとする。
<第1の表示制御パターン>
図4は、HMI制御部150の第1の表示制御パターンを説明するための図である。図4の例には、中央島CI1を有する環状交差点RC1と、環状交差点RC1の環道車線L1と連結する車線L2〜L7とが示されている。車線L2、L5、およびL6は、環状交差点RC1に入る入口車線である。車線L3、L4、およびL7は、環状交差点RC1から出る出口車線である。図4の環道車線L1は、右回りに通行するものとする。また、以下の説明において、時刻t1〜t3のそれぞれの時刻における車両の位置を車両M(t1)〜M(t3)と表記する。
図4は、HMI制御部150の第1の表示制御パターンを説明するための図である。図4の例には、中央島CI1を有する環状交差点RC1と、環状交差点RC1の環道車線L1と連結する車線L2〜L7とが示されている。車線L2、L5、およびL6は、環状交差点RC1に入る入口車線である。車線L3、L4、およびL7は、環状交差点RC1から出る出口車線である。図4の環道車線L1は、右回りに通行するものとする。また、以下の説明において、時刻t1〜t3のそれぞれの時刻における車両の位置を車両M(t1)〜M(t3)と表記する。
第1の制御パターンにおいて、出力判定部153は、車両Mの周辺の道路に環状交差点RC1を含むか否かを判定する。出力態様制御部154は、車両Mの周辺の道路に環状交差点RC1を含む場合に、道路に関する画像をHUD82に表示させる。この場合、出力態様制御部154は、環状交差点の形態に基づいて、HUD82に表示させる道路に関する画像の表示態様を変更する。
具体的には、出力態様制御部154は、例えば、環状交差点RC1内の環道車線L1を走行する場合に、地図情報54から環道車線L1の各道路区間における曲率を取得する。そして、出力態様制御部154は、取得した道路区間の曲率が第1閾値以上である場合に、その道路区間が円弧成分の道路であると判定し、第1閾値未満である場合に、その道路区間が直線成分の道路であると判定する。なお、第1の閾値は、予め決められた固定でもよく、環状交差点RC1の外径によって調整される可変値であってもよい。
図4の例において、環道車線L1の地点P1から地点P2の区間(以下、第1区間と称する)、および地点P3から地点P4の区間(以下、第2区間と称する)は、曲率が第1閾値未満であるものとする。また、環道車線L1の地点P2から地点P3の区間(以下、第3区間と称する)、および地点P4から地点P1までの区間(以下、第4区間と称する)は、曲率が第1閾値以上の円弧成分とみなせる道路であるものとする。この場合、出力態様制御部154は、第1区間および第2区間を直線成分の道路区間であると判定し、第3区間および第4区間を円弧成分の道路区間であると判定する。
また、出力態様制御部154は、例えば、判定された形状成分に対し、車両Mが各形状成分のどの位置を走行しているかによって、HUD82に表示させる道路に関する画像の表示態様を変更し、変更した表示態様に対応する画像を出力情報生成部155に生成させる。表示態様には、例えば、画像の形状、種類等が含まれる。
例えば、出力態様制御部154は、車両Mの位置情報(車両位置)および環状交差点RC1の形態に基づいて、記憶部156に記憶された表示態様決定テーブル156Aを参照し、車両Mの位置情報および環状交差点RC1の形態に対応付けられた画像の表示態様を取得する。
図5は、表示態様決定テーブル156Aの内容の一例を示す図である。表示態様決定テーブル156Aには、環状交差点上または環状交差点付近の車両位置および環状交差点の形態に、画像の表示態様が対応付けられている。画像の表示態様には、例えば、環状交差点RC1の直線成分に対応する直線画像の表示態様、環状交差点RC1の円弧成分に対する円弧画像の表示態様、および出口車線に対応する出口車線画像の表示態様が含まれる。直線画像の表示態様には、例えば、直線画像の表示の要否や画像の形状(幅や長さ)、色、模様等の情報が含まれる。円弧画像の表示態様には、例えば、円弧画像の表示の要否や画像の形状(幅や長さ、曲率)、色、模様、内巻き成分等の情報が含まれる。内巻き成分とは、例えば、画像の円弧を内側に向かって伸出させるための成分であり、旋回するにつれて中心(例えば、曲率中心)に近づく曲線の成分である。出口車線画像の表示態様には、例えば、出口車線画像の要否や画像の形状(幅や長さ)、色、模様等の情報が含まれる。また、画像の表示態様には、例えば、HUD82により表示される道路形状に関する画像のうち、直線画像の比率と、円弧画像の比率に関する情報が含まれていてもよい。
また、出力態様制御部154は、上述した表示態様決定テーブル156Aに代えて、車両Mの位置情報および環状交差点RC1の形態に関する情報を入力し、画像の表示態様を出力する関数を備えていてもよい。この場合、出力態様制御部154は、上述した関数に値を導入して画像の表示態様を取得してもよい。なお、出力態様制御部154は、上述の関数を、過去の走行履歴に基づく教師データを用いて機械学習を行うことで更新してもよい。
出力情報生成部155は、出力態様制御部154により取得された画像の表示態様に基づいて、環状交差点RC1の形状に関する画像を生成する。また、出力情報生成部155は、生成した画像を、車両Mの位置や向き、カメラ10により撮像された車両Mの前方の画像から得られる情報等に基づいて、運転者の視線位置から見て、車両Mの前方の風景の道路上または道路付近に重畳して視認される位置に表示させる。運転者の視線位置は、例えば、ステアリングホイールの位置や向きに基づいて推定してもよく、車室内を撮像する車室内カメラ(不図示)により撮像された画像を解析することで、運転者の目線位置を取得してもよい。
図6は、時刻t1における車両M(t1)の前方の風景に重畳される画像の一例を示す図である。図6の例では、HUD82によって、フロントウインドシールドFWSの表示領域82A内で視認される、風景と重畳された道路に関する画像IM1の一例を示している。
上述したように、環状交差点RC1は、直線成分を含んでいるため、出力態様制御部154は、道路に関する画像IM1として、環状交差点RC1の円弧成分に対応付けられた円弧画像IMc1をHUD82に表示させるとともに、直線成分に対応付けられた直線画像IMs1をHUD82に表示させる。
図6の例において、円弧画像IMc1は、所定の色や模様からなる二本の曲線が、円弧成分の道路形状に対応させて車両Mの進行方向に伸出している。また、直線画像IMs1は、所定の色や模様からなる二本の直線が、直線成分の道路形状に沿って車両Mの進行方向に伸出している。なお、曲線画像IMc1または直線画像IMs1は、同一の色や模様でもよく、異なる色や模様でもよい。また、曲線画像IMc1または直線画像IMs1は、二本の曲線または直線の間の領域を所定の透過率を有する色や模様で塗り潰した画像であってもよい。また、曲線画像IMc1または直線画像IMs1は、進行方向を示す矢印等の形状を含む画像であってもよい。
時刻t1において、車両M(t1)の運転者が視認可能な前方の所定の位置に直線成分の道路が存在し、その先に円弧成分の道路が存在する。そのため、出力情報生成部155は、図6に示すように、円弧画像IMc1を表示された位置の下端近傍から下方向(車両M方向)に伸出するように直線画像を表示させる。下端近傍とは、例えば、円弧画像の下端に接する、または下端から所定距離以内の位置である。
また、出力情報生成部155は、走行する環道車線L1に直線画像IMs1が重畳して視認されるようにHUD82を表示させる。なお、時刻t1において、車両Mの運転者から視認可能な前方の位置に円弧成分の道路は存在しない。このような場合、出力情報生成部155は、地図情報54から得られる周辺状況と、車両Mの位置情報とに基づいて、図6の例に示すように、円弧成分の道路が存在する方向の前方の風景に円弧画像IMc1を重畳して表示させる。これにより、車両Mが実際の円弧成分を含む道路が乗員に視認される位置に到達する前に、円弧成分の道路形状を乗員に把握させることができる。
なお、直線画像IMs1および円弧画像IMc1における車両Mの前方方向(言い換えると、表示領域82Aにおける縦方向)の長さD1およびD2や、車両Mの横方向(言い換えると、表示領域82Aにおける横方向)の幅W1およびW2については、出力態様制御部154により設定された画像の表示態様に基づいて生成される。
また、時刻t1における車両M(t1)の位置からは、出口車線(例えば、車線L4)が視認できない。そのため、出力情報生成部155は、この時点では、出口車線に関する画像をHUD82に視認させない。これにより、乗員が、実際に出口ではない部分を出口であると勘違いすることを抑制することができる。
図7は、時刻t2における車両M(t2)の前方の風景に重畳される画像の一例を示す図である。図7の例では、HUD82によって、フロントウインドシールドFWSの表示領域82A内で視認される、風景と重畳された道路に関する画像IM2の一例を示している。画像IM2は、時刻t2における曲線画像IMc2と直線画像IMs2とを含む。
時刻t2における車両M(t2)の位置は、時刻t1における車両M(t1)の位置と比較して、その先の直線成分を有する道路の距離が短くなっている。そのため、出力情報生成部155は、表示態様決定テーブル156Aの表示態様に基づき、直線画像IMs2の車両Mの前方方向の長さD1#を時刻t1における長さD1よりも短くし、円弧画像IMc2の車両Mの前方方向の長さD2#を時刻t1における長さD2よりも長くしてHUD82に表示させる。この場合、出力情報生成部155は、時刻t1における画像の長さD1およびD2の和と、時刻t2における画像の長さD1#およびD2#の和とは、同一になるように表示態様を変化させてもよい。これにより、運転者に、視線を余計に変動させることなく、円弧画像と直線画像との関係(比率等)を把握させることができる。
また、出力情報生成部155は、時刻t2における直線画像IMs2の横方向の幅W1#を、時刻t1における幅W1と同様とし、曲線画像IMc2の横方向の幅W2#を、時刻t1における幅W1よりも長くする。具体的には、出力情報生成部155は、直線画像の長さを変更する場合に、直線画像IMs2の長さD1#の変化に基づいて、円弧画像IMc2の先端部を、円弧成分の曲率に対応させて伸出させた画像をHUD82に表示させる。これにより、運転者に、円弧成分を含む道路が接近していること、および円弧成分の道路が伸出していることを、より正確に把握させることができる。
また、出力情報生成部155は、車両Mの位置が、出口車線を視認できることができる位置に到達していると推定される場合に、表示態様決定テーブル156Aの表示態様に基づき、出口車線に関する画像(以下、出口画像と称する)IMe2を、運転者の視線に基づいて、出口車線L4に重畳して視認される位置に重畳して表示させる。出口車線を視認できることができる位置とは、例えば、出口からの距離が所定距離以内であるとともに、出口の手前を走行する車両Mの向きが出口を中心として所定角度以内になる位置である。
また、出力情報生成部155は、出口画像IMe2を、円弧画像IMc2または直線画像IMs2の近傍に対応付けて表示させる。画像の近傍とは、例えば、画像の接する、または画像から所定距離以内の位置である。また、出口画像IMe2の色や模様は、円弧画像IMc2または直線画像IMs2と同様であってもよく、異なっていてもよい。例えば、出力情報生成部155は、ナビゲーション装置50により設定された目的地方面に向かう出口車線である場合に、円弧画像IMc2または直線画像IMs2と異なる色で表示させ、目的地もう面に向かう出口車線でない場合に、円弧画像IMc2または直線画像IMs2と同様の色で表示させてもよい。これにより、運転者に、出口方向をより正確に把握させることができる。
<第2の表示制御パターン>
図8は、HMI制御部150の出力制御の第2の表示制御パターンを説明するための図である。図8の例は、には、二つの中央島CI2およびCI3を有する環状交差点RC2と、環状交差点RC1の環道車線L1と連結する車線L11〜L18とが示されている。車線L11、L13、L15、およびL17は、環状交差点RC2に入る入口車線である。車線L12、L14、L16、およびL18は、環状交差点RC2から出る出口車線である。また、環状交差点RC2は、中央島CI2の周囲の環道車線L10Aと、中央島CI3の周囲の環道車線L10Bとを有する。図8の例において、環状交差点RC2には、直線成分の道路は存在しないものとする。
図8は、HMI制御部150の出力制御の第2の表示制御パターンを説明するための図である。図8の例は、には、二つの中央島CI2およびCI3を有する環状交差点RC2と、環状交差点RC1の環道車線L1と連結する車線L11〜L18とが示されている。車線L11、L13、L15、およびL17は、環状交差点RC2に入る入口車線である。車線L12、L14、L16、およびL18は、環状交差点RC2から出る出口車線である。また、環状交差点RC2は、中央島CI2の周囲の環道車線L10Aと、中央島CI3の周囲の環道車線L10Bとを有する。図8の例において、環状交差点RC2には、直線成分の道路は存在しないものとする。
第2の表示制御パターンでは、表示態様決定テーブル156Aの表示態様に基づき、車両Mの位置と、環状交差点RC2の中央島CI2およびCI3を中心とした環道車線L10A、L10Bの外径OD2、OD3が閾値以上であるか否かに基づいて、HUD82に表示させる画像の表示態様を変更する。
図9は、車両Mが走行する環道車線L10Aの外径OD2が所定値以上である場合に、前方の風景に重畳される画像の一例を示す図である。図9の例では、時刻t3における車両M(t3)の位置からHUD82によって、フロントウインドシールドFWSの表示領域82A内で視認される、風景と重畳された道路に関する画像IM3の一例を示している。画像IM3は、円弧画像IMc3と、出口画像IMe3とを有する。
環状交差点RC2は、直線成分を含んでいないため、出力情報生成部155は、表示態様決定テーブル156Aの表示態様に基づき、道路に関する画像IM3として、環状交差点RC1の円弧成分に対応付けられた円弧画像IMc3を、HUD82に表示させる。また、出力情報生成部155は、車両M(t3)から所定距離以内にある、運転者から視認可能な出口車線L14に対応付けられた出口画像IMe3をHUD82に表示させる。図9の例において、出力情報生成部155は、運転者が、円弧画像IMc3を環道車線L10Aに重畳して視認されるようにHUD82に表示させ、出口画像IMe3を円弧画像IMc3の近傍から車線L16に向けて伸出するようにHUD82に表示させている。
ここで、外径OD2が所定値以上である場合には、車両Mは、比較的大きな弧を描いて旋回することになり、その先の出口車線を視認するまでの時間的な余裕があるものと推定される。そのため、出力情報生成部155は、表示態様決定テーブル156Aの表示態様に基づき、乗員から視認できない出口画像については、表示しないようにする。
図10は、車両Mが走行する環道L10Aの外径OD2が所定値未満である場合に、前方の風景に重畳される画像の一例を示す図である。図10の例では、時刻t3における車両M(t3)の位置からHUD82によって、フロントウインドシールドFWSの表示領域82A内で視認される、風景と重畳された道路に関する画像IM4の一例を示している。画像IM4は、円弧画像IMc4と、出口画像IMe4およびIMe5とを有する。
環道L10Aの外径OD2が所定値未満である場合、車両Mは、比較的小さな弧を描いて旋回することになり、その先の出口車線を視認するまでの時間的な余裕がないものと推定される。そのため、出力情報生成部155は、表示態様決定テーブル156Aの表示態様に基づき、車両M(t3)の運転者が視認することができない出口車線L18に対応する出口画像IMe5をHUD82に表示させる。また、出力情報生成部155は、環道L10Aの外径OD2が所定値未満であり、円弧が小さいことを示すように、車両M(t3)から見た円弧画像の先端部を、円を描く方向に内巻き成分を含むように表示させる。これにより、運転者に、円弧成分の道路の円弧が小さいことを、より正確に把握させることができる。
上述した第2の表示制御パターンは、外径に代えて、環道車線L10Aに対する曲率を用いて、上述したように表示態様を変更してもよい。上述した第2の制御パターンによれば、外径が大きい(曲率が小さい)場合に、出口までの走行距離があるため、出口画像を表示せず、外径が小さい(曲率が大きい)場合に、運転者の視界に入る前に出口画像を表示することで、より適切なタイミングで出口画像を表示させることができる。また、第2の表示制御パターンでは、円弧が小さい場合に表示態様を変更することで、乗員は、道路状況をより正確に把握して安心して運転することができる。なお、第1の表示制御パターンまたは第2の表示制御パターンは、他の表示制御パターンの一部または全部を組み合わせてもよい。
[処理フロー]
図11は、HMI制御部150の処理の流れの一例を示すフローチャートである。図11に示す処理は、所定のタイミングまたは周期で繰り返し実行されてよい。例えば、図11に示す処理は、車両Mの周辺に環状交差点が存在する場合に繰り返し実行される。また、図11に示す処理は、第1の表示制御パターンと第2の表示制御パターンとを組み合わせた処理の一例である。
図11は、HMI制御部150の処理の流れの一例を示すフローチャートである。図11に示す処理は、所定のタイミングまたは周期で繰り返し実行されてよい。例えば、図11に示す処理は、車両Mの周辺に環状交差点が存在する場合に繰り返し実行される。また、図11に示す処理は、第1の表示制御パターンと第2の表示制御パターンとを組み合わせた処理の一例である。
図11の例において、まず、道路形状取得部151は、車両Mの周辺の道路に関する情報を取得する(ステップS100)。次に、出力判定部153は、取得した道路に関する情報基づいて、車両Mの周辺に環状交差点が存在するか否かを判定する(ステップS102)。環状交差点が存在する場合、出力態様制御部154は、直線成分の道路が存在するか否かを判定する(ステップS104)。直線成分の道路を走行する場合、出力情報生成部155は、車両Mの位置と環状交差点の形態とに基づいて、直線画像を円弧画像とを含む道路に関する画像を生成し、生成した画像をHUD82に表示させる(ステップS106)。
また、ステップS104の処理において、直線成分の道路を走行中でない場合、環道車線の外径が所定値未満であるか否かを判定する(ステップS108)。環道車線の外径が所定値未満である場合に、出力情報生成部155は、円弧画像の先端部に内巻き成分を含む道路に関する画像を表示させる(ステップS110)。また、環道車線の外径が所定値以上である場合、出力情報生成部155は、円弧画像を含む道路に関する画像を表示させる(ステップS112)。これにより、本フローチャートの処理は、終了する。
また、ステップS102の処理において、環状交差点が存在しない場合、本フローチャートの処理は、終了する。なお、図11の処理では、環状交差点の各表示態様に関する画像表示について説明したが、環状交差点に関する画像表示の加えて、車線変更に関する情報や運転支援に関する情報をHUD82に表示させてもよい。また、図11の処理に加えて、音声や振動により、環状交差点に関する情報を出力してもよい。
以上説明した実施形態によれば、乗員に環状交差点の道路状況をより正確に把握させることができる。具体的には、実施形態によれば、HUD82に表示される画像により、周囲の交通情報を確認しながら、環状交差点の形状や出口方向を認識することができる。したがって、運転者は、環状交差点や環状交差点からの出口が分かり易いため、戸惑うことなく、余裕を持った運転が可能になる。
[ハードウェア構成]
上述した実施形態の表示システムのHMI制御部150は、例えば、図12に示すようなコンピュータハードウェアの構成により実現される。図12は、実施形態のHMI制御部150のハードウェア構成の一例を示す図である。
上述した実施形態の表示システムのHMI制御部150は、例えば、図12に示すようなコンピュータハードウェアの構成により実現される。図12は、実施形態のHMI制御部150のハードウェア構成の一例を示す図である。
HMI制御部150は、通信コントローラ150−1、CPU150−2、RAM150−3、ROM150−4、フラッシュメモリやHDD等の記憶装置150−5、およびドライブ装置150−6が、内部バスあるいは専用通信線によって相互に接続された構成となっている。ドライブ装置150−6には、光ディスク等の可搬型記憶媒体が装着される。記憶装置150−5に格納されたプログラム150−5aがDMAコントローラ(不図示)等によってRAM150−3に展開され、CPU150−2によって実行されることで、HMI制御部150の各構成部の機能が実現される。また、CPU150−2が参照するプログラムは、ドライブ装置150−6に装着された可搬型記憶媒体に格納されていてもよいし、ネットワークNWを介して他の装置からダウンロードされてもよい。
上記実施形態は、以下のように表現することができる。
車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部と、
記憶装置と前記記憶装置に格納されたプログラムを実行するハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサは、前記プログラムを実行することにより、
前記車両の周辺の道路形状を示す情報を取得し、
取得された情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記表示部に表示させる道路に関する画像の表示態様を変更する、
ように構成されている表示システム。
車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部と、
記憶装置と前記記憶装置に格納されたプログラムを実行するハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサは、前記プログラムを実行することにより、
前記車両の周辺の道路形状を示す情報を取得し、
取得された情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記表示部に表示させる道路に関する画像の表示態様を変更する、
ように構成されている表示システム。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
1…車両システム、10…カメラ、12…レーダ装置、14…ファインダ、16…物体認識装置、40…車両センサ、50…ナビゲーション装置、51…GNSS受信機、52…ナビHMI、53…経路決定部、54…地図情報、60…運転操作子、80…HMI、82…HUD、84…メーター表示部、86…スピーカ、88…バイブレータ、100…運転支援装置、120…走行制御部、150…HMI制御部、151…道路形状取得部、152…経路取得部、153…出力判定部、154…出力態様制御部、155…出力情報生成部、156…記憶部、200…走行駆動力出力装置、210…ブレーキ装置、220…ステアリング装置、M…車両
Claims (8)
- 車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部と、
前記車両の周辺の道路形状を示す情報を取得する道路形状取得部と、
前記道路形状取得部により取得された情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記表示部に表示させる道路に関する画像の表示態様を変更する表示制御部と、
を備える、表示システム。 - 前記表示制御部は、前記環状交差点の道路形状の曲率に対応付けられた円弧画像を前記表示部に表示させるとともに、前記環状交差点の道路形状に直線成分が含まれる場合に、前記表示部に表示させる画像に直線画像を含める、
請求項1に記載の表示システム。 - 前記表示制御部は、前記車両が直線成分の道路を走行する場合に、前記車両の位置と、前記環状交差点の形態とに基づいて、前記表示部に表示させる前記直線画像の長さを変更する、
請求項2に記載の表示システム。 - 前記表示制御部は、前記表示部に表示させる前記直線画像の長さを変更する場合に、前記直線画像の長さの変化に基づいて、前記円弧画像の先端部を、前記曲率に対応させて伸出させた画像を前記表示部に表示させる、
請求項3に記載の表示システム。 - 前記表示制御部は、前記環状交差点の外径が、所定値未満である場合に、前記円弧画像の先端部に内巻き成分を含めた画像を前記表示部に表示させる、
請求項2から4のうち何れか1項に記載の表示システム。 - 前記表示制御部は、前記環状交差点の出口に関する画像を、前記環状交差点に関する画像に対応付けられた位置に表示させる、
請求項1から5のうち何れか1項に記載の表示システム。 - コンピュータが、
車両の周辺の道路形状を示す情報を取得し、
取得された前記情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部に表示させる道路に関する画像の表示態様を変更する、
表示制御方法。 - コンピュータに、
車両の周辺の道路形状を示す情報を取得させ、
取得された前記情報を参照し、道路形状に環状交差点が含まれると判定した場合に、前記情報から得られる環状交差点の形状成分または外径のうち一方または双方を含む前記環状交差点の形態に基づいて、前記車両の前方の風景に画像を重畳させて前記車両の乗員に画像を視認させる表示部に表示させる道路に関する画像の表示態様を変更させる、
プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018221427A JP2020085688A (ja) | 2018-11-27 | 2018-11-27 | 表示システム、表示制御方法、およびプログラム |
US16/684,608 US10854172B2 (en) | 2018-11-27 | 2019-11-15 | Display system, display control method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018221427A JP2020085688A (ja) | 2018-11-27 | 2018-11-27 | 表示システム、表示制御方法、およびプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020085688A true JP2020085688A (ja) | 2020-06-04 |
Family
ID=70770835
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018221427A Pending JP2020085688A (ja) | 2018-11-27 | 2018-11-27 | 表示システム、表示制御方法、およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10854172B2 (ja) |
JP (1) | JP2020085688A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7393375B2 (ja) | 2021-03-18 | 2023-12-06 | Lineヤフー株式会社 | 情報提供装置、情報提供方法および情報提供プログラム |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112923935B (zh) * | 2021-01-28 | 2022-03-11 | 腾讯科技(深圳)有限公司 | 环岛路线绘制方法、装置、设备及存储介质 |
JP2022184350A (ja) * | 2021-06-01 | 2022-12-13 | マツダ株式会社 | ヘッドアップディスプレイ装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4948944B2 (ja) | 2006-09-06 | 2012-06-06 | アルパイン株式会社 | ナビゲーション装置および交差点案内図の描画方法 |
JP5094658B2 (ja) * | 2008-09-19 | 2012-12-12 | 日立オートモティブシステムズ株式会社 | 走行環境認識装置 |
JP5441549B2 (ja) * | 2009-07-29 | 2014-03-12 | 日立オートモティブシステムズ株式会社 | 道路形状認識装置 |
EP3023906B1 (en) * | 2014-11-18 | 2018-05-16 | Volvo Car Corporation | Roundabout detecting arrangement, adaptive cruise control arrangement equipped therewith and method of detecting a roundabout |
JP6515773B2 (ja) * | 2015-10-09 | 2019-05-22 | 株式会社デンソー | 情報処理装置 |
EP3179212A1 (en) * | 2015-12-11 | 2017-06-14 | C.R.F. Società Consortile Per Azioni | Motor vehicle driver assistance for negotiating a roundabout |
-
2018
- 2018-11-27 JP JP2018221427A patent/JP2020085688A/ja active Pending
-
2019
- 2019-11-15 US US16/684,608 patent/US10854172B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7393375B2 (ja) | 2021-03-18 | 2023-12-06 | Lineヤフー株式会社 | 情報提供装置、情報提供方法および情報提供プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20200168180A1 (en) | 2020-05-28 |
US10854172B2 (en) | 2020-12-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11008016B2 (en) | Display system, display method, and storage medium | |
JP6630976B2 (ja) | 表示システム、表示方法、およびプログラム | |
CN108973682B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
CN108883776B (zh) | 车辆控制系统、车辆控制方法及存储介质 | |
JP2017026417A (ja) | 情報提示システム | |
JP6827378B2 (ja) | 車両制御システム、車両制御方法、およびプログラム | |
JP7011559B2 (ja) | 表示装置、表示制御方法、およびプログラム | |
US20200262349A1 (en) | Display system, display method, and program | |
US11105651B2 (en) | Display system, display control method, and storage medium for facilitating display of a road shape based on detection of a change | |
US10854172B2 (en) | Display system, display control method, and storage medium | |
KR102611337B1 (ko) | 차량의 ar 디스플레이 장치 및 그것의 동작방법 | |
US11274934B2 (en) | Information output device, output control method, and storage medium | |
CN110888431B (zh) | 通知系统、通知控制方法及存储介质 | |
JP6840035B2 (ja) | 車両制御システム | |
JP2020051902A (ja) | 表示システム、表示方法、およびプログラム | |
US20210197863A1 (en) | Vehicle control device, method, and program | |
CN110888432B (zh) | 显示系统、显示控制方法及存储介质 | |
JP2023009653A (ja) | 車両用表示制御装置、表示方法及びプログラム |