JP2020086905A - 情報提供装置及び車載装置 - Google Patents

情報提供装置及び車載装置 Download PDF

Info

Publication number
JP2020086905A
JP2020086905A JP2018220153A JP2018220153A JP2020086905A JP 2020086905 A JP2020086905 A JP 2020086905A JP 2018220153 A JP2018220153 A JP 2018220153A JP 2018220153 A JP2018220153 A JP 2018220153A JP 2020086905 A JP2020086905 A JP 2020086905A
Authority
JP
Japan
Prior art keywords
vehicle
automatic driving
route
information
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018220153A
Other languages
English (en)
Other versions
JP7153191B2 (ja
Inventor
玲 飯島
Rei Iijima
玲 飯島
浩伸 杉本
Hironobu Sugimoto
浩伸 杉本
浩晃 榊原
Hiroaki Sakakibara
浩晃 榊原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2018220153A priority Critical patent/JP7153191B2/ja
Priority to US15/929,151 priority patent/US11215472B2/en
Priority to CN201910975740.XA priority patent/CN111308999B/zh
Publication of JP2020086905A publication Critical patent/JP2020086905A/ja
Application granted granted Critical
Publication of JP7153191B2 publication Critical patent/JP7153191B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0251Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications
    • G01C21/3415Dynamic re-routing, e.g. recalculating the route when the user deviates from calculated route or after detecting real-time traffic data or accidents
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0214Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0221Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving a learning process
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0223Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving speed control of the vehicle
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257Control of position or course in two dimensions specially adapted to land vehicles using a radar
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/0278Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using satellite positioning signals, e.g. GPS

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)

Abstract

【課題】自動運転に基づく車両の経路を知らせるための案内情報と、指定された経路を知らせるための案内情報を、聴覚的に区別できるように出力することができる情報提供装置を提供すること【解決手段】車両に搭載される情報提供装置50である。車両が自動運転により制御されている場合には、指定された経路を車両の運転者に知らせるための経路案内情報を機械発話により出力し、自動運転により運転される車両の経路を車両の運転者に知らせるための自動運転案内情報を効果音により出力するための制御信号を送信する制御手段22及び制御手段32を備える。【選択図】図1

Description

本発明は、情報提供装置及び車載装置に関する。
近年、車両が受信又は生成した様々な情報を運転者や同乗者のために提供しなければならない場合がある。
特許文献1には、ETC路側機及びITCスポット路側機からそれぞれETC情報及びVICS(登録商標)情報を取得し、発話情報を生成して運転者に提供する際に、発話タイミングが重なった場合に優先度に基づいて出力タイミングを調停するための発話調停部を備える車載装置が開示されている。
また、特許文献2には、自動運転の分野において、通常のナビゲーション機能に基づく経路案内情報に加え、車両が目的地へ向かっていることを示す現況情報を運転者等に通知する車載装置が開示されている。
特開2017−45377号公報 特開2018−142219号公報
しかしながら、ナビゲーション機能に基づく音声案内と、自動運転機能に基づく音声案内のタイミングが重なった場合に優先度に基づいて出力タイミングを調停すると、類似する内容(例えば、「右折してください」というナビゲーション機能に基づく音声案内と、「右折します」という自動運転機能に基づく音声案内)が連続して出力されるため、運転者等に煩わしさを与えてしまう可能性がある。
また、両者の音声案内の内容は、完全に一致しない場合があるため、運転者等に混乱を与える可能性もある。例えば、分岐の手前において、ほぼ同時にナビゲーション機能に基づいて「この先X方面に進行してください」と音声案内され、自動運転機能に基づいて「この先分岐します」と音声案内される場合、運転者は、分岐方向がX方面であることを確認する必要がある。同様に、車両が一時的に右レーンに車線変更した後に、左側のレーンに車線変更して左方の分岐路に進行するような場合、ナビゲーション機能が左方の分岐路への進行を促す案内をする一方で、自動運転装置が右のレーンに車線変更するような案内を行う場合がある。このような一見矛盾する案内情報の出力も、運転者等に誤解を招く可能性があり好ましくない。
そこで本発明は、自動運転に基づく車両の経路を知らせるための案内情報と、指定された経路を知らせるための案内情報を、出力タイミングを調停することなく、聴覚的に区別できるように提供することができる情報提供装置及び車載装置を提供することを目的とする。
本開示の一側面に係る情報提供装置は、車両に搭載される。また、車両が自動運転により制御されている場合には、指定された経路を車両の運転者に知らせるための経路案内情報を機械発話により出力し、自動運転により運転される車両の経路を車両の運転者に知らせるための自動運転案内情報を効果音により出力するための制御信号を出力する制御手段を備える。
なお、制御手段は、指定された経路と、自動運転により運転される車両の経路とが異なる場合に、効果音を出力するための制御信号を出力するように構成してもよい。また、テキスト等を表示するための制御信号を更に出力するようにしてもよい。
なお、指定された経路と自動運転により運転される車両の経路とが異なる場合とは、レーン変更など、指定された経路に含まれていない経路を、自動運転により車両が走行する場合を含む。
また、車両は、効果音を出力するための第1スピーカ及び第2スピーカを備えてもよい。そして制御手段は、第1スピーカに第1タイミングで第1効果音を出力させ、第2スピーカに第2タイミングで第2効果音を出力させるための制御信号を出力するように構成してもよい。特に、第1スピーカは、車両の進行方向右側に設置され、第2スピーカは、車両の進行方向左側に設置される場合に、制御手段は、自動運転により車両が右方向に移動する場合は、第1スピーカに第1効果音を出力させ、第2スピーカに第1効果音と異なる第2効果音を出力させ、又は、効果音を出力させないように制御信号を出力し、自動運転により車両が左方向に移動する場合は、第2スピーカに第3効果音を出力させ、第1スピーカに第3効果音と異なる第4効果音を出力させ、又は、効果音を出力させないように制御信号を出力するように構成してもよい。
本開示の一側面に係る車載装置は、出発地と目的地を入力するための入力部と、入力された出発地から目的地に至る経路を探索する手段と、経路と現在位置に基づいて車両の運転者に進行すべき経路を知らせるための経路案内情報を出力するための制御信号を生成する第1制御手段とを備えるカーナビゲーション装置を備える。更に、車両を自動運転するための制御信号と、自動運転により車両が走行する経路を車両の運転者に知らせるための自動運転案内情報を出力するための制御信号とを生成する第2制御手段を備える自動運転装置とを備える。そして、車両が自動運転装置により自動運転されている場合は、第1制御手段は、経路案内情報を機械発話により出力するための制御信号を生成し、第2制御手段は、自動運転案内情報を効果音により出力するための制御信号を生成する。
車載システム10のブロック図 情報出力手段40の各出力デバイスを車両に搭載した模式図 本実施形態に係る効果音の出力方法を示すフローチャート HUD44による自動運転案内表示の模式図 変形例に係る効果音の出力方法を示すフローチャート
以下、本発明の実施形態について図面を用いて説明する。以下の実施形態は、本発明を説明するための例示であり、本発明をその実施形態のみに限定する趣旨ではない。
図1は、本実施形態に係る車載システム10のブロック図を示している。車載システム10は、ナビゲーション装置20、自動運転装置30及び情報出力手段40を備える。
ナビゲーション装置20のECU22及び自動運転装置30のECU32(電子制御装置)は、ナビゲーション装置20に基づく経路案内情報を出力するための制御信号並びに自動運転装置30に基づく自動運転案内情報を情報出力手段40に出力させる情報提供装置50として機能する。
ナビゲーション装置20は、記憶装置24、GPS受信部26、入力部28並びにECU22(電子制御装置)を備えている。ナビゲーション装置20は、GPS受信部26から受信した現在位置情報と記憶装置24に記憶された地図データに基づいて入力部28から入力された目的地に到達するための経路を探索し、経路に沿って走行するための経路案内情報を出力させるための制御信号を情報出力手段40に対して送信する。制御信号は、出力設定情報を含む。具体的には、経路案内情報を画像表示させる第1の設定と、テキスト表示させる第2の設定と、音声として出力させる第3の設定と、効果音として出力させる第4の設定を含む。出力設定情報は、これら第1乃至第4の設定の少なくとも1つの設定を指定する情報を含んでいる。
記憶装置24は、地図データを記憶するHDD又はSSD等の情報記憶装置から構成される。地図データは、施設、住所、道路の交差点等のノードと呼ばれる特定地点の位置情報と、リンクと呼ばれるノード間を接続する道路に相当する情報を含んでいる。位置情報は、例えば、緯度、経度、高度によって示される。
GPS受信部26は、GPS衛星からの信号を受信することによって、車両の位置情報を取得する。位置情報は、例えば、緯度、経度、高度によって示される。
入力部28は、車両の運転者等が目的地等を入力するための手段であり、例えば、メインディスプレイ42に搭載されるタッチパネルから構成される。入力部28として、運転者等が発声した目的地等を入力するためのマイクを備えてもよい。
ECU22は、入力部28から入力され、又は、GPS受信部26から受信した位置情報に基づいて指定された出発地及び目的地に至る経路を、記憶装置24に記憶される地図データを参照して探索し、設定された経路情報を不図示のキャッシュメモリ等に記録する。経路情報は、出発地から目的地に至るノードを接続する複数のリンクの情報を含んでいる。
更にECU22は、車両の走行中にGPS受信部26を用いて取得した車両の現在位置情報及び設定された経路情報に基づいて、目的地までの経路を案内するための経路案内情報を出力させるための制御信号を情報出力手段40に送信する。上述したように、制御信号は、出力設定情報を含んでおり、所定の出力手段に所定の種類の経路案内情報を出力させることができる。例えば、メインディスプレイ42に画像情報を表示させ、同時に、スピーカ46から音声を出力させるような出力設定情報を含む制御信号を情報出力手段40に送信することができる。
自動運転装置30は、記憶装置34、GPS受信部36、入力部38並びにECU32を備えている。記憶装置34、GPS受信部36、入力部38及びECU32は、それぞれナビゲーション装置20の記憶装置24、GPS受信部26、入力部28及びECU22と同様の機能を備えることができるように構成されているため、重複する説明は省略する。
ECU32は、LiDAR(Laser Imaging Detection and Ranging)、ミリ波レーダ、カメラ等の画像撮像装置等の車載センサから取得した情報に基づいて動的に変動する周辺環境(周囲の車両、歩行者、道路のレーン等を区分する白線、信号機等)を認識し、ナビゲーション装置20のGPS受信部26により取得される車両の位置情報よりも高精度の車両の位置情報及び車両姿勢を取得する。また、取得される周辺環境と車両の位置情報に基づき、レーンチェンジを含む走行経路計画(レーンプラン)を設定することができる。位置情報には、車両が現在いるリンク、車両が現在いるレーン、車両が現在いるレーン上の相対位置、車両が現在いる三次元位置をそれぞれ特定する情報を含む。
ここで、ナビゲーション装置20により設定される経路情報は、交差点等のノード同士を接続するリンク単位である一方で、自動運転装置30により設定される経路情報は、単一のリンク上に複数存在する可能性があるレーンを特定する情報を含む。更に、リンクよりも短いパスと呼ばれる単位での経路情報を含む。このため、ナビゲーション装置20により設定される経路情報よりも、自動運転装置30により設定される経路情報の方が、分解能が高い。また、ナビゲーション装置20により設定される経路情報が原則として静的である一方で、自動運転装置30により設定される経路情報は、他の車両など周辺環境に応じて動的に変化する場合がある。
ECU32は、レーンプランに基づく経路情報を案内するための自動運転案内情報を出力させるための制御信号を情報出力手段40に送信する。制御信号は、出力設定情報を含んでおり、所定の出力手段に所定の種類の自動運転案内情報を出力させることができる。例えば、メインディスプレイ42に画像情報を表示させ、同時に、スピーカ46から音声を出力させるような出力設定情報を含む制御信号を情報出力手段40に対して送信することができる。
更にECU32は、設定されたレーンプランに基づいてステアリング、アクセル及びブレーキ等を制御するための制御データを生成し、各アクチュエータに出力可能に構成されている。
記憶装置34は、レーンプランの経路計画アルゴリズム及び本開示の各フローチャートに示される演算処理を実行するコンピュータ・プログラムも格納している。これらコンピュータ・プログラムをECU32のプロセッサ等(例えば、Application Specific Integrated Circuit等の半導体集積回路からなる演算処理装置)及びSRAM等のキャッシュメモリのハードウェアを用いて実行することにより、各演算処理を行うことができる。
なお、自動運転装置30とナビゲーション装置20は、一部共有の構成を備えてもよい。例えば、いずれもアクセスすることができる共有の記憶装置に地図データ等を記録させるように構成してもよい。また、ECU32と、ECU22は互いに通信可能に構成されている。
情報出力手段40は、画像及びテキストを表示することができるメインディスプレイ42及びHUD44(Head Up Display)と、効果音又は機械発話による音声を出力することができる2つのスピーカ46及び48を備えている。情報出力手段40は、各出力デバイス(メインディスプレイ42、HUD44、スピーカ46及びスピーカ48)を受信した制御信号に基づいて、所定のタイミングで所定の出力をするように制御するためのプロセッサを更に備えてもよい。また、出力対象となるデータ(画像データ、音声データ及び効果音データ)を記憶する記憶装置、又は、生成する手段を更に備え、ナビゲーション装置20又は自動運転装置30から受信した制御信号に基づいて、指示されたデータを読み出して、又は、生成して出力するように構成してもよいし、これらデータを読み出し、又は、生成したナビゲーション装置20又は自動運転装置30から受信するように構成してもよい。
例えば、音声を機械発話により生成するために、波形接続型、又は、HMM型の音声合成技術を実現するための音声データベース及びコンピュータ・プログラムを情報出力手段40の記憶装置に記憶させ、情報出力手段40のプロセッサによりこのコンピュータ・プログラムを実行するように構成してもよい。
図2は、情報出力手段40を車両内に配置した例を示している。メインディスプレイ42は、ダッシュボードに設置される液晶ディスプレイの表示装置である。運転者及び他の同乗者は、メインディスプレイ42に表示されている画像及びテキストを見ることができる。HUD44は、投射源から投射された映像をフロントガラスに反射させ、その映像を虚像として運転者に視認させる投射型の表示装置である。スピーカ46及び48は、車両の進行方向左側及び進行方向右側にそれぞれ設置されている。
以下では、自動運転装置30を搭載した車両を自動運転レベル2で自動運転する際における、本実施形態に係る経路案内情報の出力方法について図3に示されるフローチャートを用いて説明する。
ここで、NHTSA等によりされる自動運転モードの自動運転レベルの一例について説明する。
[自動運転レベル1(運転支援)]
自動運転レベル1は、ステアリング(操舵)、アクセル(加速)及びブレーキ(制動)のいずれか一つを自動運転装置が実行することができる運転モードをいう。運転者は、車両を操作する必要がある。
[自動運転レベル2(部分運転自動化)]
自動運転レベル2は、ステアリング、アクセル及びブレーキのうち複数の操作を自動運転装置が同時に実行することができる運転モードをいう。自動運転レベル2では、車両に搭載された各種センサを用いて車両の周囲(路面、他の車両を含む。)から取得された情報に基づいて、自動運転装置がステアリングや車両速度を制御する。運転者は、緊急時等に車両を操作する必要がある。
[自動運転レベル3(条件付き運転自動化)]
自動運転レベル3は、ステアリング、アクセル及びブレーキの全ての操作を自動運転装置が同時に実行することができる運転モードをいう。センサ及び通信手段等から取得可能な様々な情報に基づいて、自動運転装置が車両の運転を全自動で行う。運転者は、緊急時等に車両を操作する必要がある。
従って自動運転レベル2において、運転者は、自動運転装置30により自動運転を実行させながら、ナビゲーション装置20による経路案内を受けて、必要に応じて車両を操作できるようにすることが好ましい。
図3のステップS31において、運転者等がナビゲーション装置20の入力部28を用いて、又は、GPS受信部26から受信した位置情報に基づいて出発地と目的地を入力すると、ナビゲーション装置20のECU22は、出発地から目的地に至るノードを接続する複数のリンクから構成される経路を探索し、メインディスプレイ42等に経路の候補を表示させる。運転者等が入力部28を用いて所定の経路を指定すると、出発地から目的地に至るノードを接続する複数のリンクの情報を含む経路情報は、記憶装置24に記憶される。また、ECU22は、指定された経路情報に基づいた経路案内情報を情報出力手段40に出力させるための制御信号の出力を開始する。
例えば、左方への分岐路に進行する場合など、経路案内を必要とする地点に車両が近づくと、ECU22は「左側の分岐路へ進行してください」といった経路案内情報を機械発話によってスピーカ46及びスピーカ48から出力させるための出力設定情報を含む制御信号を情報出力手段40に対して送信する。なお、制御信号は、経路案内情報として左方への分岐を誘導するための画像をメインディスプレイ42及びHUD44に表示させるための出力設定情報を含んでもよい。
図3のステップS32において、スピーカ46及びスピーカ48は、受信した制御信号に基づいて経路を案内する音声を機械発話によって出力する。また、メインディスプレイ42及びHUD44は、受信した制御信号に基づいた経路案内情報に相当する画像を表示する。
一方で、ステップS33において、運転者等が自動運転を開始させると、自動運転装置30のECU32は、レーンプランに基づいた自動運転案内を開始する。例えば、図2に示されるように、複数の車線を有する道路において、進行中のレーンで道路工事等がなされているため右側のレーンに車線変更しなければならない場合や、進行中のレーンがなくなるため右側のレーンに合流しなければならない場合等、自動運転の案内をすることが好ましい地点に車両が近づくと、ECU32は、情報出力手段40に対して自動運転案内情報を出力させるための制御信号を送信する。
本実施形態に係る情報提供装置50は、自動運転装置30に基づく走行経路の変更などを運転者等に通知するための自動運転案内情報を効果音により出力させるように構成されている。効果音を出力する方法には、幾つかのバリエーションが存在するため、以下各バリエーションについて説明する。
[第1の効果音の出力方法]
この方法においては、左右のスピーカ46及びスピーカ48のうち、自動運転によって車両が移動する方向のスピーカのみが効果音を出力し、他方のスピーカは効果音を出力しないように制御される。
ステップS33において、情報提供装置50のECU32は、移動方向のスピーカのみが効果音を出力するように、制御信号を送信する。例えば、車両を右側のレーンに移動させる際には、ECU32は、車両の進行方向右側に設置されているスピーカ48のみから効果音を出力し、スピーカ46からは効果音が出力されないような出力設定情報を含む制御信号を情報出力手段40に送信する。
ステップS34において、スピーカ48は、受信した制御信号に基づいた効果音を出力する。効果音は、所定の電子音が、レーン変更が完了するまでの時間(例えば、数秒間)にわたり繰り返し出力されるように構成することができる。
なお、自動運転により車両を左側のレーンに移動させる際には、ECU32は、スピーカ46のみから交換を出力するような出力設定情報を含む制御信号を情報出力手段40に送信する。
このような形態によれば、運転者等は、ナビゲーション装置20に基づく案内が機械発話により行われる一方で、自動運転装置30による案内が効果音により行われるため、両者の出力タイミングを調停する必要がなくなる。また、たとえ両者がほぼ同時、又は、連続して出力されても、聴覚のみに基づいて両者を明確にかつ瞬時に区別することができる。また、右側に移動するときに右側のスピーカ48のみから効果音が出力され、左側に移動するときに左側のスピーカ46のみから効果音が出力されるようにしたので、運転者等は、体感的に移動方向を把握することが可能になる。また、移動方向に応じて2つのスピーカ46及びスピーカ48からの効果音の出力態様を異ならせたので、運転者等は、効果音のみによって移動方向を把握することができる。
なお、ステップS34に付加的にステップS35を追加して、レーン変更が完了したことを示す異なる効果音を、スピーカ46及びスピーカ48の少なくとも何れか一方から出力させるように構成してもよい。例えば、レーン変更が完了した際に、ステップS35において、ECU32が制御信号を送信し、スピーカ46及びスピーカ48から同時に所定の効果音が出力されるように構成してもよい。
また、駐車時のように、車両が自動運転によって後方に移動する場合は、後部座席側に搭載されるスピーカのみから効果音が出力されるようにしてもよい。更に、一方のスピーカから効果音を出力しているときに、他方のスピーカからナビゲーション装置20に基づく音声案内を同時に出力するようにしてもよい。
[第2の効果音の出力方法]
この方法においては、左右のスピーカ46及びスピーカ48の双方が異なるタイミングで効果音を出力する。
ステップS33において、情報提供装置50のECU32は、車両の移動方向と反対方向のスピーカが効果音を出力した直後に車両の移動方向のスピーカが効果音を出力するように、制御信号を送信する。例えば、車両を右側のレーンに移動させる際には、ECU32は、まず第1のタイミングで左側のスピーカ46から効果音を出力させ、その直後(例えば、500ミリ秒以下)の第2のタイミングで右側のスピーカ48から効果音を出力させるように設定された出力設定情報を含む制御信号を情報出力手段40に送信する。
その場合、ステップS34において、スピーカ46は、受信した制御信号に基づいた効果音を出力し、ステップS35において、スピーカ48は、受信した制御信号に基づいた効果音を出力する。
このような方法によっても、運転者等は、ナビゲーション装置20に基づく案内が機械発話により行われる一方で、自動運転装置30による案内が効果音により行われるため、出力タイミングを調停する必要がなくなる。また、運転者等は、聴覚のみに基づいて両者を明確にかつ瞬時に区別することができる。また、車両の移動方向と効果音の音源の移動方向が一致するから、体感的に移動方向を把握することが可能になる。
なお、ステップS34とステップS35をレーン変更が完了するまで繰り返し実行するようにしてもよい。その場合、ステップS34とステップS35の時間間隔を、ステップS35から再度ステップS34を実行するまでの時間間隔より短くすることで、移動方向の把握が容易になる。
なお、移動方向に配置されるスピーカの音量が、反対方向に配置されるスピーカの音量より大きくなるようにしてもよい。また、後部座席側に搭載されるスピーカからも効果音が出力されるようにしてもよい。また、移動方向のスピーカが出力する効果音と、反対方向のスピーカが出力する効果音が異なるようにしてもよい。
上述した二つの方法において、付加的に、ステップS33において、ECU32は、自動運転案内情報として車両の移動を示す画像をHUD44を用いて、メータ等とともに表示させるための制御信号を情報出力手段40に対して送信してもよい。その場合、ステップS36において、HUD44は、受信した制御信号に基づいて、自動運転による走行経路を示す画像を表示する。
図4は、HUD44により、右側のレーンへの移動を示す画像を表示させる様子を示す模式図である。運転者等は、ナビゲーション装置20に基づく案内が機械発話により行われる一方で、自動運転装置30による案内がHUD44への画像表示により行われるため、両者を区別して把握することができる。また、同時にスピーカ46又はスピーカ48からも自動運転に基づく走行経路を示唆する効果音が出力されているから、自動運転による走行経路を容易に把握することができる。
なお、付加的に、自動運転装置30に基づく案内であることを示すテキスト等を同時に表示するようにしてもよい。また、メインディスプレイ42には、ナビゲーション装置20に基づく画像による経路案内情報を表示させるようにしてもよい。
以上のような情報提供装置50によれば、運転者等は、ナビゲーション装置20に基づく車両の走行経路の案内と、自動運転装置30に基づく走行経路の案内等を出力タイミングを調停することなく、聴覚的に区別することが可能になる。従って、両者を共に音声により出力する場合の聞き取りにくさや、運転者等に与え得る誤解を抑制することができる。
更に、上述したように、単なる効果音の出力のほか、効果音を出力する場所、タイミング、及び効果音の音色を変更することによって、効果音に複数の意味合いを持たせることができる。
なお、運転者等がナビゲーション装置20を利用しないときは、自動運転装置30は、音声による自動運転案内を行うようにしてもよい。この場合、ナビゲーション装置20による音声案内を男性の音色とし、自動運転装置30による音声案内を女性の音声にしてもよい。更に、自動運転装置30による音声案内の発話を車両の天井に設置されるスピーカとするように発話場所を変更してもよい。また、自動運転装置30による音声案内の発話中に所定のインジケータをHUD44で表示するようにしてもよい。また、自動運転装置30による音声案内の発話は、主語が自動運転システムであることを明示することによって、より区別できるようにしてもよい。
また、効果音による自動運転案内は、特定の場面のみ行うようにしてもよい。例えば、レーン変更や、左折及び右折など、ステアリングにより車両の進行方向を変更する場合に効果音による自動運転案内を行うようにしてもよい。一方で、ナビゲーション装置20による経路案内と競合する可能性が低い自動運転案内は、音声により行うようにしてもよい。例えば、自動運転を開始する旨の情報は、ナビゲーション装置20による経路案内と競合する可能性がないため、音声により出力するようにしてもよいし、音色が異なる効果音により出力してもよいし、これらを運転者等が選択できるように構成してもよい。
更に、ナビゲーション装置20による経路案内と、自動運転装置30による自動運転案内が同時(又は所定時間内)に出力される場合のみ、効果音による自動運転案内を行うようにし、同時に出力されない場合は、音声による自動運転内を行うようにしてもよい。ECU22とECU32は、互いに通信可能に構成されているので、ECU32は、ECU22から出力される制御信号を受信しこの制御信号に基づく情報出力手段40による出力のタイミングと、自らが送信する出力信号に基づく情報出力手段40による出力のタイミングが一致するか判断することができる。判断する手段は、様々なものを採用することができる。例えば、制御信号中に情報出力手段40による出力のタイミングを示す時間情報を含ませ、両者の時間差が所定時間内の場合は、出力のタイミングが一致すると判断するように構成することができる。あるいは、ECU22から制御信号を受信した時点でカウントを開始するカウンタを用いて、ECU32による経路案内を必要とする時点でのカウント値を所定の閾値と比較して判断するように構成してもよい。また、本発明は、他の自動運転レベルの場合であっても、適用することができる。
[変形例]
以上の実施形態は、自動運転装置30によってレーン変更等を実行する際の効果音の出力方法に係るものであった。以下では、その他の場面において効果音を出力する態様について説明する。なお、同様のハードウェア及びソフトウェア構成を用いて実現できる部分については同様の符号を用いて説明し、重複する説明を省略する。
図5は、変形例に係る効果音の出力方法を示すフローチャートである。
ステップS51において、ECU32は、自動運転中に出力する効果音を決定するためのシーンを選択する。
例えば、ステップS51において、ECU32が運転者の手動による操動を要求するシーンと判断した場合、ステップS52において、ECU32は、効果音Aを出力させるための制御信号を情報出力手段40に対して送信し、効果音をスピーカ46又はスピーカ48から出力させる。手動による操動を要求する場面は、相対的に緊急性が高い場合が多いため、そのような目的に従った効果音を出力することが好ましい。例えば、相対的に周波数が高い高音の効果音を短い周期で繰り返し出力するような制御信号を情報出力手段40に対して送信することができる。
また、ステップS51において、ECU32が運転者に自動運転状態であることを通知するシーンと判断した場合、ステップS53において、ECU32は、効果音Bを出力させるための制御信号を情報出力手段40に対して送信し、効果音Bをスピーカ46又はスピーカ48から出力させる。自動運転状態であることを通知する場面は、運転者に操動を要求することはなく緊急性が低いため、そのような目的に従った効果音を出力することが好ましい。例えば、相対的に音量が小さく、周波数が低い低音の効果音を長い周期で繰り返し出力するような制御信号を情報出力手段40に対して送信することができる。運転者に操動を要求しない自動運転中に常時このような効果音を出力させてもよい。また、自動運転レベルに応じて、効果音の種類を異ならせてもよい。
また、ステップS51において、ECU32が自動運転から手動運転に切り替えるシーンと判断した場合、ステップS54において、ECU32は、効果音Cを出力させるための制御信号を情報出力手段40に対して送信し、効果音Cをスピーカ46又はスピーカ48から出力させる。例えば、運転者がハンドルを強く握ると、ECU32は、自動運転から手動運転に切り替えるシーンと判断するように構成してもよい。このようなシーンは、緊急性が相対的に高くないものの、それまで自動運転に運転を委ねていた運転者を覚醒させる十分な音量を有する効果音であることが好ましい。例えば、効果音Bより音量が大きい効果音を運転者が運転できる状態に至るまで出力するような制御信号を情報出力手段40に対して送信することができる。ECU32は、運転者がハンドルを握る力や、運転者の表情を撮像する画像センサから受信した情報等に基づいて、運転者が運転できる状態になっているか否か判断することができる。
以上のような情報提供装置50によれば、上記した実施形態に係る効果に加え、効果音の音色(聴覚に関する音の属性の一つで,物理的に異なる二つの音が,たとえ同じ音の大きさ及び高さであっても異なった感じに聞こえるとき,その相違に対応する属性)を異ならせることによって、効果音に複数の意味合いを持たせることができる。運転者等は、音声を理解するわずらわしさを感じることがない。
なお、本発明は、その要旨を逸脱しない限り、さまざまな変形が可能である。例えば、当業者の通常の創作能力の範囲内で、ある実施形態における一部の構成要素を、削除し、又は、他の構成要素と置換することができる。
10…車載システム、20…ナビゲーション装置、22…電子制御装置、24…記憶装置、26…受信部、28…入力部、30…自動運転装置、32…電子制御装置、34…記憶装置、36…受信部、38…入力部、40…情報出力手段、42…メインディスプレイ、44…HUD、46…スピーカ、48…スピーカ、50…情報提供装置

Claims (4)

  1. 車両に搭載される情報提供装置であって、
    前記車両が自動運転により制御されている場合に、指定された経路を前記車両の運転者に知らせるための経路案内情報を機械発話により出力し、前記自動運転により運転される前記車両の経路を前記車両の運転者に知らせるための自動運転案内情報を効果音により出力するための制御信号を送信する、制御手段を備える
    情報提供装置。
  2. 前記制御手段は、前記指定された経路と、前記自動運転により運転される前記車両の経路とが異なる場合に、前記効果音を出力するための制御信号を送信するように構成される請求項1に記載の情報提供装置。
  3. 進行方向右側に設置される第1スピーカと、前記進行方向左側に設置される第2スピーカを備える前記車両に搭載され、
    前記制御手段は、
    前記自動運転により前記車両が右方向に移動する場合は、第1の態様で、前記第1スピーカ及び前記第2スピーカの少なくともいずれかから効果音を出力させ、
    前記自動運転により前記車両が左方向に移動する場合は、前記第1の態様とは異なる第2の態様で、前記第1スピーカ及び前記第2スピーカの少なくともいずれかから効果音を出力させるように前記制御信号を送信するように構成される請求項1に記載の情報提供装置。
  4. 出発地と目的地を入力するための入力部と、入力された前記出発地から前記目的地に至る経路を探索する手段と、前記経路と現在位置に基づいて車両の運転者に進行すべき経路を知らせるための経路案内情報を出力するための制御信号を生成する第1制御手段とを備えるカーナビゲーション装置と、
    前記車両を自動運転するための制御信号と、前記自動運転により前記車両が走行する経路を前記車両の運転者に知らせるための自動運転案内情報を出力するための制御信号とを生成する第2制御手段を備える自動運転装置とを備え、
    前記車両が前記自動運転装置により自動運転されている場合は、前記第1制御手段は、前記経路案内情報を機械発話により出力するための制御信号を生成し、前記第2制御手段は、前記自動運転案内情報を効果音により出力するための制御信号を生成する、
    車載装置。
JP2018220153A 2018-11-26 2018-11-26 情報提供装置及び車載装置 Active JP7153191B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018220153A JP7153191B2 (ja) 2018-11-26 2018-11-26 情報提供装置及び車載装置
US15/929,151 US11215472B2 (en) 2018-11-26 2019-10-03 Information providing device and in-vehicle device
CN201910975740.XA CN111308999B (zh) 2018-11-26 2019-10-15 信息提供装置以及车载装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018220153A JP7153191B2 (ja) 2018-11-26 2018-11-26 情報提供装置及び車載装置

Publications (2)

Publication Number Publication Date
JP2020086905A true JP2020086905A (ja) 2020-06-04
JP7153191B2 JP7153191B2 (ja) 2022-10-14

Family

ID=70770624

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018220153A Active JP7153191B2 (ja) 2018-11-26 2018-11-26 情報提供装置及び車載装置

Country Status (3)

Country Link
US (1) US11215472B2 (ja)
JP (1) JP7153191B2 (ja)
CN (1) CN111308999B (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05312583A (ja) * 1991-04-10 1993-11-22 Alpine Electron Inc 車載ナビゲ−タの経路案内方法
JP2010000948A (ja) * 2008-06-20 2010-01-07 Toyota Motor Corp 運転支援装置
JP2016015142A (ja) * 2014-07-03 2016-01-28 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツングRobert Bosch Gmbh 緊急時軌道を算出する方法及び自車両を半自動若しくは自動で誘導する方法
WO2017154152A1 (ja) * 2016-03-09 2017-09-14 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
WO2018016048A1 (ja) * 2016-07-21 2018-01-25 三菱電機株式会社 報知音出力制御装置、報知音出力制御方法
WO2018211583A1 (ja) * 2017-05-16 2018-11-22 みこらった株式会社 自動車及び自動車用プログラム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0820265B2 (ja) * 1987-07-10 1996-03-04 アイシン・エィ・ダブリュ株式会社 車両用ナビゲーション装置
JP4333369B2 (ja) * 2004-01-07 2009-09-16 株式会社デンソー 雑音除去装置、及び音声認識装置、並びにカーナビゲーション装置
JP2005199875A (ja) * 2004-01-16 2005-07-28 Nippon Seiki Co Ltd 車両用情報提供装置
DE102008040463A1 (de) 2008-07-16 2010-01-21 Robert Bosch Gmbh Vorrichtung zur Eindosierung von Kraftstoff
US9576574B2 (en) * 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
JP6332170B2 (ja) * 2015-07-01 2018-05-30 トヨタ自動車株式会社 自動運転制御装置
JP6428533B2 (ja) 2015-08-28 2018-11-28 株式会社デンソー 車載器
US9813813B2 (en) * 2015-08-31 2017-11-07 Harman International Industries, Incorporated Customization of a vehicle audio system
US10724874B2 (en) * 2015-10-13 2020-07-28 Here Global B.V. Virtual reality environment responsive to predictive route navigation
CN107298021B (zh) * 2016-04-15 2022-03-08 松下电器(美国)知识产权公司 信息提示控制装置、自动驾驶车及其驾驶辅助系统
JP2017200786A (ja) * 2016-05-02 2017-11-09 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
JP2018072207A (ja) 2016-10-31 2018-05-10 アルパイン株式会社 経路案内装置および経路案内制御方法
US10324683B2 (en) * 2016-12-27 2019-06-18 Harman International Industries, Incorporated Control for vehicle sound output
US10180682B2 (en) * 2017-02-23 2019-01-15 The Directv Group, Inc. Shared control of vehicle functions
JP2018142219A (ja) 2017-02-28 2018-09-13 株式会社デンソーテン 車載装置、現況情報通知方法、および現況情報通知プログラム
US11193783B2 (en) * 2017-04-04 2021-12-07 Microsoft Technology Licensing, Llc Guidance audio cues for navigation assistance
US20190072398A1 (en) * 2017-09-05 2019-03-07 Here Global B.V. Navigation using multiple user trip plan integration
CN108181899A (zh) * 2017-12-14 2018-06-19 北京汽车集团有限公司 控制车辆行驶的方法、装置及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05312583A (ja) * 1991-04-10 1993-11-22 Alpine Electron Inc 車載ナビゲ−タの経路案内方法
JP2010000948A (ja) * 2008-06-20 2010-01-07 Toyota Motor Corp 運転支援装置
JP2016015142A (ja) * 2014-07-03 2016-01-28 ローベルト ボツシユ ゲゼルシヤフト ミツト ベシユレンクテル ハフツングRobert Bosch Gmbh 緊急時軌道を算出する方法及び自車両を半自動若しくは自動で誘導する方法
WO2017154152A1 (ja) * 2016-03-09 2017-09-14 本田技研工業株式会社 車両制御システム、車両制御方法、および車両制御プログラム
US20190071098A1 (en) * 2016-03-09 2019-03-07 Honda Motor Co., Ltd. Vehicle control system, vehicle control method, and vehicle control program
WO2018016048A1 (ja) * 2016-07-21 2018-01-25 三菱電機株式会社 報知音出力制御装置、報知音出力制御方法
WO2018211583A1 (ja) * 2017-05-16 2018-11-22 みこらった株式会社 自動車及び自動車用プログラム

Also Published As

Publication number Publication date
JP7153191B2 (ja) 2022-10-14
CN111308999B (zh) 2023-10-03
CN111308999A (zh) 2020-06-19
US20200166368A1 (en) 2020-05-28
US11215472B2 (en) 2022-01-04

Similar Documents

Publication Publication Date Title
US20200377126A1 (en) Information output control device and information output control method
JP6591087B2 (ja) 表示制御装置、表示装置および表示制御方法
WO2020261781A1 (ja) 表示制御装置、表示制御プログラム、および持続的有形コンピュータ読み取り媒体
JP2018032321A (ja) 自動運転車両の制御システム及び制御方法
JP6722132B2 (ja) 推奨運転出力装置、推奨運転出力方法、及び推奨運転出力システム
JP6604577B2 (ja) 運転支援方法およびそれを利用した運転支援装置、運転支援システム、自動運転制御装置、車両、プログラム
JP2018041328A (ja) 車両用情報提示装置
JP2018030531A (ja) 自動運転車両の制御システム及び制御方法
US10800431B2 (en) Vehicle
US11220180B2 (en) Autonomous driving apparatus and navigation apparatus
JP2018128466A (ja) ナビゲーション装置、ヘッドアップディスプレイ、制御方法、プログラム、及び記憶媒体
JP2015161565A (ja) ナビゲーション装置、ナビゲーション方法およびプログラム
JP6949288B2 (ja) 運転支援装置、運転支援システムおよび運転支援方法
JP2023138849A (ja) 提示制御装置及び提示制御プログラム
JP7153191B2 (ja) 情報提供装置及び車載装置
JP6855759B2 (ja) 自動運転車両の制御システム
JP7302311B2 (ja) 車両用表示制御装置、車両用表示制御方法、車両用表示制御プログラム
US20200158521A1 (en) Automatic driving device
JP2021006805A (ja) 表示制御装置及び表示制御プログラム
JP2009140439A (ja) 運転能力を判定する装置、及び、運転能力に応じて支援内容を調整する運転支援装置
JPWO2020065892A1 (ja) 車両の走行制御方法及び走行制御装置
WO2023163047A1 (ja) 端末装置、情報提供システム、情報処理方法、プログラム及び記憶媒体
US10812924B2 (en) Control apparatus configured to control sound output apparatus, method for controlling sound output apparatus, and vehicle
US20240083459A1 (en) Vehicle control device and vehicle control method
US20210293569A1 (en) System for navigation route guidance

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210325

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220302

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220428

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220901

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220914

R151 Written notification of patent or utility model registration

Ref document number: 7153191

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151