JP7843878B2 - 運転支援装置、運転支援方法、およびプログラム - Google Patents

運転支援装置、運転支援方法、およびプログラム

Info

Publication number
JP7843878B2
JP7843878B2 JP2025009491A JP2025009491A JP7843878B2 JP 7843878 B2 JP7843878 B2 JP 7843878B2 JP 2025009491 A JP2025009491 A JP 2025009491A JP 2025009491 A JP2025009491 A JP 2025009491A JP 7843878 B2 JP7843878 B2 JP 7843878B2
Authority
JP
Japan
Prior art keywords
sound
notification sound
notification
risk object
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2025009491A
Other languages
English (en)
Other versions
JP2025069222A (ja
Inventor
裕司 安井
彩 美浦
健次郎 鳥居
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2025009491A priority Critical patent/JP7843878B2/ja
Publication of JP2025069222A publication Critical patent/JP2025069222A/ja
Application granted granted Critical
Publication of JP7843878B2 publication Critical patent/JP7843878B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00Arrangement or adaptation of acoustic signal devices
    • B60Q5/005Arrangement or adaptation of acoustic signal devices automatically actuated
    • B60Q5/006Arrangement or adaptation of acoustic signal devices automatically actuated indicating risk of collision between vehicles or with pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/178Warnings
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy
    • B60K2360/1868Displaying information according to relevancy according to driving situations
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/402Type
    • B60W2554/4029Pedestrians
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4041Position

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Acoustics & Sound (AREA)
  • Traffic Control Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Description

本発明は、運転支援装置、運転支援方法、およびプログラムに関する。
従来、移動体の周囲に存在する注意対象について音で運転者(乗員)に注意喚起する技術が知られている。その中には、音像定位によって注意喚起しようとする位置、方向に音を発生させるようにしたものがある(特許文献1)。
特許第6587776号公報
しかしながら、移動体の室内における音像定位は、理想通りに効果が発揮されない場合があり、例えば車両の場合であれば、後部座席付近で発生させられた音がフロントガラスによって反射され、運転者にとって前方から聞こえるように感じられる場合がある。このように、従来の技術では、移動体の周辺に存在するリスク物体の位置または方向を、乗員に直感的に認識させることができない場合があった。
本発明は、このような事情を考慮してなされたものであり、移動体の周辺に存在するリスク物体の位置または方向を、乗員に直感的に認識させることができる運転支援装置、運転支援方法、およびプログラムを提供することを目的の一つとする。
この発明に係る運転支援装置、運転支援方法、およびプログラムは、以下の構成を採用した。
(1):本発明の一態様に係る運転支援装置は、物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識する認識部と、前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させる通知制御部と、を備え、前記通知制御部は、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、前記第1通知音は、前記第2通知音とは高さが異なる音であるものである。
(2):上記(1)の態様において、前記第1通知音は、前記第2通知音よりも高い音であるものである。
(3):上記(1)または(2)の態様において、前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含むものである。
(4):上記(1)から(3)のうちいずれかの態様において、前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の前記第2追加音とを含むものである(nは自然数)。
(5):本発明の他の態様に係る運転支援装置は、物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識する認識部と、前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させる通知制御部と、を備え、前記通知制御部は、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、前記第1通知音と前記第2通知音とのうちいずれか一方は、基準音Aと前記基準音Aの整数次倍音とを含む音であり、前記第1通知音と前記第2通知音とのうち他方は、基準音Bと前記基準音Bの周波数の1/n倍の周波数とは異なる周波数の追加音とを含む音であるものである(nは自然数)。
(6):上記(5)の態様において、前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含むものである。
(7):上記(3)または(6)の態様において、前記通知制御部は、前記リスク物体が前記第1領域に存在する場合、前記第1領域内における前記リスク物体の位置に基づいて、前記第1追加音の態様を異ならせるものである。
(8):上記(7)の態様において、前記通知制御部は、前記リスク物体が前記第1領域に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向に近い程、前記第1追加音の周波数の種類を増やすものである。
(9):上記(7)または(8)の態様において、前記通知制御部は、前記リスク物体が前記第1領域のうち前記移動体の幅方向に関する中央部にある第1中央領域に存在する場合、前記リスク物体が前記第1領域のうち前記第1中央領域の左右両側にある第1左側領域または第1右側領域に存在する場合に比して、前記第1追加音の周波数の種類を増やすものである。
(10):上記(5)から(9)のうちいずれかの態様において、前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含むものである。
(11):上記(4)または(10)の態様において、前記通知制御部は、前記リスク物体が前記第2領域に存在する場合、前記第2領域内における前記リスク物体の位置に基づいて、前記第2追加音の態様を異ならせるものである。
(12):上記(11)の態様において、前記通知制御部は、前記リスク物体が前記第2領域に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向の反対方向に近い程、前記第2追加音の音量を上げるものである。
(13):上記(11)または(12)の態様において、前記通知制御部は、前記リスク物体が前記第2領域のうち前記移動体の幅方向に関する中央部にある第2中央領域に存在する場合、前記リスク物体が前記第2領域のうち前記第2中央領域の左右両側にある第2左側領域または第2右側領域に存在する場合に比して、前記第2通知音の音量を上げるものである。
(14):上記(1)から(13)のいずれかの態様において、前記通知制御部は、前記リスク物体が前記第1領域に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向に近い程、前記第1通知音のテンポを遅くするものである。
(15):上記(1)から(14)のいずれかの態様において、前記通知制御部は、前記リスク物体が前記第2領域に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向の反対方向に近い程、前記第2通知音のテンポを速くするものである。
(16):上記(1)から(15)のいずれかの態様において、前記通知制御部は、前記移動体と前記リスク物体との距離が小さくなる程、前記第1通知音または前記第2通知音のテンポを速くするものである。
(17):上記(1)から(16)のいずれかの態様において、前記少なくとも一つのスピーカは、複数のスピーカを含み、前記通知制御部は、前記リスク物体が前記第1領域に存在する場合、前記第1領域内における前記リスク物体の位置に基づいて、前記第1通知音の音像を定位させる位置を決定し、前記リスク物体が前記第2領域に存在する場合、前記第2領域内における前記リスク物体の位置に基づいて、前記第2通知音の音像を定位させる位置を決定するものである。
(18):上記(1)から(17)のいずれかの態様において、前記リスク物体は、交通参加者であるものである。
(19):本発明の他の態様に係る運転支援方法は、移動体に搭載されたコンピュータが、物体検知装置の出力に基づいて、前記移動体の周辺に存在するリスク物体を認識し、前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、前記通知音を出力させる際に前記コンピュータが、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、前記第1通知音は、前記第2通知音とは高さが異なる音であるものである。
(20):本発明の他の態様に係る運転支援方法は、移動体に搭載されたコンピュータが、物体検知装置の出力に基づいて、前記移動体の周辺に存在するリスク物体を認識し、前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、前記通知音を出力させる際に前記コンピュータが、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、前記第1通知音と前記第2通知音とのうちいずれか一方は、基準音Aと前記基準音Aの整数次倍音とを含む音であり、前記第1通知音と前記第2通知音とのうち他方は、基準音Bと前記基準音Bの周波数の1/n倍の周波数とは異なる周波数の追加音とを含む音であるものである(nは自然数)。
(21):本発明の他の態様に係るプログラムは、移動体に搭載されたコンピュータに、物体検知装置の出力に基づいて、前記移動体の周辺に存在するリスク物体を認識させ、前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させることを行わせ、前記通知音を出力させる際に前記コンピュータに、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させることを行わせ、前記第1通知音は、前記第2通知音とは高さが異なる音であるものである。
(22):本発明の他の態様に係るプログラムは、移動体に搭載されたコンピュータに、物体検知装置の出力に基づいて、前記移動体の周辺に存在するリスク物体を認識させ、前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させることを行わせ、前記通知音を出力させる際に前記コンピュータに、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させることを行わせ、前記第1通知音と前記第2通知音とのうちいずれか一方は、基準音Aと前記基準音Aの整数次倍音とを含む音であり、前記第1通知音と前記第2通知音とのうち他方は、基準音Bと前記基準音Bの周波数の1/n倍の周波数とは異なる周波数の追加音とを含む音であるものである(nは自然数)。
上記(1)~(22)の態様によれば、移動体の周辺に存在するリスク物体の位置または方向を、乗員に直感的に認識させることができる。
第1実施形態に係る運転支援装置100を中心とした車両Mに搭載される機器を示す図である。 スピーカユニット60の構成図である。 スピーカユニット60のハードウェア構成の一例を示す図である。 スピーカユニット60のハードウェア構成の他の一例を示す図である。 第1領域A1と第2領域A2について説明するための図である。 第1通知音NS1が第2通知音NS2よりも高いことの意味を例示した図である。 第1通知音NS1と第2通知音NS2の構成について説明するための図である。 第1追加音NS1-pの周波数の種類を増やすことの一例について説明するための図である。 第2追加音NS2-qの音量を上げることの一例について説明するための図である。 実施形態におけるパラメータの定義を示す図である。 通知音のテンポを異ならせることの一例について説明するための図である。 距離Driskに応じた音量制御の一例を示す図である。 運転支援装置100により実行される処理の流れの一例を示すフローチャートである。 第3実施形態に係る運転支援装置100Aを中心とした車両Mに搭載される機器を示す図である。 第4実施形態に係る運転支援装置100Bを中心とした二輪車MBに搭載される機器を示す図である。
以下、図面を参照し、本発明の運転支援装置、運転支援方法、およびプログラムの実施形態について説明する。運転支援装置は、移動体の運転を支援する装置である。移動体とは、三輪または四輪等の車両、二輪車、マイクロモビ等を含み、人(運転者)が搭乗するあらゆる移動体を含んでよい。以下に説明する第1実施形態および~第3実施形態では、移動体は四輪車両であるものとし、運転支援装置が搭載された車両を車両Mと称する。また、第4実施形態では移動体は二輪車であるものとする。
[構成]
図1は、第1実施形態に係る運転支援装置100を中心とした車両Mに搭載される機器を示す図である。車両Mは、ディーゼルエンジンやガソリンエンジンなどの内燃機関を動力源とした自動車、電動機を動力源とした電気自動車、または内燃機関および電動機を兼ね備えたハイブリッド自動車のいずれでもよい。
車両Mには、例えば、カメラ10、レーダ装置12、LIDAR(Light Detection and Ranging)14、物体認識装置16、車両センサ40、スピーカユニット60、表示装置70、および運転支援装置100などが搭載される。本実施形態において、車両Mを走行させるための構成、例えば、運転操作子、エンジンやモータなどの駆動装置、操舵装置、ブレーキ装置等については図示および説明を省略するが、これらの構成は車両Mに搭載されてよいものである。
カメラ10は、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等の固体撮像素子を利用したデジタルカメラである。カメラ10は、車両システム1が搭載される車両Mの任意の箇所に取り付けられる。前方を撮像する場合、カメラ10は、フロントウインドシールド上部やルームミラー裏面等に取り付けられる。カメラ10は、例えば、周期的に繰り返し車両Mの周辺を撮像する。カメラ10は、ステレオカメラであってもよい。検知方向が互いに異なる複数のカメラ10が車両Mに搭載されてもよい。
レーダ装置12は、車両Mの周辺にミリ波などの電波を放射すると共に、物体によって反射された電波(反射波)を検出して少なくとも物体の位置(距離および方位)を検出する。レーダ装置12は、車両Mの任意の箇所に取り付けられる。レーダ装置12は、FM-CW(Frequency Modulated Continuous Wave)方式によって物体の位置および速度を検出してもよい。検知方向が互いに異なる複数のレーダ装置12が車両Mに搭載されてもよい。
LIDAR14は、車両Mの周辺に光(或いは光に近い波長の電磁波)を照射し、散乱光を測定する。LIDAR14は、発光から受光までの時間に基づいて、対象までの距離を検出する。照射される光は、例えば、パルス状のレーザー光である。LIDAR14は、車両Mの任意の箇所に取り付けられる。
物体認識装置16は、カメラ10の撮像した画像を解析して物体を認識する。そして、物体認識装置16は、カメラ10、レーダ装置12、およびLIDAR14のうち一部または全部による検出結果に対してセンサフュージョン処理を行って、物体の位置(距離および角度)、種類、速度などを認識する。物体認識装置16は、認識結果を運転支援装置100に出力する。物体認識装置16は、カメラ10、レーダ装置12、およびLIDAR14の検出結果をそのまま運転支援装置100に出力してもよい。
カメラ10、レーダ装置12、LIDAR14、および物体認識装置16を含む機器群は、「物体検知装置」の一例である。「物体検知装置」として、より簡素な構成、例えばカメラ10および物体認識装置16、或いはカメラ10およびレーダ装置12といった構成が車両Mに搭載されてもよい。物体認識装置16が省略される場合、カメラ10の撮像した画像を解析する機能は運転支援装置100に搭載されてもよい。また、「物体検知装置」は超音波センサを含んでもよい。
車両センサ40は、自車両Mの速度を検出する車速センサ、加速度を検出する加速度センサ、鉛直軸回りの角速度を検出するヨーレートセンサ、自車両Mの向きを検出する方位センサ等を含む。
図2は、スピーカユニット60の構成図である。スピーカユニット60は、例えば、スピーカ60FR、60FL、60RR、60RLの4つのスピーカを含む。例えば、スピーカ60FRは車両Mの車室内のインストルメントパネルの右端部と右側ドアの間に、スピーカ60FLは車両Mの車室内のインストルメントパネルの左端部と右側ドアの間に、スピーカ60RRは車両Mの車室内の右後席の座面の下部に、スピーカ60RLは車両Mの車室内の左後席の座面の下部に、それぞれ設けられる。スピーカユニット60は、左右一対のスピーカを含むものであってもよい。また、スピーカユニット60に代えて一つのスピーカが車両Mに搭載されてもよい。
図3は、スピーカユニット60のハードウェア構成の一例を示す図である。例えば、スピーカ60FR、60FL、60RR、60RLのそれぞれには、制御用プロセッサ62FR、62FL、62RR、62RLが取り付けられている。スピーカと制御用プロセッサとの間はUSB(Universal Serial Bus)で接続され、制御用プロセッサは運転支援装置100とCAN(Controller Area Network)バスなどで接続される。
図4は、スピーカユニット60のハードウェア構成の他の一例を示す図である。例えば、スピーカ60FRと60FLはアナログ接続され、スピーカ60FLと制御用プロセッサ64FLがUSBで接続される。また、スピーカ60RRと60RLはアナログ接続され、スピーカ60RLと制御用プロセッサ64RLがUSBで接続される。そして、制御用プロセッサ64FLおよびRLは、運転支援装置100とCANバスなどで接続される。
このように、各スピーカに対応して制御用プロセッサが取り付けられてもよいし、複数のスピーカごとに制御用プロセッサが取り付けられてもよい。制御用プロセッサは、後述する運転支援装置100によって指示された周波数を持つ通知音(第1通知音と第2通知音を含む)を対応するスピーカに出力させる。
表示装置70は、例えばタッチパネルであり、車両Mの車室内の任意の箇所に取り付けられる。表示装置70は、運転支援装置100に対する各種の操作を受け付けると共に、運転支援装置100等から指示された画像を表示する。
図1に戻り、運転支援装置100は、例えば、認識部110と、通知制御部120とを備える。これらの構成要素は、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサがプログラム(ソフトウェア)を実行することにより実現される。これらの構成要素のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)またはGPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予めHDDやフラッシュメモリなどの記憶装置(非一過性の記憶媒体を備える記憶装置)に格納されていてもよいし、DVDやCD-ROMなどの着脱可能な記憶媒体(非一過性の記憶媒体)に格納されており、記憶媒体がドライブ装置に装着されることで記憶装置にインストールされてもよい。
[リスク物体]
認識部110は、カメラ10、レーダ装置12、LIDAR14、および物体認識装置16のうち少なくとも一部の出力に基づいて、車両Mの周辺に存在するリスク物体を認識する。リスク物体とは、例えば、外部移動体(external mobile object)、換言すると交通参加者、他移動体である。具体的に、リスク物体とは、歩行者、人が乗った自転車または車両などである。これに加えて、リスク物体は、静的障害物、例えば放置物体、駐車車両、電柱などを含んでもよい。「リスク物体を認識する」とは、上記のように分類されるリスク物体が存在することと、そのリスク物体の車両Mに対する相対位置とを認識することを意味する。認識部110は、物体認識装置16から物体の位置の情報と共に物体の種別の情報が入力される場合は、その物体の種別を参照してリスク物体を認識してもよいし、自らカメラ10の撮像した画像を解析してリスク物体を認識してもよい。また、認識部110は、物体の速度や電磁波の反射率などに基づいてリスク物体を認識してもよい。
[通知対象領域]
通知制御部120は、リスク物体の位置に基づいて、スピーカユニット60に(制御プロセッサを介して)通知音を出力させる。通知制御部120は、リスク物体が車両Mの前方領域を含む第1領域に存在する場合、スピーカユニット60に第1通知音を出力させ、リスク物体が車両Mの後方領域を含む第2領域に存在する場合、スピーカユニット60にに第2通知音を出力させる。図5は、第1領域A1と第2領域A2について説明するための図である。図中、Dは車両Mの進行方向(前進方向、通常走行方向)である。車両Mの進行方向Dは、車両Mの中心軸の方向でもよいし、瞬間的な移動ベクトルの方向でもよいし、車両Mが存在する道路の車線中心線の向かう方向でもよい。領域AFは前方領域である。前方領域AFは、例えば、車両Mの左右の側端部を車両Mの前方側に延伸させた線を左右の外縁線とし、車両Mの前端部から所定距離までの領域である。また、領域ARは後方領域である。後方領域ARは、例えば、車両Mの左右の側端部を車両Mの後方側に延伸させた線を左右の外縁線とし、車両Mの後端部から所定距離(前方領域AFにおける所定距離と同じでもよいし、異なってもよい)までの領域である。第1領域A1は、前方領域AFを少なくとも含み、車両Mの側方から前方側にかけて延在する領域である。第2領域A2は、後方領域ARを少なくとも含み、車両Mの側方から後方側にかけて延在する領域である。第1領域A1と第2領域A2は互いに重ならないように設定される。第1領域A1と第2領域A2の境界線は、車両Mの基準点Rを通り、車両Mの左右の側方に延在する。この境界線は、車両Mの幅方向にぴったり一致する必要は無く、車両Mの基準点を基点として前方側または後方側に傾いてもよい。図では、車両Mの基準点Rから斜め前方に向かう線分LrとLlが、第1領域A1と第2領域A2の境界線であるものとしている。また、第1領域A1と第2領域A2との間にある程度の隙間があってもよい。
[通知音]
第1実施形態において、第1通知音は、第2通知音とは高さが異なる音である。これによって、運転者は前方と後方のどちらについて高い通知音が出力され、どちらについて低い通知音が出力されるのかを認識していれば、直感的にリスク物体の位置を把握することができる。
一例として、第1通知音は、第2通知音よりも高い音である。「第2通知音よりも高い音」とは、例えば、第1通知音を構成する音の周波数成分の全てが、第2通知音を構成する音の周波数成分よりも高周波であることを意味する。これに代えて、第1通知音を構成する音の周波数成分の一部が、第2通知音を構成する音の周波数成分と重なるが、全体的に高周波である(例えば第1通知音を構成する音の周波数を音量で重み付けした加重和が、第2通知音のそれよりも高い)ことを意味してもよい。図6は、第1通知音NS1が第2通知音NS2よりも高いことの意味を例示した図である。図6の上図は、第1通知音NS1を構成する音の周波数成分の全てが、第2通知音NS2を構成する音の周波数成分よりも高周波である様子を示し、図6の下図は、第1通知音NS1を構成する音の周波数成分の一部が、第2通知音NS2を構成する音の周波数成分と重なるが、全体的に高周波である様子を示す図である。以下の説明では、第1通知音NS1を構成する音の周波数成分の全てが、第2通知音NS2を構成する音の周波数成分よりも高周波であることを前提とする。
一般的に、高い音の方が低い音よりも人の注意を引くものであるため、第1領域A1に存在するリスク物体、つまり車両Mの前方側に存在するリスク物体については高い通知音を出すことで、より迅速に運転者の注意を喚起することができる。また、第2領域A2に存在するリスク物体、つまり車両Mの後方側に存在するリスク物体については低い通知音を出すことで、過剰な通知によって運転者を煩わせることがないようにすることができる。
なお、上記とは逆に、第1通知音は、第2通知音よりも低い音であってもよい。前述したように、運転者の方で前方と後方のどちらについて高い通知音が出力され、どちらについて低い通知音が出力されるのかを認識していれば、直感的にリスク物体の位置を把握できるからである。
[整数次倍音など]
通知制御部120は、第1通知音NS1として、第1基準音NS1-bと、第1基準音NS1-bの整数次倍音である第1追加音NS1-p(p=1、2、…)とを含む音をスピーカユニット60に出力させてもよい。また、通知制御部120は、第2通知音NS2として、第2基準音NS2-bと、第2基準音NS2-bの周波数の1/n倍の周波数とは異なる周波数の第2追加音NS2-q(q=1、2、…)とを含む音をスピーカユニット60に出力させてもよい(nは自然数)。第2追加音NS2-qは、更に、第2基準音NS2-bの整数次倍音に該当しない音であってもよい。この場合、第1基準音NS1-bは「基準音A」の一例であり、第2基準音NS2-bは「基準音B」の一例である。
図7は、第1通知音NS1と第2通知音NS2の構成について説明するための図である。第1基準音NS1-bは、例えば第2基準音NS2-bよりも高い音であるが、同じ高さの(同じ周波数の)音であってもよい。図示する例では、第1通知音NS1は、第1追加音NS1-1および第1追加音NS1-2を含む。第1追加音NS1-1および第1追加音NS1-2は、第1基準音NS1-bの整数次倍音であるので、第1基準音NS1-bよりも高い音である。また、第2通知音NS2は、第2追加音NS2-1および第2追加音NS2-2を含む。「第2基準音NS2-bの周波数の1/n倍の周波数とは異なる周波数」の音は、第2基準音NS2-bよりも高い音と、第2基準音NS2-bよりも低い音とのいずれでもあり得るが、通知制御部120は、例えば、第2追加音NS2-qとして第2基準音NS2-bよりも低い音のみをスピーカユニット60に出力させる。
基準音と整数次倍音で構成された音は人の耳にクリアに聞こえ、逆に、構成される音の関係が整数次倍音になっていない音は人の耳に雑然と聞こえるものであるため、このように第1通知音NS1および第2通知音を構成することで、第1領域A1に存在するリスク物体、つまり車両Mの前方側に存在するリスク物体については基準音とその整数次倍音を含む通知音を出すことで、より迅速に運転者の注意を喚起することができる。また、第2領域A2に存在するリスク物体、つまり車両Mの後方側に存在するリスク物体については構成される音の関係が整数次倍音になっていない通知音を出すことで、過剰な通知によって運転者を煩わせることがないようにすることができる。
上記とは逆に、通知制御部120は、第1通知音として、第1基準音と、第1基準音の周波数の1/n倍の周波数とは異なる周波数の第1追加音とを含む音をスピーカユニット60に出力させてもよい。また、通知制御部120は、第2通知音として、第2基準音と、第2基準音の整数次倍音である第2追加音とを含む音をスピーカユニット60に出力させてもよい。この場合、第1基準音が「基準音B」の一例であり、第2基準音が「基準音A」の一例である。上記の場合とこの場合のいずれにおいても、運転者の方で前方と後方のどちらについて整数次倍音を含む音が出力され、どちらについて基準音の周波数の1/n倍の周波数とは異なる周波数の追加音とを含む音が出力されるのかを認識していれば、直感的にリスク物体の位置を把握することができる。
通知制御部120は、上記を基本として、更に以下の処理を行ってもよい。例えば、第1実施形態の通知制御部120は、リスク物体が第1領域A1に存在する場合、第1領域A1内におけるリスク物体の位置に基づいて、第1追加音NS1-pの態様を異ならせてもよい。より具体的に、通知制御部120は、リスク物体が第1領域A1に存在する場合、車両Mから見たリスク物体の方向が移動体の進行方向に近い程、第1追加音NS1-pの周波数の種類を増やしてもよい。図8は、第1追加音NS1-pの周波数の種類を増やすことの一例について説明するための図である。例えば、通知制御部120は、リスク物体ROが第1領域A1に存在する場合において、リスク物体ROが第1領域A1のうち車両Mの幅方向に関する中央部にある第1中央領域A1-cに存在する場合、リスク物体ROが第1領域A1のうち第1中央領域A1-cの左右両側にある第1左側領域A1-lまたは第1右側領域A1-rに存在する場合に比して、第1追加音NS1-pの周波数の種類を増やすようにしてもよい。図では、リスク物体ROが第1中央領域A1-cに存在する場合に第1追加音NS1-1、NS1-2、およびNS1-3をスピーカユニット60に出力させ、リスク物体ROが第1右側領域A1-rに存在する場合に第1追加音NS1-1スピーカユニット60に出力させる例を示している。通知制御部120は、第1中央領域A1-c、第1左側領域A1-l、第1右側領域A1-rといった区分に限らず、リスク物体ROの位置をより細かい刻みで分類し、第1追加音NS1-pの周波数の種類を変更してもよい。
また、通知制御部120は、更に以下の処理を行ってもよい。例えば、第1実施形態の通知制御部120は、リスク物体が第2領域A2に存在する場合、第2領域A2内におけるリスク物体の位置に基づいて、第2追加音NS2-qの態様を異ならせてもよい。より具体的に、通知制御部120は、リスク物体が第2領域A2に存在する場合において、車両Mから見たリスク物体の方向が車両Mの進行方向の反対方向に近い程、第2追加音NS2-qの音量を上げるようにしてもよい。図9は、第2追加音NS2-qの音量を上げることの一例について説明するための図である。例えば、通知制御部120は、リスク物体ROが第2領域A2に存在する場合において、リスク物体ROが第2領域A2のうち移動体の幅方向に関する中央部にある第2中央領域A2-cに存在する場合、リスク物体ROが第2領域A2のうち第2中央領域A2-cの左右両側にある第2左側領域A2-lまたは第2右側領域A2-rに存在する場合に比して、第2追加音NS2-qの音量を上げるようにしてもよい。通知制御部120は、第2中央領域A2-c、第2左側領域A2-l、第2右側領域A2-rといった区分に限らず、リスク物体ROの位置をより細かい刻みで分類し、第2追加音NS2-qの音量を変更してもよい。
上記に代えて、通知制御部120は、リスク物体ROが第1領域A1に存在する場合、第1領域A1内におけるリスク物体ROの位置に基づいて、第1追加音NS1-pの音量を変更するようにしてもよいし、リスク物体ROが第2領域A2に存在する場合、第2領域A2内におけるリスク物体ROの位置に基づいて、第2追加音NS2-qの周波数の種類を変更するようにしてもよい。
[音像定位、距離に応じた制御]
通知制御部120は、車両Mとリスク物体との距離と、車両Mから見たリスク物体の方向(角度)とのうち一方または双方に基づいて第1通知音NS1と第2通知音NS2のうち一方または双方の出力態様を制御してもよい。図10は、実施形態におけるパラメータの定義を示す図である。以下の説明において、車両Mの進行方向Dと一致する方向を0度とし、反時計回りに角度を定義する。そして、第1中央領域A1-cと第1左側領域A1-lの境界線の方向をθ1、第1左側領域A1-lと第2左側領域A2-lの境界線の方向をθ2、第2左側領域A2-lと第2中央領域A2-cの境界線の方向をθ3、第2中央領域A2-cと第2右側領域A2-rの境界線の方向を-θ3、第2右側領域A2-rと第1右側領域A1-rの境界線の方向を-θ2、第1右側領域A1-rと第1中央領域A1-cの境界線の方向を-θ1と定義する。なお、この例では各領域が左右対称に設定されているが、各領域は左右非対称に設定されてもよい。また、車両Mとリスク物体ROとの距離をDrisk、車両Mから見たリスク物体ROの方向(上記の定義を前提とする)をθriskと定義する。
通知制御部120は、リスク物体が第1領域A1に存在する場合、第1領域A1内におけるリスク物体の位置に基づいて、第1通知音NS1の音像を定位させる位置を決定し、リスク物体が第2領域A2に存在する場合、第2領域A2内におけるリスク物体の位置に基づいて、第2通知音NS2の音像を定位させる位置を決定してもよい。
具体的に、通知制御部120は、以下の式に基づいて各スピーカの出力する音の音量を決定することで音像を定位させる。以下の説明において、SL-FRはスピーカ60FRの出力する音の音量、SL-FLはスピーカ60FLの出力する音の音量、SL-RRはスピーカ60RRの出力する音の音量、SL-RLはスピーカ60RLの出力する音の音量を示す。また、Lbsは基準音量である。
(a)リスク物体が第1中央領域A1-cに存在する場合
SL-FR=Lbs×(θ1-θrisk)/2θ1
SL-FL=Lbs×(θrisk+θ1)/2θ1
SL-RR=SL-RL=0
(b)リスク物体が第1左側領域A1-lに存在する場合
SL-FL=Lbs×(θ2-θrisk)/(θ2-θ1)
SL-RL=Lbs×(θrisk-θ1)/(θ2-θ1)
SL-FR=SL-RR=0
(c)リスク物体が第2左側領域A2-lに存在する場合
SL-FL=Lbs×(θ3-θrisk)/(θ3-θ2)
SL-RL=Lbs×(θrisk-θ2)/(θ3-θ2)
SL-FR=SL-RR=0
(d)リスク物体が第2中央領域A2-cに存在する場合
SL-RR=Lbs×{θrisk+θ3+2×(180-θ3)}/{2×(180-θ3)}
SL-RL=Lbs×(-θrisk+θ3)/{2×(180-θ3)}
SL-FR=SL-FL=0
(e)リスク物体が第2右側領域A2-rに存在する場合
SL-FR=Lbs×(θ3+θrisk)/(θ3-θ2)
SL-RR=Lbs×(-θrisk-θ2)/(θ3-θ2)
SL-FL=SL-RL=0
(f)リスク物体が第1右側領域A1-rに存在する場合
SL-FR=Lbs×(θ2+θrisk)/(θ2-θ1)
SL-RR=Lbs×(-θrisk-θ1)/(θ2-θ1)
SL-FL=SL-RL=0
このように音像を定位させることで、特に横方向に関するリスク物体ROの位置に関して、直感的に運転者に伝えることができる。
[方向と接近度合いに応じた通知音制御]
通知制御部120は、リスク物体ROの方向θriskおよび距離Driskに基づいて、第1通知音NS1または第2通知音NS2のテンポおよび音量を以下のように制御してもよい。
例えば、通知制御部120は、リスク物体が第1領域A1に存在する場合、車両Mから見たリスク物体ROの方向が車両Mの進行方向Dに近い程、第1通知音NS1のテンポを遅くし、リスク物体ROが第2領域A2に存在する場合、車両Mから見たリスク物体ROの方向が車両Mの進行方向Dの反対方向に近い程、第2通知音NS2のテンポを速くする。図11は、通知音のテンポを異ならせることの一例について説明するための図である。図示するように、通知制御部120は、リスク物体ROが第1領域A1に存在する場合において、リスク物体ROが第1中央領域A1-cに存在する場合、リスク物体ROが第1左側領域A1-lまたは第1右側領域A1-rに存在する場合に比して、第1通知音NS1のテンポを遅くするようにしてももよい。係る制御は、車両Mの前方側に関して運転者は注意を払っていることが多いため、過剰な報知にならないように配慮したものである。また、前方側に関しては整数次倍音を含む高い音で報知を行うことから効果的に注意喚起ができているとの考察に基づいている。これによって、第1通知音NS1を出力することで運転者に与えるストレスを低減することができる。
通知制御部120は、リスク物体ROが第2領域A2に存在する場合において、リスク物体ROが第2中央領域A2-cに存在する場合、リスク物体ROが第2左側領域A2-lまたは第2右側領域A2-rに存在する場合に比して、第2通知音NS2のテンポを速くするようにしてもよい。更に、通知制御部120は、距離Driskが同じであると仮定して、リスク物体ROが第2領域A2に存在する場合の最も遅い第2通知音NS2のテンポを、リスク物体ROが第1領域A1に存在する場合の最も速い第1通知音NS1のテンポよりも速く設定してよい。
通知制御部120は、第1中央領域A1-c、第1左側領域A1-l、第1右側領域A1-r、第2中央領域A2-c、第2左側領域A2-l、第2右側領域A2-rといった区分に限らず、リスク物体ROの位置をより細かい刻みで分類し、第1通知音NS1または第2通知音NS2のテンポを変更してもよい。
通知制御部120は、いずれの領域にリスク物体ROが存在する場合も、距離Driskが小さくなる程、第1通知音NS1または第2通知音NS2のテンポを速くしてよい。また、通知制御部120は、距離Driskが小さくなるほど、第1通知音NS1または第2通知音NS2の音量を大きくしてもよい。図12は、距離Driskに応じた音量制御の一例を示す図である。図中、Dthは通知音の出力制御が開始される距離であり、車両Mから領域A1やA2の外縁線までの距離と一致してよい。
図13は、運転支援装置100により実行される処理の流れの一例を示すフローチャートである。まず、認識部110がリスク物体を認識する(ステップS100)。次に、認識部110は、リスク物体が存在する領域、リスク物体との距離Drisk、およびリスク物体の方向θriskを特定する(ステップS102)。
次に、通知制御部120が、通知音の構成、テンポ、および音量を決定し(ステップS104)、スピーカユニット60に通知音を出力させる(ステップS106)。
次に、認識部110が、リスク物体の位置が通知対象範囲外になった(不認識を含む)か否かを判定する(ステップS108)。通知対象範囲外とは、車両Mとの距離が前述したDthよりも遠い状態をいう。リスク物体の位置が通知対象範囲外になった場合、本フローチャートの処理が終了する。リスク物体の位置が通知対象範囲外になっていない場合、ステップS102に処理が戻される。
以上説明した第1実施形態によれば、移動体(車両M)の周辺に存在するリスク物体の位置または方向を、乗員に直感的に認識させることができる。
<第2実施形態>
以下、第2実施形態について説明する。第2実施形態の運転支援装置は、第1実施形態において図8および図9を用いて説明した、第1領域A1内における第1通知音NS1の構成変化制御、および第2領域A2内における第2通知音NS2の構成変化制御を行わず、リスク物体ROが第1領域A1内に存在するか、第2領域A2内に存在するかで通知音の構成を異ならせるものである。すなわち、第2実施形態の運転支援装置は、リスク物体ROが第1領域A1内に存在する場合、第1基準音NS1-bと、第1基準音NS1-bの整数次倍音である第1追加音NS1-p(p=1、2、…)とを含む第1通知音NS1をスピーカユニット60に出力させ、リスク物体ROが第2領域A2内に存在する場合、第2基準音NS2-bと、第2基準音NS2-bの周波数の1/n倍の周波数とは異なる周波数の第2追加音NS2-q(q=1、2、…)とを含む第2通知音NS2をスピーカユニット60に出力させる。その他の制御については第1実施形態と同様であってよい。これによって、より簡易な制御で第1実施形態と同種の効果を奏することができる。
<第3実施形態>
以下、第3実施形態について説明する。第3実施形態の運転支援装置は、自動運転車両に搭載されるものである。図14は、第3実施形態に係る運転支援装置100Aを中心とした車両Mに搭載される機器を示す図である。運転支援装置100Aは、自動運転制御装置150と共に車両MAに搭載される。カメラ10、レーダ装置12、LIDAR14、物体認識装置16、車両センサ40の出力データは、自動運転制御装置150にも入力される。これらに加えて、ナビゲーション装置やMPU(Micro Processing Unit)の出力データも自動運転制御装置150に入力されてよい。自動運転制御装置150は、車両MAの周辺状況を認識し、障害物との接触を回避しつつ走行可能な領域を認識して車両MAの目標軌道(速度要素が付随している)を生成し、目標軌道に沿って車両MAが走行できるように走行駆動力出力装置200、ブレーキ装置210、ステアリング装置220などを制御する。走行駆動力出力装置200とは、エンジンや走行用モータなどを含む。自動運転技術の詳細については種々の文献が公知となっているため、更なる説明を省略する。
自動運転制御装置150は、更に、ステアリング把持センサ160および車室内カメラ170と接続されている。ステアリング把持センサ160は運転者が操舵操作子であるステアリングホイールを把持しているか否かを検出するためのものであり、車室内カメラ170は運転車の頭部を正面から撮像するものである。自動運転制御装置150は、ステアリング把持センサ160の出力を参照して運転者がステアリングホイールを把持している(ハンズオン)か否かを判定し、車室内カメラ170の撮像画像を解析して運転者が車両MAの進行方向を視認している(アイズオン)か否かを判定する。自動運転制御装置150は、車両MAの周辺環境(走行している道路の種別)や車両MAの速度等に基づいて、ステアリングホイールを離すこと(ハンズオフ)、車両MAの進行方向以外に視線を向けること(アイズオフ)のうち一方または双方を許容する。この許容状態は、自動運転レベルと称されることがある。自動運転制御装置150は、許容されていない状態が発生した場合(例えば、ハンズオンの状態で運転者がステアリングホイールから手を離した場合)、その状態を解消するように運転者に通知した上で、解消されなければ手動運転に切り替えるなどの処理を行う。自動運転制御装置150は、自動運転レベルに関する情報を運転支援装置100Aに出力する。
運転支援装置100Aは、自動運転レベルに関する情報を参照し、ハンズオフとアイズオフの双方が許容されている場合、自動的に動作を停止する。この状態において、運転者が車両MAの周辺を監視する義務が一時的に無くなり、自動運転制御装置150の方でリスク物体との接触を回避するための制御が行われるからである。その他の機能に関しては第1または第2実施形態と同様である。
以上説明した第3実施形態によれば、自動運転との親和性の高い制御を行うことができる。
<第4実施形態>
以下、第4実施形態について説明する。第4実施形態の運転支援装置は、運転者がヘルメットを被った状態で乗車する二輪車に搭載される。図15は、第4実施形態に係る運転支援装置100Bを中心とした二輪車MBに搭載される機器を示す図である。運転支援装置100Bは、スピーカユニット60を制御するのに代えて、無線通信装置80に指示して通知音に関する指示情報を送信させる。無線通信装置80は、Bluetooth(登録商標)などの通信規格に基づいて通信を行う。
運転者が被るヘルメット300には、受信機310と、左耳用スピーカ320-Lと、右耳用スピーカ320-Rが取り付けられている。受信機310は、無線通信装置80から受信した指示情報に基づいて左耳用スピーカ320-Lと、右耳用スピーカ320-Rとのうち一方または双方に通知音を出力させる。
音像定位を制御する際に前後方向が表現困難である点を除いては、第1または第2実施形態と同様である。すなわち、認識部110と通知制御部120は第1または第2実施形態で説明した処理と同様の処理を行い、第1通知音NS1および第2通知音NS2の構成、テンポ、音量を決定し、その通りに左耳用スピーカ320-Lおよび/または右耳用スピーカ320-Rに通知音を出力させるための指示情報を無線通信装置80に送信させる。
第4実施形態において、ヘルメット内に設けられたスピーカに代えて、無線機能付きのイヤホンなどが用いられてもよい。
以上説明した第4実施形態によれば、音像定位の自由度が低下するものの、それ以外の点については第1または第2実施形態と同様の効果を奏することができる。
上記説明した実施形態は、以下のように表現することができる。
プログラムを記憶した記憶装置と、
前記記憶装置に接続されたハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサが前記記憶装置に記憶されたプログラムを実行することにより、
物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識し、
前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、
前記通知音を出力させる際に、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
前記第1通知音は、前記第2通知音とは高さが異なる音である、
運転支援装置。
上記説明した実施形態は、以下のように表現することもできる。
プログラムを記憶した記憶装置と、
前記記憶装置に接続されたハードウェアプロセッサと、を備え、
前記ハードウェアプロセッサが前記記憶装置に記憶されたプログラムを実行することにより、
前記ハードウェアプロセッサが前記記憶装置に記憶されたプログラムを実行することにより、
物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識し、
前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、
前記通知音を出力させる際に、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
前記第1通知音と前記第2通知音とのうちいずれか一方は、基準音Aと前記基準音Aの整数次倍音とを含む音であり、前記第1通知音と前記第2通知音とのうち他方は、基準音Bと前記基準音Bの周波数の1/n倍の周波数とは異なる周波数の追加音とを含む音である(nは自然数)、
運転支援装置。
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
10 カメラ
12 レーダ装置
14 LIDAR
16 物体認識装置
40 車両センサ
60 スピーカユニット
80 無線通信装置
100、100A、100B 運転支援装置
110 認識部
120 通知制御部
150 自動運転制御装置
300 ヘルメット

Claims (9)

  1. 物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識する認識部と、
    前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させる通知制御部と、を備え、
    前記通知制御部は、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
    前記第1通知音は、前記第2通知音とは高さが異なる音であり、
    前記第1通知音は、前記第2通知音よりも高い音であり、
    前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含み、
    前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含み(nは自然数)、
    前記通知制御部は、前記リスク物体が前記移動体の前方に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向に近い程、前記第1通知音のテンポを遅くする、
    運転支援装置。
  2. 前記通知制御部は、
    前記リスク物体が前記移動体の前方に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向に近い程、前記第1通知音のテンポを遅くし、
    前記リスク物体が前記移動体の後方に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向の反対方向に近い程、前記第2通知音のテンポを速くする、
    請求項1に記載の運転支援装置。
  3. 物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識する認識部と、
    前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させる通知制御部と、を備え、
    前記通知制御部は、前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
    前記第1通知音は、前記第2通知音とは高さが異なる音であり、
    前記第1通知音は、前記第2通知音よりも高い音であり、
    前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含み、
    前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含み(nは自然数)、
    前記通知制御部は、前記移動体に対して前記リスク物体が正面に存在する場合、前記リスク物体が前記正面の右側または左側に存在する場合に比して、前記第1通知音のテンポを遅くする、
    運転支援装置。
  4. 前記少なくとも一つのスピーカは、複数のスピーカを含み、
    前記通知制御部は、前記リスク物体が前記第1領域に存在する場合、前記第1領域内における前記リスク物体の位置に基づいて、前記第1通知音の音像を定位させる位置を決定し、前記リスク物体が前記第2領域に存在する場合、前記第2領域内における前記リスク物体の位置に基づいて、前記第2通知音の音像を定位させる位置を決定する、
    請求項1から3のうちいずれか1項記載の運転支援装置。
  5. 前記リスク物体は、交通参加者である、
    請求項1から4のうちいずれか1項記載の運転支援装置。
  6. コンピュータが、
    物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識し、
    前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、
    前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
    前記第1通知音は、前記第2通知音とは高さが異なる音であり、
    前記第1通知音は、前記第2通知音よりも高い音であり、
    前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含み、
    前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含み(nは自然数)、
    前記リスク物体が前記移動体の前方に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向に近い程、前記第1通知音のテンポを遅くする、
    運転支援方法。
  7. コンピュータに、
    物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識させ、
    前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、
    前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
    前記第1通知音は、前記第2通知音とは高さが異なる音であり、
    前記第1通知音は、前記第2通知音よりも高い音であり、
    前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含み、
    前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含み(nは自然数)、
    前記リスク物体が前記移動体の前方に存在する場合、前記移動体から見た前記リスク物体の方向が前記移動体の進行方向に近い程、前記第1通知音のテンポを遅くする、
    プログラム。
  8. コンピュータが、
    物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識し、
    前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、
    前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
    前記第1通知音は、前記第2通知音とは高さが異なる音であり、
    前記第1通知音は、前記第2通知音よりも高い音であり、
    前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含み、
    前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含み(nは自然数)、
    前記移動体に対して前記リスク物体が正面に存在する場合、前記リスク物体が前記正面の右側または左側に存在する場合に比して、前記第1通知音のテンポを遅くする、
    運転支援方法。
  9. コンピュータに、
    物体検知装置の出力に基づいて、移動体の周辺に存在するリスク物体を認識させ、
    前記リスク物体の位置に基づいて、少なくとも一つのスピーカに通知音を出力させ、
    前記リスク物体が前記移動体の前方領域を含む第1領域に存在する場合、前記少なくとも一つのスピーカに第1通知音を出力させ、前記リスク物体が前記移動体の後方領域を含む第2領域に存在する場合、前記少なくとも一つのスピーカに第2通知音を出力させ、
    前記第1通知音は、前記第2通知音とは高さが異なる音であり、
    前記第1通知音は、前記第2通知音よりも高い音であり、
    前記第1通知音は、第1基準音と、前記第1基準音の整数次倍音である第1追加音とを含み、
    前記第2通知音は、第2基準音と、前記第2基準音の周波数の1/n倍の周波数とは異なる周波数の第2追加音とを含み(nは自然数)、
    前記移動体に対して前記リスク物体が正面に存在する場合、前記リスク物体が前記正面の右側または左側に存在する場合に比して、前記第1通知音のテンポを遅くさせる、
    プログラム。
JP2025009491A 2021-11-22 2025-01-22 運転支援装置、運転支援方法、およびプログラム Active JP7843878B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2025009491A JP7843878B2 (ja) 2021-11-22 2025-01-22 運転支援装置、運転支援方法、およびプログラム

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021189633A JP2023076292A (ja) 2021-11-22 2021-11-22 運転支援装置、運転支援方法、およびプログラム
JP2025009491A JP7843878B2 (ja) 2021-11-22 2025-01-22 運転支援装置、運転支援方法、およびプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2021189633A Division JP2023076292A (ja) 2021-11-22 2021-11-22 運転支援装置、運転支援方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2025069222A JP2025069222A (ja) 2025-04-30
JP7843878B2 true JP7843878B2 (ja) 2026-04-10

Family

ID=86372563

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2021189633A Pending JP2023076292A (ja) 2021-11-22 2021-11-22 運転支援装置、運転支援方法、およびプログラム
JP2025009491A Active JP7843878B2 (ja) 2021-11-22 2025-01-22 運転支援装置、運転支援方法、およびプログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2021189633A Pending JP2023076292A (ja) 2021-11-22 2021-11-22 運転支援装置、運転支援方法、およびプログラム

Country Status (3)

Country Link
US (1) US12291226B2 (ja)
JP (2) JP2023076292A (ja)
CN (1) CN116142070B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12005933B2 (en) * 2021-11-30 2024-06-11 GM Global Technology Operations LLC Methods and systems for a unified driver override for path based automated driving assist under external threat

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006318049A (ja) 2005-05-10 2006-11-24 Fuji Heavy Ind Ltd 車両の運転支援装置
JP2008257636A (ja) 2007-04-09 2008-10-23 Denso Corp 運転支援装置
US20170096104A1 (en) 2015-10-02 2017-04-06 Ford Global Technologies, Llc Potential hazard indicating system and method

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0655984B2 (ja) 1985-07-04 1994-07-27 日本板硝子株式会社 繊維マツト連続製造方法およびその装置
JP2689792B2 (ja) 1991-10-30 1997-12-10 日産自動車株式会社 立体音場警報装置
JP2819957B2 (ja) * 1992-08-08 1998-11-05 日産自動車株式会社 立体音場警報装置
JP2005126948A (ja) 2003-10-22 2005-05-19 Toyo Tire & Rubber Co Ltd 木造住宅建物の気密断熱施工法
DE102004040429B4 (de) 2004-08-20 2009-12-17 Peter Wolters Gmbh Doppelseiten-Poliermaschine
US7403124B2 (en) 2005-05-10 2008-07-22 Fuji Jukogyo Kabushiki Kaisha Driving support equipment for vehicles
US20070124078A1 (en) * 2005-11-25 2007-05-31 Garry Vinje Vehicle impact avoidance system
JP5853442B2 (ja) * 2011-07-01 2016-02-09 日産自動車株式会社 警報音生成装置
JP7173156B2 (ja) * 2018-10-03 2022-11-16 株式会社ソシオネクスト 音響装置及び音響再生方法
WO2020110172A1 (ja) 2018-11-26 2020-06-04 三菱電機株式会社 情報提示制御装置、情報提示装置及び情報提示制御方法、並びにプログラム及び記録媒体
US11541902B2 (en) * 2019-04-23 2023-01-03 Toyota Research Institute, Inc. Adaptive localized notifications
EP3730374A1 (en) * 2019-04-26 2020-10-28 Tusimple, Inc. Auditory assistant module for autonomous vehicles

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006318049A (ja) 2005-05-10 2006-11-24 Fuji Heavy Ind Ltd 車両の運転支援装置
JP2008257636A (ja) 2007-04-09 2008-10-23 Denso Corp 運転支援装置
US20170096104A1 (en) 2015-10-02 2017-04-06 Ford Global Technologies, Llc Potential hazard indicating system and method

Also Published As

Publication number Publication date
CN116142070B (zh) 2026-04-14
US20230159045A1 (en) 2023-05-25
JP2025069222A (ja) 2025-04-30
JP2023076292A (ja) 2023-06-01
US12291226B2 (en) 2025-05-06
CN116142070A (zh) 2023-05-23

Similar Documents

Publication Publication Date Title
JP7115270B2 (ja) 自動運転システム
KR101834351B1 (ko) 차량용 운전 보조 장치
KR20190100614A (ko) 차량 및 그 제어방법
JP7151495B2 (ja) 自動運転システム
WO2017014035A1 (ja) 自動車接近警告システム
JP6758911B2 (ja) 車両制御システム、車両制御方法、および車両制御プログラム
JP2007104373A (ja) 車両用画像表示装置
JP7788914B2 (ja) 運転支援装置、運転支援方法、およびプログラム
JP7788915B2 (ja) 運転支援装置、運転支援方法、およびプログラム
JP7843878B2 (ja) 運転支援装置、運転支援方法、およびプログラム
WO2021060357A1 (ja) Fcw制御装置を備えたリーン車両
JP2024066121A (ja) 運転支援装置、運転支援方法、およびプログラム
JP7032698B2 (ja) 車両用警報システム
JP2019211928A (ja) 車両用警報システム
JP4873255B2 (ja) 車両用報知システム
US20230294675A1 (en) Driving assistance device, driving assistance method, and storage medium
US12377838B2 (en) Driving assistance device, driving assistance method, and storage medium
CN116142222A (zh) 通知装置、车辆以及通知控制方法
JP2019151304A (ja) 周辺監視装置
US20240109554A1 (en) Control device, control method, and storage medium
CN116331198B (zh) 车辆行驶的道路预警系统及方法
US20230169952A1 (en) Apparatus and method for controlling virtual engine sound
JP2009067334A (ja) 車両安全装置
JP2024050273A (ja) 制御装置、制御方法、およびプログラム
US20250083598A1 (en) Vehicle control device and vehicle control method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20250220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20251014

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20251212

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20260303

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20260331

R150 Certificate of patent or registration of utility model

Ref document number: 7843878

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150