JP2022507916A - 車両の運転者に警告するための装置および方法 - Google Patents

車両の運転者に警告するための装置および方法 Download PDF

Info

Publication number
JP2022507916A
JP2022507916A JP2021528961A JP2021528961A JP2022507916A JP 2022507916 A JP2022507916 A JP 2022507916A JP 2021528961 A JP2021528961 A JP 2021528961A JP 2021528961 A JP2021528961 A JP 2021528961A JP 2022507916 A JP2022507916 A JP 2022507916A
Authority
JP
Japan
Prior art keywords
driver
vehicle
seat
sensors
environment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2021528961A
Other languages
English (en)
Inventor
コップ,ミヒャエル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of JP2022507916A publication Critical patent/JP2022507916A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0027Planning or execution of driving tasks using trajectory prediction for other traffic participants
    • B60W60/00274Planning or execution of driving tasks using trajectory prediction for other traffic participants considering possible movement changes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/04Systems determining presence of a target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/04Systems determining presence of a target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/93Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/04Systems determining the presence of a target
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408Radar; Laser, e.g. lidar
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54Audio sensitive means, e.g. ultrasound
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/20Static objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • B60W2556/65Data transmitted between vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/90Driver alarms
    • B60Y2400/902Driver alarms giving haptic or tactile signals
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9316Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles combined with communication equipment with other vehicles or with base stations

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Electromagnetism (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

本発明は、車両(2)の運転者に警告するための装置および方法に関し、車両(2)は、車両周辺の物体(3)を検出する1つ以上の環境センサ(4,5,6)を有し、1つ以上の環境センサ(4,5,6)の複数の物体検出(7)から環境モデルを生成する解析装置が設けられており、環境モデルで認識された物体(3)に関して運転者に通知するためのアクチュエータシステム(9,10)が設けられおり、運転者に通知するためのアクチュエータシステム(9,10)が空間的な警告情報を含み、運転者は物体(3)の位置(7)に関して触覚的に通知される。

Description

本発明は、車両の運転者に警告するための装置および方法に関し、車両は、車両周辺の物体を検出する1つ以上の環境センサを有し、1つ以上の環境センサの物体検出から環境モデルを生成する解析装置が設けられており、環境モデルで認識された物体に関して運転者に通知するアクチュエータシステムが設けられており、運転者に通知するためのアクチュエータシステムは、空間的な警告情報を含み、運転者は、物体の位置に関して触覚的に通知される。
ドイツ特許出願公開第102014226744号明細書により、車両の車線維持支援システムを介して警告を出力する方法が知られており、この方法では、車両の運転状況に割り当てられた危険レベルが読み取られ、さらなるステップにおいて、危険レベルに応じて、車両の運転者に警告するための警告信号の強度が設定される。この場合、警告信号は、設定ステップで設定された強度で生成される。
本発明の核心は、空間的な警告情報を含み、物体の位置もしくは方向を運転者に触覚的に通知する運転車情報のためのアクチュエータシステムを指定することができる装置および関連する方法を提供することである。
本発明によれば、このことは独立請求項の特徴によって解決される。有利な改良形態および構成が従属請求項から明らかである。
有利には、解析装置は、環境モデルから、検出された物体の、車両に対する相対位置および/または空間方向を決定するように設定されている。この場合、相対位置は、例えば、XY座標系内で指定することができ、座標の原点は自車両内に位置する。検出された物体の空間方向は、例えば、自車両の長手方向軸に関して検出された物体の方位角であってもよい。この場合、空間方向は、0°から360°まで間の角度値で指定することができる。
環境モデルを作成するために、自車両に対する物体座標または自車両に対する物体方向に加えて、代替的または付加的に、環境センサによって選択的に直接に測定することができるか、または既存の測定値から決定することができる他の大きさを使用することができる。例えば、物体の相対速度は、選択的に直接に測定するか、または物体と自車両との距離の値から得た時間導関数から計算することができる。相対速度に加えて、物体の大きさ、物体の後方散乱断面積、物体の表面特性、または任意の他の測定可能な値などの他の大きさを代替的または補足的に使用することができる。
さらに、運転者に通知するためのアクチュエータシステムが、運転席および/またはステアリングホイール内の複数の振動アクチュエータからなることは有利である。さらに、運転者に通知するためのアクチュエータ信号は、運転席および/またはステアリングホイール内の多数の振動アクチュエータが個別に動作可能または停止可能であり、および/またはこれら振動アクチュエータの強度および/または周波数が可変に制御可能であるように構成されていることが有利な場合もある。例えば、複数の、例えば10個または12個の振動アクチュエータを運転席の床領域に設置することができ、これらの振動アクチュエータは、前側の座席端部と後側の座席端部との間の座席フレームの左側および右側に分配される。このようにして、1つの振動アクチュエータ、または隣接する複数の振動アクチュエータを制御することによって、運転席に座っている運転者に触覚的な方向情報を伝達することができる。
運転席および/またはステアリングホイールの振動アクチュエータに対して代替的に、または運転席および/またはステアリングホイールの振動アクチュエータと組み合わせて、アクセルペダルおよび/またはブレーキペダルおよび/または運転席のアームレストおよび/または運転席のネックレストに振動アクチュエータを設けることも有利であり、これらの振動アクチュエータは、同様に個別に動作可能、停止可能、および/または振動周波数を変更可能、または振動パターンによって制御可能である。これにより、例えば、ネックレストを振動させるだけで、または運転席の左または右のアームレストのみを振動させることができることによって、運転者に複数の異なる運転状況を直感的に指摘することが可能になる。有利には、例えば、特に危機的な運転状況を特に緊急に指摘するために、複数の設置場所で振動アクチュエータを動作させることも可能である。
さらに、運転席および/またはステアリングホイール内の多数の振動アクチュエータの制御が行われ、アクチュエータが動作したことにより、座席またはステアリングホイールの振動が生成され、この振動が、認識された物体の空間的な位置に対応して、方向に関して運転者に触覚的に通知されることは有利である。座席またはステアリングホイールの振動アクチュエータ、または隣接する複数のアクチュエータが、車両の長手方向軸に関して車両周辺で物体が認識された方向に動作する場合、運転者が光学ディスプレイを読み取る必要なしに、または音響アナウンスの終了を待つ必要なしに、したがって運転から気をそらされることなしに、特定の周辺状況に加えて、さらに方向情報を運転者に直感的に伝達することもできる。
さらに、1つ以上の環境センサは、1つ以上のレーダセンサ、1つ以上の超音波センサ、1つ以上のライダーセンサ、1つ以上のビデオセンサ、またはこれらの組合せからなることが有利である。車両周辺をぐるりと完全に検出されるか、または少なくとも関心のある角度範囲が検出されるだけの数のセンサが車両の周囲に設置される。この場合、複数の領域を異なる種類の、もしくは同じ種類の複数のセンサによってカバーするか、または複数の角度範囲を複数の異なるセンサによってカバーすることができ、これにより、物体検出の冗長性および妥当性をもたらすことができる。
列挙された種類のセンサに対して代替的に、またはこれらと組み合わせて、Car‐to‐Xインターフェースが環境センサとして設けられていてもよい。このようなCar‐to‐Xインターフェースによって車両の外部のセンサからデータを受信し、自身のセンサによって取得したデータと同様に処理することができる。例えば、車両周辺を走行している他車両の環境センサが自身の環境センサのデータをCar‐to‐Xインターフェースを介して提供することができる。このために、車両から車両への伝送を行うか、またはデータ伝送サービスを介在させることによって、これらのデータを他車両からデータサーバに伝送し、さらなるステップでデータサーバから自車両に伝送することができる。インフラストラクチャ設備に固定して取り付けられた環境センサからのデータを付加的または代替的に使用することも可能であり、例えば、高速道路の路肩を監視するか、または交差点における物体データを提供することも可能である。これらのデータを同様にCar‐to‐インターフェースを介して車両に伝送することもできる。
さらに、環境モデルに由来し、自車両の周囲で物体データをデータサーバに収集することによって決定され、交通環境モデルとしてまとめられたデータをCar‐to‐インターフェースを介して車両に選択的に伝送することもできる。このような環境モデルデータは、本発明による機能のための入力データとして使用することもできる。
さらに、物体が新たに認識され、車両周辺を移動している物体が自車両を追い越していることが認識されるか、車両周辺を移動している物体が自車両によって追い越されることが認識されるか、車両周辺を移動している物体によって自車両が危険にさらされていることが認識されるか、移動している物体の自車両への危機的な接近が認識されるか、またはこれらの周辺状況の組合せが認識された場合に、物体の方向に関して運転者の情報が振動アクチュエータに出力されることが有利である。一般に、運転者は、周辺状況が変化した場合、または周辺状況が変化し、この変化した周辺状況を運転者が認識したことを確かめることができない場合には、物体の方向について常に通知されることが望ましい。
さらに、異なる周辺状況に対して、アクチュエータが異なる周波数で制御され、および/または異なる振動パターンによって制御されることは有利である。この場合、バイナリコードまたはモールスコードと同様に、スイッチオンおよびスイッチオフ信号のシーケンスが互いに続くか、振動の強度に変化が生じるか、または、例えば、危険性もしくは物体の大きさに応じてアクチュエータの振動周波数が制御されるように、複数の異なる振動パターンを構成してもよい。これにより、異なる周辺状況を運転者に直感的に伝達し、危険性の程度または認識された物体の種類を指摘することが可能である。
この方法は、例えば、ソフトウェアまたはハードウェアで、あるいは、ソフトウェアとハードウェアとの混合形式で、例えば、制御器で実施することができる。
ここに提示されるアプローチにより、ここに提示される方法の実施形態のステップを対応する装置において実施、制御、もしくは実行するように形成された距離コントローラがさらに得られる。
距離コントローラは、信号またはデータを処理するための少なくとも1つの計算ユニットと、信号またはデータを記憶するための少なくとも1つのメモリユニットと、通信プロトコルに埋め込まれたデータを読み込むか、または出力するための少なくとも1つのインターフェースおよび/または通信インターフェースとを有する電気機器であってもよい。計算ユニットは、例えば、信号プロセッサ、いわゆる「システムASIC」、またはセンサ信号を処理し、センサ信号の関数としてデータ信号を出力するマイクロコントローラであってもよい。メモリユニットは、例えば、フラッシュメモリ、EPROM、または磁気メモリユニットであってもよい。インターフェースは、センサからのセンサ信号を読み取るためのセンサインターフェースとして、および/またはデータ信号および/または制御信号をアクチュエータに出力するためのアクチュエータインターフェースとして形成されていてもよい。通信インターフェースは、データを無線および/または有線で読み込むか、または出力するように形成されていてもよい。インターフェースは、例えば、他のソフトウェアモジュールと共にマイクロコントローラに提供されているソフトウェアモジュールであってもよい。
プログラムコードを有するコンピュータプログラム製品またはコンピュータプログラムであって、プログラムコードが半導体メモリ、ハードディスク、または光メモリなどの機械可読キャリアまたは記憶媒体に格納されていてもよく、特に、プログラム製品またはプログラムがコンピュータ、プログラム可能な制御器、または同様の装置で実行される場合に、上述のいずれか1つの実施形態にしたがって方法のステップを実施、実行、および/または制御するために使用される、プログラムコードを有するコンピュータプログラム製品またはコンピュータプログラムも有利である。
本発明の可能な特徴および利点のいくつかは、本明細書では様々な実施形態に関して、距離をコントロールする方法として、および距離コントローラとして記載されていることに留意されたい。当業者は、本発明のさらなる実施形態に想到するために、特徴を適切に組み合わせ、適合させ、または入れ替えることができることを認識している。
次に、図面に基づいて本発明の例示的な実施形態を説明する。
本発明による装置および本発明による方法を説明するための運転状況を示す概略的な上面図である。 本発明による装置の実施形態を示す概略的なブロック図である。 本発明による方法を説明するための概略的なフローチャートである。
図1は、自車両2が速度Vegoで移動している多車線道路1の上面図を示す。右側の斜線には別の車両3が走行しており、この車両は周辺の物体として捉えられ、速度Vで移動している。自車両2は、1つ以上の環境センサ4,5,6を備えており、例えば図示の実施形態では、左右前方の車両隅部に2つのフロントセンサ4、フロントガラスの領域に配置された別の環境センサ5(例えばビデオカメラとして構成されていてもよい)、および左右後方の車両隅部にそれぞれ取り付けられた2つのリアセンサ6を備える。これらの環境センサ4,5,6によって、車両は周辺範囲全体を監視し、車両周辺の物体を距離および相対速度に関して認識することができる。この場合、環境センサの数および配置は変更することができ、図示の例示的な実施形態に限定されていない。センサ4,5,6は、様々なセンサとして構成することもでき、例えば、いくつかのセンサがレーダセンサとして、他のセンサをライダーセンサまたは超音波センサとして、または別の組合せで構成されている。この場合、右後方のリアセンサ6は、多車線道路1の隣接車線において自車両2の速度Vegoよりも速い速度Vで走行している接近中の他車両3を検出する。したがって、他車両3は自車両2に接近し、特定の時点で自車両2のいわゆる「死角」に入っており、将来には自車両2を追い越すと推測される。右後方のリアセンサ6は、物体検出7によって他車両3を検出し、この物体情報を解析装置20に送信する(明確化のために図1には示されていない)。この解析装置20では、自車両2に対する他車両3の相対位置、または自車両2の車両長手方向軸に対する他車両3の方位が決定され、運転者に触覚的に警告するための信号が生成される。このために、例えば、4つの振動アクチュエータ9,10が、自車両2の運転席8の車両固定部に取り付けられている。これらの振動アクチュエータ9,10は個々に動作可能および停止可能であり、異なる周波数、異なる振動パターンで個別に制御することができる。他車両3が自車両2の右後方の領域で検出されたので、右後方の振動アクチュエータ10が動作し、他の3つの振動アクチュエータ9は非動作のままである。したがって、運転者は、運転席8の右後方隅部における振動によって、自車両2の右後方の周辺領域で車両が検出されたという情報を受け取る。さらに、振動パターンまたは振動周波数によって、運転状況による危険性に応じて、または他車両3の大きさまたは速度に基づいて、自車両2の運転者にさらなる情報を提供することが可能である。4つの振動アクチュエータ9,10を用いた運転席8の表示は、一例として示されているにすぎない。したがって、より多くの、例えば12個以上の振動アクチュエータを運転席に取り付けることが可能であり、運転席の対応する振動アクチュエータを動作させることによって、またはいくつかの、例えば隣接する振動アクチュエータ9,10を動作させることによって、警告方向をより細かく分解することが可能になる。
図2は、概略的なブロック図を示す。この図は、入力回路21を有する解析装置20を示す。入力回路21によって解析装置20に入力信号25を供給することができる。これらの入力信号25は、とりわけ、例えば、レーダセンサ、ビデオセンサ、ライダーセンサ、または超音波センサとして構成されていてもよい環境センサ4,5,6から発信される。これらの環境センサは、車両の前部、車両の後部、および必要に応じて車両の側面に取り付けられており、車両周辺全体を監視することができる。有利には、同じ空間領域が異なるタイプの環境センサによって監視され、これにより、物体検出の妥当性および冗長性が確保されている。環境センサ4,5,6は、例えば、固有の制御器を有していてもよく、この制御器は物体検出および信号処理を行い、入力信号25として解析装置20に物体リストを供給する。代替的に、または組み合わせて、生のセンサ信号を入力信号25として処理装置20に供給し、生の信号を解析装置20で解析することも可能である。入力回路21に供給される入力信号25は、例えばバスシステムとして構成されうるデータ交換装置26を介して演算装置27に供給され、この演算装置27では、例えば、本発明による方法がソフトウェアとして実行され、入力信号から環境モデル37が決定され、環境モデル37から、検出された物体3の相対位置または他の物体3の方位が決定され、出力信号としてデータ交換装置26を介して出力回路28に供給される。出力回路28によって、出力信号29が解析装置20から下流側のアクチュエータ9,10,30に出力される。出力信号29は、例えば、自車両20のステアリングホイールに設けられた振動アクチュエータ30に出力される。これにより、ステアリングホイールまたはステアリングホイールの一部を振動させ、振動周波数、振動パターン、および振動させたステアリングホイール部分によって、運転者に方向および周辺状況を通知することが可能であり、これにより、運転者は周辺状況を直感的に通知される。さらに、代替的または追加的には、出力信号29を座席アクチュエータ9,10に出力することができ、これらの座席アクチュエータは複数の振動アクチュエータからなり、これらの振動アクチュエータを振動パターンおよび振動周波数を用いて個別に制御することによって、運転者に周辺状況を認識させることができる。
図3は、本発明による方法の概略的なブロック図を示す。この方法は、ステップ35において、例えば、自車両2の点火装置が動作した場合、または、車両2に組み込まれた特定の運転者支援機能が動作した場合に処理を開始することによって開始される。次の処理ステップ36では、物体データが環境センサ4,5,6から読み込まれるか、またはこれらの局所的な環境センサ4,5,6の局所的な制御器から読み込まれる。次のステップ37では、自車両2に対する物体、物体位置、および方位が決定される。複数の異なる環境センサ、例えば、レーダと超音波、またはレーダとビデオ、またはビデオとライダ、または別の組合せを使用する場合、このステップ36では、センサデータフュージョンも可能であり、この場合、異なるセンサタイプの物体データが共通の環境モデル37に入力され、物体の妥当性が確認される。次のステップ38では、ステップ37の環境モデルが評価され、特別な周辺状況、特に、他の物体3に対する自車両2の特定の運転状況が存在するかどうかが判定される。この場合、例えば、新たに認識された物体3が検出されたかどうか、他の物体3が自車両2を追い越しているか、または間もなく追い越そうとしているかどうか、自車両2が他の物体を追い越しているか、または間もなく追い越そうとしているかどうか、自車両2が他車両3に危機的な接近をしているかどうか、または運転者が車両周辺内の他の物体3に関して通知されることが望ましい他の周辺状況があるかどうかが決定される。このような周辺状況の認識から、特定の周波数パターンを状況に割り当てるか、または特定の振動パターンを割り当てて出力信号29を生成することができ、これらの出力信号29は、次のステップ39において解析装置20から下流側のアクチュエータ9,10,30に出力される。この場合、運転者に方向情報を伝達するために、単一の振動アクチュエータを動作させるか、または、特に隣接する複数の振動アクチュエータを動作させることができる。さらに、振動パターンに関して振動アクチュエータを制御するか、または複数の異なる振動周波数によって制御することができ、これにより、特定の周辺状況、および自身の交通状況に関するこの周辺状況の危機を運転者に直感的に伝達することもできる。出力信号29が下流側のアクチュエータ9,10,30に出力された後、本発明による方法はステップ36によって続行され、ステップ36~39が再び実行され、この場合に、環境モデル37の暫定的な変化および周辺状況の関連する変化に基づいて、複数の異なる振動アクチュエータを他の周波数および/または他のパターンで制御することができる。

Claims (11)

  1. 車両(2)の運転者に警告するための装置であって、
    前記車両(2)が、車両周辺の物体(3)を検出する1つ以上の環境センサ(4,5,6)を有し、
    1つ以上の環境センサ(4,5,6)の複数の物体検出(7)から環境モデル(37)を生成する解析装置(20)が設けられており、
    前記環境モデル(37)で認識された物体(3)に関して運転者に通知するアクチュエータシステム(9,10,30)が設けられおり、
    運転者に通知するための当該アクチュエータシステム(9,10,30)が、空間的な警告情報を含めて、物体(3)の位置(7)に関して触覚的に運転者に通知する、ことを特徴とする装置。
  2. 請求項1に記載の装置であって、前記解析装置(20)により、前記環境モデル(37)から、検出された前記物体(3)の、前記車両(2)に対する相対位置および/または空間方向が決定される、装置。
  3. 請求項1または2に記載の装置であって、運転者に通知するための当該アクチュエータシステム(4,5,6)が、運転席(8)および/またはステアリングホイールおよび/またはアクセルペダルおよび/またはブレーキペダルおよび/または運転席のアームレストおよび/または運転席のネックレストにおける複数の振動アクチュエータ(9,10,30)からなる、装置。
  4. 請求項3に記載の装置であって、前記運転席(8)および/または前記ステアリングホイールおよび/または前記アクセルペダルおよび/または前記ブレーキペダルおよび/または前記運転席の前記アームレストおよび/またネックレストにおける前記複数の振動アクチュエータ(9,10,30)の制御が行われ、当該動作するアクチュエータ(9,10,30)に基づいて、検出された前記物体(3)の空間的位置に対応して、前記運転者に前記方向に関して触覚的に通知する振動が、前記座席(8)または前記ステアリングホイールまたは前記アクセルペダルまたは前記ブレーキペダルまたは前記運転席の前記アームレストまたは前記ネックレストで生成される、装置。
  5. 請求項1から4までのいずれか1項に記載の装置であって、
    前記1つ以上の環境センサ(4,5,6)が、
    1つ以上のレーダセンサ、
    1つ以上の超音波センサ、
    1つ以上のライダーセンサ、
    1つ以上のビデオセンサ、
    他車両の1つ以上の環境センサであって、該環境センサのデータが、車両(2)のCar-To-Xインターフェースを介して受信される環境センサ、
    交通インフラストラクチャの一部である1つ以上の固定した環境センサであって、該環境センサのデータが車両(2)のCar-To-Xインターフェースを介して受信される、固定した環境センサ、
    車両(2)のCar-To-Xインターフェースを介して受信される、データクラウドのデータからなる環境モデル、または
    これらの組合せからなる、装置。
  6. 車両の運転者に警告する方法であって、
    1つ以上の前記環境センサ(4,5,6)によって車両周辺の物体(3)を検出し、
    前記解析装置(20)によって、複数の物体検出(7)から環境モデル(37)を生成し、
    前記環境モデルで認識された物体に応じて、認識された物体(3)に関して運転者に通知するアクチュエータ信号(29)を生成し、
    空間方向に関して触覚的な情報を運転者に伝達することができるアクチュエータシステム(9,10,30)を制御し、アクチュエータ信号(29)によってアクチュエータシステム(9,10,30)を制御して物体(3)の位置に関して運転者に触覚的に通知することを特徴とする方法。
  7. 請求項6に記載の方法であって、
    前記環境センサ(4,5,6)の出力信号(25)から前記環境モデル(37)を決定し、前記車両(2)に関して、検出された前記物体(3)の相対位置および/または空間方向を決定する方法。
  8. 請求項6または7に記載の方法であって、
    運転席(8)および/またはステアリングホイールおよび/またはアクセルペダルおよび/またはブレーキペダルおよび/または運転席のアームレストおよび/または運転席のネックレストにおける複数の振動アクチュエータ(9,10,30)が
    個別に動作可能または停止可能および/または
    強度および/または周波数に関して可変に制御可能となるように、運転者に通知するためのアクチュエータ信号(29)を構成する、方法。
  9. 請求項6から8までのいずれか1項に記載の方法であって、
    運転席(8)および/またはステアリングホイールにおける複数の振動アクチュエータ(9,10,30)の制御を行うことにより、運転席(8)および/またはステアリングホイールおよび/またはアクセルペダルおよび/またはブレーキペダルおよび/または運転席のアームレストおよび/または運転席のネックレストにおいて振動を発生し、認識された物体(3)の空間的な位置(7)に対応して、方向に関して運転者に触覚的に通知する、方法。
  10. 請求項6から9までのいずれか1項に記載の方法であって、
    物体(3)が新たに認識され、
    車両周辺を移動している物体(3)が自車両(2)を追い越していることが認識され、
    車両周辺を移動している物体(3)が自車両(2)によって追い越されることが認識され、
    車両周辺を移動している物体(3)によって自車両(2)が危険にさらされることが認識され、
    移動している物体(3)の自車両(2)への危機的な接近が認識され、または
    これらの周辺状況の組み合わせが認識された場合に、
    前記物体(3)の方向(7)に関して前記運転者の情報を通知する方法。
  11. 請求項6から10までのいずれか1項に記載の方法であって、
    異なる周辺状況に対して、
    異なる周波数、および/または
    異なる振動パターンによって、前記アクチュエータ(9,10,30)を制御する、方法。
JP2021528961A 2018-11-22 2019-09-18 車両の運転者に警告するための装置および方法 Pending JP2022507916A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102018219976.0 2018-11-22
DE102018219976.0A DE102018219976A1 (de) 2018-11-22 2018-11-22 Vorrichtung und Verfahren zur Warnung eines Fahrers eines Fahrzeugs
PCT/EP2019/075083 WO2020104083A1 (de) 2018-11-22 2019-09-18 Vorrichtung und verfahren zur warnung eines fahrers eines fahrzeugs

Publications (1)

Publication Number Publication Date
JP2022507916A true JP2022507916A (ja) 2022-01-18

Family

ID=68084773

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021528961A Pending JP2022507916A (ja) 2018-11-22 2019-09-18 車両の運転者に警告するための装置および方法

Country Status (7)

Country Link
US (1) US11345279B2 (ja)
EP (1) EP3883832A1 (ja)
JP (1) JP2022507916A (ja)
KR (1) KR20210091796A (ja)
CN (1) CN113165645A (ja)
DE (1) DE102018219976A1 (ja)
WO (1) WO2020104083A1 (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019186816A1 (ja) * 2018-03-28 2019-10-03 本田技研工業株式会社 鞍乗り型車両
FR3089785B1 (fr) * 2018-12-17 2020-11-20 Pierre Briand Dispositif médical d’aide à la perception d’environnement pour des utilisateurs aveugles ou malvoyants
DE102020210238A1 (de) * 2020-08-12 2022-02-17 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zum Warnen von Verkehrsteilnehmern mit einer Umfeldüberwachung eines in Betrieb befindlichen Fahrzeugs und Vorrichtung zur Ausführung des Verfahrens
CN112644514B (zh) * 2020-12-31 2022-05-10 上海商汤临港智能科技有限公司 驾驶数据的处理方法、装置、设备、存储介质及程序产品
US20220258755A1 (en) * 2021-02-16 2022-08-18 Toyota Research Institute, Inc. Directional stimuli to enhance vehicle operator situational awareness
JP2022140032A (ja) * 2021-03-12 2022-09-26 本田技研工業株式会社 運転支援装置及び車両
DE102021203994A1 (de) * 2021-04-21 2022-10-27 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zum Betreiben eines wenigstens teilweise automatisierten Fahrzeugs
US20230057652A1 (en) 2021-08-19 2023-02-23 Geotab Inc. Mobile Image Surveillance Systems
CN114604172A (zh) * 2022-04-11 2022-06-10 梅赛德斯-奔驰集团股份公司 用于接近提醒的驾驶辅助设备和方法、车辆以及程序产品

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016081521A (ja) * 2014-10-20 2016-05-16 イマージョン コーポレーションImmersion Corporation 車両における継続的な注意を触覚フィードバックを用いて強化するシステム及び方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005048542A1 (de) * 2005-10-11 2007-04-12 Robert Bosch Gmbh Fahrerassistenzsystem
US20070244641A1 (en) * 2006-04-17 2007-10-18 Gm Global Technology Operations, Inc. Active material based haptic communication systems
JP5576472B2 (ja) * 2010-03-19 2014-08-20 パナソニック株式会社 車両周囲監視装置および車両周囲監視方法
DE102012201905A1 (de) * 2012-02-09 2013-08-14 Robert Bosch Gmbh Vorrichtung zum Schutz der Außenspiegel beim KFZ vor Kollision mit seitlichen Hindernissen
DE102012004791A1 (de) * 2012-03-07 2013-09-12 Audi Ag Verfahren zum Warnen des Fahrers eines Kraftfahrzeugs vor einer sich anbahnenden Gefahrensituation infolge eines unbeabsichtigten Driftens auf eine Gegenverkehrsfahrspur
GB2512317A (en) * 2013-03-26 2014-10-01 Jaguar Land Rover Ltd Vehicle control system and method
JP5972332B2 (ja) * 2014-09-26 2016-08-17 本田技研工業株式会社 鞍乗型車両の接近報知装置
DE102014226744A1 (de) 2014-12-22 2016-06-23 Robert Bosch Gmbh Verfahren und Vorrichtung zum Ausgeben einer Warnung über einen Spurhalteassistenten für ein Fahrzeug
DE102017206485A1 (de) * 2017-04-18 2018-10-18 Robert Bosch Gmbh Vorrichtung und Verfahren zur Steuerung eines Fahrzeugs

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016081521A (ja) * 2014-10-20 2016-05-16 イマージョン コーポレーションImmersion Corporation 車両における継続的な注意を触覚フィードバックを用いて強化するシステム及び方法

Also Published As

Publication number Publication date
KR20210091796A (ko) 2021-07-22
US20210316660A1 (en) 2021-10-14
CN113165645A (zh) 2021-07-23
EP3883832A1 (de) 2021-09-29
DE102018219976A1 (de) 2020-05-28
WO2020104083A1 (de) 2020-05-28
US11345279B2 (en) 2022-05-31

Similar Documents

Publication Publication Date Title
JP2022507916A (ja) 車両の運転者に警告するための装置および方法
JP7144400B2 (ja) 車両用触覚通知システム
EP3324556B1 (en) Visual communication system for autonomous driving vehicles (adv)
US9694736B2 (en) Vehicle state indication system
JP5327321B2 (ja) 車両用周辺監視装置及び車両用周辺監視方法
JP6256213B2 (ja) 運転支援装置、及び運転支援システム
JP6639194B2 (ja) 情報表示装置
JP6412070B2 (ja) 運転支援装置及び運転支援方法
US8977420B2 (en) Vehicle procession control through a traffic intersection
US9868389B2 (en) Vehicle state indication system
US9878659B2 (en) Vehicle state indication system
CA3000335A1 (en) Vehicle state indication system
US20200074851A1 (en) Control device and control method
JP7059786B2 (ja) 車外報知装置
JP2016218996A (ja) 衝突回避支援装置、衝突回避支援方法
JP2019066915A (ja) 車両制御装置
JP2019003278A (ja) 車外報知装置
CN111090280A (zh) 使用智能目标的雷达对象分类和通信
CN211943273U (zh) 交叉路口驾驶辅助系统及汽车
JP7029689B2 (ja) 表示制御方法およびそれを利用した表示制御装置、車両、プログラム、表示制御システム
JP6787376B2 (ja) 運転支援方法
JP2018090006A (ja) 運転支援装置
US20230419836A1 (en) System and method for a vehicle proximity alert
JP2011076527A (ja) 車両の走行安全装置
KR20240019414A (ko) 운전자 보조 시스템 및 그 제어 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210721

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220805

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221104

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20221130