JP2018144686A - 搭乗者支援装置、方法及びプログラム - Google Patents
搭乗者支援装置、方法及びプログラム Download PDFInfo
- Publication number
- JP2018144686A JP2018144686A JP2017042693A JP2017042693A JP2018144686A JP 2018144686 A JP2018144686 A JP 2018144686A JP 2017042693 A JP2017042693 A JP 2017042693A JP 2017042693 A JP2017042693 A JP 2017042693A JP 2018144686 A JP2018144686 A JP 2018144686A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- passenger
- destination
- state
- door
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
-
- E—FIXED CONSTRUCTIONS
- E05—LOCKS; KEYS; WINDOW OR DOOR FITTINGS; SAFES
- E05B—LOCKS; ACCESSORIES THEREFOR; HANDCUFFS
- E05B77/00—Vehicle locks characterised by special functions or purposes
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60J—WINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
- B60J5/00—Doors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3407—Route searching; Route guidance specially adapted for specific applications
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Traffic Control Systems (AREA)
Abstract
【課題】車両に搭乗している搭乗者の支援を行えるようにする。
【解決手段】搭乗者支援装置は、車両が搭乗者の目的地に到着したか否かを判定する目的地到着判定部によって、車両が搭乗者の目的地へ到着したと判定されたとき、状態判定部により、車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、搭乗者が降車しても安全な状態にあるか否かを判定し、搭乗者が降車しても安全な状態にあると判定されたとき、ドアロック制御部により、車両の乗降車口のドアの施錠を解除する。
【選択図】図2
【解決手段】搭乗者支援装置は、車両が搭乗者の目的地に到着したか否かを判定する目的地到着判定部によって、車両が搭乗者の目的地へ到着したと判定されたとき、状態判定部により、車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、搭乗者が降車しても安全な状態にあるか否かを判定し、搭乗者が降車しても安全な状態にあると判定されたとき、ドアロック制御部により、車両の乗降車口のドアの施錠を解除する。
【選択図】図2
Description
この発明は、車両の搭乗者を支援するための搭乗者支援装置、方法及びプログラムに関する。
車両の運転操作を支援する自動運転制御装置を搭載した車両が開発され、販売が開始されている。
このような自動運転制御装置を搭載した車両において、運転者を支援する支援装置が各種提案されている。例えば、特開2014−044707号公報(以下、特許文献1と記す。)は、運転者の健常性を判定し、運転者の健常性が低下している場合、その低下の度合いに応じて運転者を支援する運転者異常時支援装置を開示している。
また、例えば、特開2005−054487号公報(以下、特許文献2と記す。)のように、ユーザーが車両のドアを開けようとしたときに、他の車両が近づいていることに気が付かずにドアを開けてしまうことにより衝突事故が発生することを防止するキーレスエントリー装置が知られている。
前述のように、運転者を支援する運転者異常時支援装置は前記特許文献1などに開示されている。一方、自動運転制御装置を搭載した車両に乗車するのは、運転者だけではなく、運転を行わない同乗者も含む。よって、運転者に対する支援だけでなく、運転者と同乗者とを含めた全ての車両搭乗者に対して各種の支援を行う搭乗者支援装置も求められる。
また、前記特許文献2では、ユーザーが車両に乗って運転する直前にドアを開けてしまい、衝突事故が起こることを防ぐ技術は記載されているが、車両が目的地に着いた後に車両搭乗者が車両のドアを開けるときに衝突事故が起こることを防ぐ技術は開示されていない。
この発明は、車両が目的地に到着した後に、車両に搭乗している搭乗者を支援することが可能な搭乗者支援装置、方法及びプログラムを提供しようとするものである。
上記課題を解決するため、この発明の第1の態様は、車両に搭乗した搭乗者を支援する搭乗者支援装置であって、前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定部と、前記目的地到着判定部によって前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定部と、前記状態判定部により前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御部と、を備える。
この発明の第2の態様に係る搭乗者支援装置は、第1の態様に係る搭乗者支援装置において、前記状態判定部は、前記周囲状態検出センサのセンシング結果に基づいて、前記乗降車口近辺に存在する移動物体が前記ドアに対して接近してきているのか否かを判定し、その判定結果により前記搭乗者が降車しても安全な状態にあるか否かを判定する。
この発明の第3の態様に係る搭乗者支援装置は、第1又は第2の態様に係る搭乗者支援装置において、前記搭乗者の前記目的地を記憶する目的地記憶部をさらに具備し、前記目的地到着判定部は、前記車両の現在位置を検出する現在位置検出センサのセンシング結果に基づいて、前記車両が前記目的地記憶部に記憶された前記目的地に到着したか否かを判定する。
この発明の第4の態様に係る搭乗者支援装置は、第1又は第2の態様に係る搭乗者支援装置において、前記車両が、自動運転制御装置を有し、前記自動運転制御装置の制御により目的地まで自動運転を行う自動運転車両であるとき、前記目的地到着判定部は、前記自動運転制御装置からの目的地到着信号の有無により、目的地へ到着したか否かを判定する。
この発明の第5の態様は、車両に搭乗した搭乗者を支援するための装置が実行する搭乗者支援方法であって、前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定ステップと、前記目的地到着判定ステップにおいて前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定ステップと、前記状態判定ステップにおいて前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御ステップと、を備えている。
この発明の第6の態様は、第1乃至第4の態様に係る搭乗者支援装置が備える各部の機能をコンピュータに実行させるプログラムである。
この発明の第1及び第5の態様によれば、車両が搭乗者の目的地に到着したか否かを判定し、前記車両が前記目的地へ到着したならば、車両の周囲の状態を検出する。そして、搭乗者が降車しても安全な状態にあれば、前記車両の乗降車口のドアの施錠を解除して、搭乗者を降車可能な状態にする。よって、例えば後方から接近してきた自転車などが通り過ぎるまでドアを施錠したまま搭乗者が降車できないようにすることで、自転車などの接近に気がつかずに降車してしまった搭乗者が自転車など衝突することを防止でき、搭乗者の安全を支援することができる。また、搭乗者が不用意に開放したドアに自転車などが衝突することも防止できるので、自転車などの搭乗者の安全を図り得ることは勿論のこと、車両の搭乗者と自転車などの搭乗者との間のトラブル発生を未然に防止できる。
この発明の第2の態様によれば、移動物体がドアに対して接近してきているのか否かにより搭乗者が降車しても安全な状態にあるか否かを判定するので、自転車などの移動物体が接近してきているときドアを施錠したままにすることができる。
この発明の第3の態様によれば、事前に取得して記憶しておいた目的地と車両の現在位置とを比較することで、目的地に到着したか否かを容易に判別することができる。
この発明の第4の態様によれば、自動運転制御装置によって目的地へ到着した際、そのことを、現在位置検出センサを用いること無く知ることができるので、安価に構成できる。
この発明の第6の態様によれば、第1乃至第4の態様のいずれか一つに係る搭乗者支援装置が備える各部の機能がコンピュータによって実行される。
すなわち、この発明の各態様によれば、車両に搭乗している搭乗者を支援することが可能な搭乗者支援装置、方法及びプログラムを提供することができる。
以下、図面を参照してこの発明に係わる一実施形態を説明する。
[一実施形態]
(構成)
図1は、この発明の一実施形態に係る搭乗者支援装置を備えた自動運転制御システムの全体構成を示す図である。この自動運転制御システムは、車両1に搭載される。なお、ここでは、車両1として、運転者が存在しない完全自動運転車両を行うタクシーを例に説明する。
[一実施形態]
(構成)
図1は、この発明の一実施形態に係る搭乗者支援装置を備えた自動運転制御システムの全体構成を示す図である。この自動運転制御システムは、車両1に搭載される。なお、ここでは、車両1として、運転者が存在しない完全自動運転車両を行うタクシーを例に説明する。
車両1は、基本設備として、動力源及び変速装置を含むパワーユニット2と、操舵装置3と、を備えている。動力源としては、エンジン又はモータ、あるいはその両方が用いられる。
車両1は、運転者を必要としない自動運転モードで走行可能に構成されている。自動運転モードは、例えば、車両の走行する道路に沿って自動で車両1を走行させる運転状態を実現するモードであり、運転者が運転操作をすることなく、タクシーの乗客が指定した目的地に向かって自動的に車両を走行させる。なお、車両1は、必要により手動運転モードに切り替えて運転者の運転操作により走行できるように構成されていてもよい。
図1において、車両1はまた、自動運転モードによる運転制御を実行するための自動運転制御装置4を備えている。自動運転制御装置4は、GPS(Global Positioning System)受信機5、ジャイロセンサ6、及び車速センサ7からそれぞれセンシングデータを取得する。自動運転制御装置4は、図示しないナビゲーションシステムで生成される経路情報や、路車間通信により取得される交通情報、周辺の人や車両の位置と動きを監視する周辺モニタリングシステムにより得られる情報をもとに、ステアリング、アクセル及びブレーキを制御することで、車両1の走行を自動制御する。周辺モニタリングシステムは、例えば、車両周辺に存在する物体(車両や人物などの移動物体及び壁などの静止物体)との距離を測定して距離情報を自動運転制御装置4へ出力するレーダセンサ8と、車両周辺を撮像してその映像信号を自動運転制御装置4へ出力する周辺カメラ9と、を備えることができる。
自動運転制御には、例えば、自動操舵(操舵の自動運転)と自動速度調整(速度の自動運転)がある。自動操舵は、操舵装置3を自動で制御する運転状態である。自動操舵にはLKA(Lane Keeping Assist)が含まれる。LKAは、車両1が走行車線から逸脱しないように自動で操舵装置3を制御する。なお、自動操舵はLKAに限らない。自動速度調整は、車両1の速度を自動で制御する運転状態である。自動速度調整にはACC(Adaptive Cruise Control)が含まれる。ACCとは、例えば、車両1の前方に先行車が存在しない場合は予め設定された設定速度で車両1を定速走行させる定速制御を行い、車両1の前方に先行車が存在する場合には先行車との車間距離に応じて車両1の車速を調整する追従制御を行うものである。なお、自動速度調整は、ACCに限らず、CC(Cruise Control:定速制御)等も含まれる。
本実施形態の自動運転制御システムは、車両1の搭乗者を支援する搭乗者支援システム10を有している。搭乗者支援システム10は、この発明の一実施形態に係る搭乗者支援装置11と、この搭乗者支援装置11にそれぞれ接続された、案内出力装置12とドアロック装置13とを備えている。
案内出力装置12は、搭乗者支援装置11からの案内情報を出力する。案内出力装置12は、例えば、スピーカと表示器を有し、搭乗者支援装置11から出力された案内情報の音声信号をスピーカから出力すると共に、案内情報の表示信号を表示器に表示する。案内情報は、少なくとも、車両1が目的地に到達したことを告知する情報を含む。
また、この案内出力装置12は、完全自動運転を行うタクシーが備えるタクシーシステムの一部として、例えば、ナビゲーションシステムにおける画像表示機能やタッチ入力機能及び音声入出力機能と同等の機能を備えることで、搭乗者の操作によって目的地が入力され得るように構成されてもよい。案内出力装置12は、この入力された目的地の情報を搭乗者支援装置11へ出力することができる。
さらに、案内出力装置12は、タクシーシステムの一部として、例えば、クレジットカードやプリペイドカード、会員カード等から情報を読み取るカードリーダ機能を備え、搭乗者から運賃を徴収することが可能となっていてもよい。また、案内出力装置12は、運賃を現金により支払うための自動現金受取/釣り銭支払い機能を備えてもよい。
なお、案内出力装置12は、これらの構成の全てを備える必要は無く、少なくとも目的地に車両1が到着した際、その旨を搭乗者に告知可能であれば、どのような構成であっても構わない。
ドアロック装置13は、自動運転車両の各乗降車口のドアに取り付けられており、搭乗者支援装置11の制御により施錠又は施錠解除される。
搭乗者支援装置11は、搭乗者を支援するもので、以下のように構成される。図2はその機能構成を示すブロック図である。
搭乗者支援装置11は、入出力インタフェースユニット20と、制御ユニット40と、記憶ユニット60と、を備えている。
入出力インタフェースユニット20は、周辺カメラ9から出力された映像信号を受信してデジタルデータに変換して、制御ユニット40に入力する。入出力インタフェースユニット20はまた、GPS受信機5から車両1の現在位置を示す現在位置情報を受信して制御ユニット40に入力する。入出力インタフェースユニット20はさらに、案内出力装置12から出力された搭乗者の目的地情報を受信して制御ユニット40に入力する。
また、入出力インタフェースユニット20は、制御ユニット40から出力された案内情報を音声信号及び表示信号に変換して案内出力装置12へ出力する。さらに、入出力インタフェースユニット20は、制御ユニット40から出力されたドア制御情報をドア施錠/施錠解除信号に変換してドアロック装置13へ出力する。
さらに、入出力インタフェースユニット20は、自動運転制御装置4と制御ユニット40との間の情報の授受を行う。
記憶ユニット60は、記憶媒体として、例えばSSD(Solid State Drive)やHDD(Hard Disk Drive)等の随時書き込み及び読み出しが可能な不揮発性メモリを使用したものである。また、一部はRAMのような揮発性メモリを使用しても構わない。記憶ユニット60は、本実施形態を実施するために使用する記憶領域として、監視映像記憶部61、案内情報記憶部62、目的地記憶部63、及び、周辺状況記憶部64を備えている。ここで、監視映像記憶部61は、車両1の周辺の監視映像を記憶する。案内情報記憶部62は、案内情報を記憶している。目的地記憶部63は、目的地を記憶する。周辺状況記憶部64は、車両1の各乗降車口近辺の状況が搭乗者が降車しても安全な状態にあるか否かを記憶する。
制御ユニット40は、本実施形態を実施するために必要な制御機能として、映像取得部41、案内情報出力部42、目的地取得部43、目的地出力部44、自動運転判定部45、周辺状況判定部46、目的地到着判定部47、及び、ドアロック制御部48を備えている。なお、制御ユニット40を、コンピュータを構成するCPU(Central Processing Unit)及びプログラムメモリにより構成して、これらの制御機能はいずれもプログラムメモリに格納されたプログラムをCPUに実行させることにより実現されることもできる。
映像取得部41は、周辺カメラ9から車両1の周辺の監視映像を取得する機能を有している。映像取得部41は、この周辺カメラ9から出力された映像信号のデジタルデータ(周辺監視映像データ)を入出力インタフェースユニット20から取り込み、この取り込んだ周辺監視映像データを記憶ユニット60の監視映像記憶部61に記憶させる。
なお、周辺カメラ9又は入出力インタフェースユニット20において、映像信号を所定の符号化方式に応じて符号化するようにしてもよい。このようにすると、周辺監視映像データの情報量を減らして監視映像記憶部61の記憶容量を節約することが可能となる。
また、映像取得部41は、周辺カメラ9からの監視映像の全てを取得することは必要なく、車両1が停車しているとき、又は、車両1が目的地に到着してからのみ、取得すればよい。
案内情報出力部42は、案内情報記憶部62から予め記憶されている案内情報を読み込み、案内出力装置12へ出力する機能を有している。
目的地取得部43は、搭乗者である乗客の目的地を取得する機能を有している。目的地取得部43は、案内出力装置12により入力された目的地の情報を取り込み、その取り込んだ目的地の情報を記憶ユニット60の目的地記憶部63に記憶させる。
目的地出力部44は、乗客の目的地を自動運転制御装置4へ出力する機能を有している。目的地出力部44は、目的地記憶部63に記憶された目的地の情報を読み出して、自動運転制御装置4へ出力する。
自動運転判定部45は、自動運転制御装置4から出力された自動運転に関わる各種情報から、車両1が現在、走行しているのか、停車しているのか、目的地に到着したのか否か、などの自動運転状態を判定する機能を有している。この自動運転判定部45の判定結果に応じて、制御ユニット40は、本実施形態を実施するために、各部を機能させる。
周辺状況判定部46は、車両1の周辺の状況を判定し、乗客が降車しても安全な状態にあるか否かを判定する機能を有している。周辺状況判定部46は、監視映像記憶部61から周辺監視映像データを読み込み、車両1に搭乗している各乗客の乗降車口近辺の状況が、乗客が降車しても安全な状態にあるか否かを判定する。そして、周辺状況判定部46は、この判定結果を、周辺状況記憶部64に記憶させる。
例えば、周辺状況判定部46は、周辺監視映像データに基づいて、乗降車口から所定の距離に存在する移動物体、例えば自転車や人物がドアに対して接近してきているのか否かを判定し、その判定結果により、乗客が降車しても安全な状態にあるか否かを判定する。具体的には、周辺状況判定部46は、監視映像記憶部61から、現在時点の周辺監視映像データである第1の画像データと、現在時点よりも前の時点の周辺監視映像データである少なくとも一つの第2の画像データとを読み出し、それらに対してパターンマッチング等の既知の移動物体判定手法を実施することで、移動物体の存在と移動方向とを判別する。例えば、第1の画像データ中に占める各移動物体の大きさが少なくとも一つの第2の画像データ中に占める対応する移動物体の大きさよりも大きいとき、その移動物体の移動方向は、ドアに対して接近してきている方向であると判定することができる。
なお、乗降車口からの所定の距離は、経時的に取得した画像データ中に占める移動体の変化率、つまり移動物体の移動速度に応じて、変化させてもよい。すなわち、移動速度が速い移動物体ほど、所定の距離は遠くなる。
目的地到着判定部47は、車両1が乗客の目的地に到着したか否かを判定する機能を有している。目的地到着判定部47は、目的地記憶部63に記憶された目的地の情報を読み出して、これをGPS受信機5から供給される車両1の現在位置を示す現在位置情報と比較することで、目的地へ到着したかどうか判定する。
ドアロック制御部48は、ドアロック装置13を制御する機能を有している。ドアロック制御部48は、自動運転判定部45による自動運転の開始の判定により、あるいは、目的地出力部44による目的地情報の出力に応じて、ドアロック装置13にドアを施錠させる。即ち、ドアロック制御部48は、少なくとも搭乗者である乗客を乗車させた状態での自動運転による走行開始時には、ドアを施錠させる。また、ドアロック制御部48は、目的地到着判定部47によって車両1が乗客の目的地に到着したと判定されたとき、周辺状況記憶部64に記憶された周辺状況を読み出し、車両1の乗客が使用する乗降車口近辺の状況が、当該乗客が降車しても安全な状態であれば、ドアロック装置13にドアの施錠を解除させる。また、運賃が支払われるまで、シートベルトが解除できないようにシートベルトロック機構を備え、ドアロック制御部48がドアのロック制御と合わせてシートベルトのロック制御も行えるようにしてもよい。
(動作)
次に、前述したように構成された搭乗者支援装置11の動作を説明する。図3はその全体の搭乗者支援の手順と支援内容を示すフローチャートである。
次に、前述したように構成された搭乗者支援装置11の動作を説明する。図3はその全体の搭乗者支援の手順と支援内容を示すフローチャートである。
なお、このフローチャートは、搭乗者が搭乗したことに応じて、スタートする。それ以前の搭乗者を捕まえる機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であるので、ここでは説明を省略する。
(1)搭乗者乗車
搭乗者支援装置11は、搭乗者が乗車すると、まず、ステップS1において、制御ユニット40のドアロック制御部48によりドアロック装置13を制御して、ドアを施錠する。
搭乗者支援装置11は、搭乗者が乗車すると、まず、ステップS1において、制御ユニット40のドアロック制御部48によりドアロック装置13を制御して、ドアを施錠する。
(2)目的地への自動運転
その後、ステップS2において、搭乗者支援装置11は、搭乗者の目的地を取得する。例えば、制御ユニット40の目的地取得部43は、案内出力装置12から目的地の情報を取得して、その情報を記憶ユニット60の目的地記憶部63に記憶させる。この場合、例えば、案内出力装置12から乗客の目的地を問い合わせる案内情報を出力させ、案内出力装置12が有するマイクロフォンや表示器とタッチパネルによる目的地の入力を受けつけることで、目的地を取得することができる。
その後、ステップS2において、搭乗者支援装置11は、搭乗者の目的地を取得する。例えば、制御ユニット40の目的地取得部43は、案内出力装置12から目的地の情報を取得して、その情報を記憶ユニット60の目的地記憶部63に記憶させる。この場合、例えば、案内出力装置12から乗客の目的地を問い合わせる案内情報を出力させ、案内出力装置12が有するマイクロフォンや表示器とタッチパネルによる目的地の入力を受けつけることで、目的地を取得することができる。
なお、上記ステップS1におけるドアの施錠は、このステップS2の後に行ってもよい。
目的地が取得されたならば、ステップS3において、搭乗者支援装置11は、自動運転制御装置4に乗客の目的地へ自動運転走行を開始するよう指示する。例えば、制御ユニット40の目的地出力部44は、目的地記憶部63より目的地の情報を読み出して、自動運転制御装置4に出力する。自動運転制御装置4は、この出力された目的地の情報に従って、その目的地への自動運転を行う。
なお、この自動運転制御装置4の動作はこの実施形態に直接関係しないため、その説明は省略する。
その後、ステップS4において、搭乗者支援装置11は、目的地へ到着するのを待つ。例えば、制御ユニット40は、目的地到着判定部47により、例えばGPS受信機5で取得した車両1の現在位置情報と目的地記憶部63に記憶された目的地の情報とを比較し、両者が一致したか否かを判定する。両者が一致するまで、このステップを繰り返す。
そして、目的地に到着したならば、ステップS5において、搭乗者支援装置11は、目的地に到着したことを搭乗者に告知する。例えば、制御ユニット40の案内情報出力部42は、案内出力装置12から目的地へ到着した旨の案内情報を出力する。
この案内に応じて、乗客より運賃の支払いが行われるが、この運賃徴収機能は、完全自動運転を行うタクシーが備えるタクシーシステムの機能であるので、ここでは説明を省略する。
なお、ステップS2、ステップS3及びステップS5の動作は全て、タクシーシステムが実施するようにしてもよい。この場合、搭乗者支援装置11から、目的地取得部43及び目的地出力部44と目的地記憶部63とを省略することができる。
また、ステップS4の目的地へ到着したか否かの判定において、車両1の現在位置は、GPS受信機5からの現在位置情報に限らず、例えば、道路近傍に設置された設置位置情報送信装置からの設置位置情報を受信する設置位置情報受信機を車両1に搭載しておき、この設置位置情報受信機の受信結果を利用するようにしてもよい。このように、目的地到着判定部47は、GPS受信機5や設置位置情報受信機など、現在位置検出センサのセンシング結果である現在位置情報を用いて、目的地への到着を判定することができる。
あるいは、目的地到着判定部47は、自動運転制御装置4からの目的地到着信号の有無により、目的地へ到着したか否かを判定するようにしてもよい。
(3)ドアロック解除
この運賃支払いが終了したならば、搭乗者支援装置11は、乗客が降車しても安全な状態にあることを確認して、ドアの施錠を解除する。これは、例えば、次のようにして行われる。
この運賃支払いが終了したならば、搭乗者支援装置11は、乗客が降車しても安全な状態にあることを確認して、ドアの施錠を解除する。これは、例えば、次のようにして行われる。
例えば、制御ユニット40の周辺状況判定部46は、ステップS6において、監視映像記憶部61から周辺監視映像データを読み込み、ドア付近に自転車などの移動物体が近づいてきているか否かを判定する。そして、ドア付近に移動物体が近づいてきているならば、周辺状況判定部46は、乗客が降車しても安全な状態にはないと判定する。これに対して、ドア付近から移動物体が遠ざかりつつあるならば、周辺状況判定部46は、乗客が降車しても安全な状態であると判定する。周辺状況判定部46は、この判定結果を、周辺状況記憶部64に記憶させる。
その後、例えば、制御ユニット40のドアロック制御部48は、ステップS7において、周辺状況記憶部64に記憶された周辺状況判定部46の判定結果を読み出して、乗客が降車しても安全な状態であるか否かを確認し、安全な状態でなければ、ドアを施錠したまま維持する。
こうして、ステップS6とステップS7とが繰り返され、乗客が降車しても安全な状態となるまで待つ。
そして、ステップS7において、周辺状況記憶部64に記憶された周辺状況判定部46の判定結果が、乗客が降車しても安全な状態であるという結果となったことを確認したならば、ドアロック制御部48は、ステップS8において、ドアロック装置13を制御して、ドアの施錠を解除する。
(効果)
以上詳述したように、この発明の一実施形態では、自動運転モードにより完全自動運転で運行しているタクシーにおいて、乗客の目的地において乗客が降車しようとした際に、乗客が降車しても安全な状態であるか否かを確認した上で、ドアの施錠を解除する。よって、例えば後方から接近してきた自転車などが通り過ぎるまでドアを施錠したまま搭乗者が降車できないようにすることができ、自転車などの接近に気がつかずに降車してしまった搭乗者が自転車など衝突することを防止できるので、搭乗者の安全を支援することができる。
以上詳述したように、この発明の一実施形態では、自動運転モードにより完全自動運転で運行しているタクシーにおいて、乗客の目的地において乗客が降車しようとした際に、乗客が降車しても安全な状態であるか否かを確認した上で、ドアの施錠を解除する。よって、例えば後方から接近してきた自転車などが通り過ぎるまでドアを施錠したまま搭乗者が降車できないようにすることができ、自転車などの接近に気がつかずに降車してしまった搭乗者が自転車など衝突することを防止できるので、搭乗者の安全を支援することができる。
さらに、搭乗者が不用意に開放したドアに自転車などが衝突することも防止できるので、自転車などの搭乗者の安全を図り得ることは勿論のこと、車両の搭乗者と自転車などの搭乗者との間のトラブル発生を未然に防止できる。
また、この発明の一実施形態では、移動物体がドアに対して接近してきているのか否かによって搭乗者が降車しても安全な状態にあるか否かを判定するので、自転車などの移動物体が接近してきているときドアを施錠したままにすることができる。
さらに、この発明の一実施形態では、車両の周辺を撮像する周辺カメラ9によって取得した画像データより、既存の移動物体検出手法を利用して、移動物体の存在と移動方向とを判別するので、移動物体検出を安価に実現することができる。また、自動運転制御装置4による自動運転制御に用いられる周辺カメラ9を、搭乗者支援装置11においても利用できるので、搭乗者支援装置11の搭載にかかるコストを抑制することができる。
[他の実施形態]
周辺状況判定部46は、周辺カメラ9からの周辺監視映像データに加えて、あるいはそれに代えて、車両1の周辺に存在する物体との距離を測定するレーダセンサ8の距離測定結果を用いて、移動物体の存在と移動方向とを判別するようにしもてよい。このように、自動運転制御装置4による自動運転制御に用いられるレーダセンサ8を搭乗者支援装置11においても利用することで、搭乗者支援装置11の搭載にかかるコストを抑制することができる。
周辺状況判定部46は、周辺カメラ9からの周辺監視映像データに加えて、あるいはそれに代えて、車両1の周辺に存在する物体との距離を測定するレーダセンサ8の距離測定結果を用いて、移動物体の存在と移動方向とを判別するようにしもてよい。このように、自動運転制御装置4による自動運転制御に用いられるレーダセンサ8を搭乗者支援装置11においても利用することで、搭乗者支援装置11の搭載にかかるコストを抑制することができる。
また、車両1として、完全自動運転を行うタクシーを例に説明したが、自動運転の自家用車であっても同様に適用可能なことは勿論である。
また、車両1は、自動運転車両に限らず、手動運転モードと自動運転モードとを切り替え可能な車両であってもよい。この場合、支援対象者は、必要に応じて運転を行う運転者も含む。即ち、支援対象者は、運転者と乗客を含む全ての搭乗者である。
さらに、自動運転モードの無い通常車両においても、レーダセンサ8又は周辺カメラ9と搭乗者支援システム10とを搭載することで、搭乗者を支援可能となる。但し、搭乗者が運転者である場合、降車しようとするときにはパワーユニット2の動力源が停止されるので、動力源の停止後もある一定の時間の間は、レーダセンサ8/周辺カメラ9と搭乗者支援システム10とに動作電源が供給されるよう構成することが必要である。
また、ドアの施錠を解除した後、直ちに搭乗者が降車するとは限らないので、ドアの施錠の解除後も周辺状況を監視し、搭乗者がドアを開放する前に安全な状態でなくなった場合、ドアを再び施錠するようにしてもよい。
その他、車両の種類、自動運転制御装置の機能、搭乗者支援装置の搭乗者支援の手順と支援内容等についても、この発明の要旨を逸脱しない範囲で種々変形して実施可能である。
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られるものではない。
(付記1)
車両に搭乗した搭乗者を支援する搭乗者支援装置であって、ハードウェアプロセッサと、メモリとを有し、
前記ハードウェアプロセッサは、
前記車両が前記搭乗者の目的地に到着したか否かを判定し、
前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定し、その判定結果を前記メモリに記憶し、
前記メモリに記憶した前記判定結果により、前記搭乗者が降車しても安全な状態にあるとき、前記車両の乗降車口のドアの施錠を解除する、搭乗者支援装置。
(付記2)
車両に搭乗した搭乗者を支援する装置が実行する搭乗者支援方法であって、
ハードウェアプロセッサを用いて、前記車両が前記搭乗者の目的地に到着したか否かを判定し、
前記ハードウェアプロセッサを用いて、前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定し、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶した前記判定結果により、前記搭乗者が降車しても安全な状態にあるとき、前記車両の乗降車口のドアの施錠を解除する、搭乗者支援方法。
(付記1)
車両に搭乗した搭乗者を支援する搭乗者支援装置であって、ハードウェアプロセッサと、メモリとを有し、
前記ハードウェアプロセッサは、
前記車両が前記搭乗者の目的地に到着したか否かを判定し、
前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定し、その判定結果を前記メモリに記憶し、
前記メモリに記憶した前記判定結果により、前記搭乗者が降車しても安全な状態にあるとき、前記車両の乗降車口のドアの施錠を解除する、搭乗者支援装置。
(付記2)
車両に搭乗した搭乗者を支援する装置が実行する搭乗者支援方法であって、
ハードウェアプロセッサを用いて、前記車両が前記搭乗者の目的地に到着したか否かを判定し、
前記ハードウェアプロセッサを用いて、前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定し、その判定結果を前記メモリに記憶し、
前記ハードウェアプロセッサを用いて、前記メモリに記憶した前記判定結果により、前記搭乗者が降車しても安全な状態にあるとき、前記車両の乗降車口のドアの施錠を解除する、搭乗者支援方法。
1…車両、 2…パワーユニット、 3…操舵装置、 4…自動運転制御装置、 5…受信機、 6…ジャイロセンサ、 7…車速センサ、 8…レーダセンサ、 9…周辺カメラ、 10…搭乗者支援システム、 11…搭乗者支援装置、 12…案内出力装置、 13…ドアロック装置、 20…入出力インタフェースユニット、 40…制御ユニット、 41…映像取得部、 42…案内情報出力部、 43…目的地取得部、 44…目的地出力部、 45…自動運転判定部、 46…周辺状況判定部、 47…目的地到着判定部、 48…ドアロック制御部、 60…記憶ユニット、 61…監視映像記憶部、 62…案内情報記憶部、 63…目的地記憶部、 64…周辺状況記憶部。
Claims (6)
- 車両に搭乗した搭乗者を支援する搭乗者支援装置であって、
前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定部と、
前記目的地到着判定部によって前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定部と、
前記状態判定部により前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御部と、
を具備する搭乗者支援装置。 - 前記状態判定部は、前記周囲状態検出センサのセンシング結果に基づいて、前記乗降車口近辺に存在する移動物体が前記ドアに対して接近してきているのか否かを判定し、その判定結果により前記搭乗者が降車しても安全な状態にあるか否かを判定する、請求項1に記載の搭乗者支援装置。
- 前記搭乗者の前記目的地を記憶する目的地記憶部をさらに具備し、
前記目的地到着判定部は、前記車両の現在位置を検出する現在位置検出センサのセンシング結果に基づいて、前記車両が前記目的地記憶部に記憶された前記目的地に到着したか否かを判定する、請求項1又は2に記載の搭乗者支援装置。 - 前記車両が、自動運転制御装置を有し、前記自動運転制御装置の制御により目的地まで自動運転を行う自動運転車両であるとき、前記目的地到着判定部は、前記自動運転制御装置からの目的地到着信号の有無により、目的地へ到着したか否かを判定する、請求項1又は2に記載の搭乗者支援装置。
- 車両に搭乗した搭乗者を支援するための装置が実行する搭乗者支援方法であって、
前記車両が前記搭乗者の目的地に到着したか否かを判定する目的地到着判定ステップと、
前記目的地到着判定ステップにおいて前記車両が前記目的地へ到着したと判定されたとき、前記車両の周囲の状態を検出する周囲状態検出センサのセンシング結果に基づいて、前記搭乗者が降車しても安全な状態にあるか否かを判定する状態判定ステップと、
前記状態判定ステップにおいて前記搭乗者が降車しても安全な状態にあると判定されたとき、前記車両の乗降車口のドアの施錠を解除するドアロック制御ステップと、
を備えている搭乗者支援方法。 - 請求項1乃至4の何れか一つに記載の搭乗者支援装置が備える各部の機能をコンピュータに実行させる搭乗者支援プログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017042693A JP2018144686A (ja) | 2017-03-07 | 2017-03-07 | 搭乗者支援装置、方法及びプログラム |
US16/335,276 US20200018100A1 (en) | 2017-03-07 | 2017-07-20 | Occupant assisting apparatus, method, and program |
CN201780055827.4A CN109689439A (zh) | 2017-03-07 | 2017-07-20 | 搭乘者辅助装置、方法及程序 |
DE112017007207.7T DE112017007207T5 (de) | 2017-03-07 | 2017-07-20 | Insassenunterstützungsvorrichtung, Verfahren und Programm |
PCT/JP2017/026353 WO2018163459A1 (ja) | 2017-03-07 | 2017-07-20 | 搭乗者支援装置、方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017042693A JP2018144686A (ja) | 2017-03-07 | 2017-03-07 | 搭乗者支援装置、方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018144686A true JP2018144686A (ja) | 2018-09-20 |
JP2018144686A5 JP2018144686A5 (ja) | 2019-05-30 |
Family
ID=63448345
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017042693A Pending JP2018144686A (ja) | 2017-03-07 | 2017-03-07 | 搭乗者支援装置、方法及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200018100A1 (ja) |
JP (1) | JP2018144686A (ja) |
CN (1) | CN109689439A (ja) |
DE (1) | DE112017007207T5 (ja) |
WO (1) | WO2018163459A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020111226A (ja) * | 2019-01-15 | 2020-07-27 | トヨタ自動車株式会社 | 車両情報処理装置及び車両情報処理方法 |
EP3901398A4 (en) * | 2018-12-17 | 2022-01-19 | Nissan Motor Co., Ltd. | METHOD, DEVICE AND VEHICLE CONTROL SYSTEM |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10795356B2 (en) * | 2017-08-31 | 2020-10-06 | Uatc, Llc | Systems and methods for determining when to release control of an autonomous vehicle |
JP7077931B2 (ja) * | 2018-12-18 | 2022-05-31 | トヨタ自動車株式会社 | 車両の制御装置、制御方法及び制御プログラム |
US11001200B2 (en) * | 2019-05-30 | 2021-05-11 | Nissan North America, Inc. | Vehicle occupant warning system |
JP7188300B2 (ja) * | 2019-07-02 | 2022-12-13 | トヨタ自動車株式会社 | センサ取付構造 |
JP7276023B2 (ja) | 2019-09-06 | 2023-05-18 | トヨタ自動車株式会社 | 車両遠隔指示システム、及び自動運転車両 |
JP2023000353A (ja) * | 2021-06-17 | 2023-01-04 | トヨタ自動車株式会社 | 情報処理装置、プログラム及び情報処理方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5429446A (en) * | 1977-08-03 | 1979-03-05 | Nippon Denso Co Ltd | Method and apparatus for controlling door lock of car |
JP2005001643A (ja) * | 2003-04-14 | 2005-01-06 | Fujitsu Ten Ltd | 運転支援装置 |
JP2011105058A (ja) * | 2009-11-13 | 2011-06-02 | Aisin Seiki Co Ltd | 多機能カメラシステム |
JP2013216251A (ja) * | 2012-04-11 | 2013-10-24 | Mitsubishi Motors Corp | 周辺状況監視装置 |
JP2016099953A (ja) * | 2014-11-26 | 2016-05-30 | 株式会社デンソー | 車両自動運転システム |
WO2016194157A1 (ja) * | 2015-06-03 | 2016-12-08 | 日産自動車株式会社 | 車両制御装置及び車両制御方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4451096B2 (ja) | 2003-08-06 | 2010-04-14 | アルパイン株式会社 | キーレスエントリー装置及びシステム |
US20090177336A1 (en) * | 2008-01-07 | 2009-07-09 | Mcclellan Scott | System and Method for Triggering Vehicle Functions |
JP4656172B2 (ja) * | 2008-03-28 | 2011-03-23 | アイシン・エィ・ダブリュ株式会社 | ドアロック制御システム、ドアロック制御方法及びプログラム |
CN103879403B (zh) * | 2011-03-16 | 2017-01-11 | 丰田自动车株式会社 | 车辆远程操作装置 |
JP6212992B2 (ja) | 2012-08-01 | 2017-10-18 | 日産自動車株式会社 | 運転者異常時支援装置及び運転者異常時支援方法 |
JP6011445B2 (ja) * | 2012-12-27 | 2016-10-19 | 株式会社デンソー | 車両盗難通報システム |
US9248793B2 (en) * | 2013-04-19 | 2016-02-02 | GM Global Technology Operations LLC | Systems and methods for location based customization |
CN104931059B (zh) * | 2014-03-21 | 2018-09-11 | 比亚迪股份有限公司 | 车载救援导航系统和方法 |
CN104157131B (zh) * | 2014-07-31 | 2016-11-09 | 同济大学 | 一种磁导航无人驾驶公共交通系统 |
KR101646134B1 (ko) * | 2015-05-06 | 2016-08-05 | 현대자동차 주식회사 | 자율주행차량 및 그 제어 방법 |
CN105751999B (zh) * | 2016-03-31 | 2018-07-20 | 汪家琳 | 全智能全自动无人驾驶汽车 |
-
2017
- 2017-03-07 JP JP2017042693A patent/JP2018144686A/ja active Pending
- 2017-07-20 DE DE112017007207.7T patent/DE112017007207T5/de not_active Withdrawn
- 2017-07-20 US US16/335,276 patent/US20200018100A1/en not_active Abandoned
- 2017-07-20 WO PCT/JP2017/026353 patent/WO2018163459A1/ja active Application Filing
- 2017-07-20 CN CN201780055827.4A patent/CN109689439A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5429446A (en) * | 1977-08-03 | 1979-03-05 | Nippon Denso Co Ltd | Method and apparatus for controlling door lock of car |
JP2005001643A (ja) * | 2003-04-14 | 2005-01-06 | Fujitsu Ten Ltd | 運転支援装置 |
JP2011105058A (ja) * | 2009-11-13 | 2011-06-02 | Aisin Seiki Co Ltd | 多機能カメラシステム |
JP2013216251A (ja) * | 2012-04-11 | 2013-10-24 | Mitsubishi Motors Corp | 周辺状況監視装置 |
JP2016099953A (ja) * | 2014-11-26 | 2016-05-30 | 株式会社デンソー | 車両自動運転システム |
WO2016194157A1 (ja) * | 2015-06-03 | 2016-12-08 | 日産自動車株式会社 | 車両制御装置及び車両制御方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3901398A4 (en) * | 2018-12-17 | 2022-01-19 | Nissan Motor Co., Ltd. | METHOD, DEVICE AND VEHICLE CONTROL SYSTEM |
JP2020111226A (ja) * | 2019-01-15 | 2020-07-27 | トヨタ自動車株式会社 | 車両情報処理装置及び車両情報処理方法 |
JP7110996B2 (ja) | 2019-01-15 | 2022-08-02 | トヨタ自動車株式会社 | 車両情報処理装置及び車両情報処理方法 |
US11485322B2 (en) | 2019-01-15 | 2022-11-01 | Toyota Jidosha Kabushiki Kaisha | Vehicle information processing device and vehicle information processing method |
Also Published As
Publication number | Publication date |
---|---|
WO2018163459A1 (ja) | 2018-09-13 |
DE112017007207T5 (de) | 2019-12-12 |
US20200018100A1 (en) | 2020-01-16 |
CN109689439A (zh) | 2019-04-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2018163459A1 (ja) | 搭乗者支援装置、方法及びプログラム | |
CN109690609B (zh) | 乘客辅助装置、方法以及程序 | |
US10730556B2 (en) | Automated valet parking method and device | |
US10814865B2 (en) | Parking device | |
JP6579903B2 (ja) | 運転支援装置、車両、および車庫協調制御システム | |
JP6828825B2 (ja) | 駐車制御方法及び駐車制御装置 | |
CN105894810B (zh) | 用于监视在停车场上行驶的车辆的方法和设备 | |
EP2560150A1 (en) | Vehicle remote operation system and on-board device | |
JP2015200933A (ja) | 自律走行車両 | |
JP5408344B2 (ja) | 駐車支援装置 | |
JP2015176444A (ja) | 自律走行車両 | |
CN111009115A (zh) | 遗失物品递送辅助装置、遗失物品递送辅助系统、遗失物品递送辅助方法以及存储介质 | |
JP2014019390A (ja) | 緊急退避装置 | |
JP2016189074A (ja) | 通知装置、通知方法および通知プログラム | |
JP2007122472A (ja) | 運転支援システムおよびプログラム | |
US11700522B2 (en) | Vehicle that has automatic notification function | |
JP2018205085A (ja) | 運転支援装置、サーバ、および運転支援用プログラム | |
JP6747528B2 (ja) | 自律走行車両 | |
JP2017182347A (ja) | 車両用通信システム、車両周辺情報送信方法及び制御プログラム | |
JP2017047739A (ja) | 車両制御装置 | |
US20210304606A1 (en) | Accommodation area management device | |
WO2021065343A1 (ja) | 踏切制御システムおよび踏切制御方法 | |
CN113460082A (zh) | 规定区域管理装置 | |
JP2020177700A (ja) | 自律走行車両 | |
US10633026B2 (en) | Vehicle system and vehicle controller for controlling vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190312 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190412 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200324 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20200929 |