JP7124801B2 - 車両制御装置 - Google Patents

車両制御装置 Download PDF

Info

Publication number
JP7124801B2
JP7124801B2 JP2019131267A JP2019131267A JP7124801B2 JP 7124801 B2 JP7124801 B2 JP 7124801B2 JP 2019131267 A JP2019131267 A JP 2019131267A JP 2019131267 A JP2019131267 A JP 2019131267A JP 7124801 B2 JP7124801 B2 JP 7124801B2
Authority
JP
Japan
Prior art keywords
vehicle
information
unit
state
remote
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019131267A
Other languages
English (en)
Other versions
JP2021015561A (ja
Inventor
篤 花輪
靖規 中川
真人 松下
祐介 横田
智行 栗山
多恵 杉村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2019131267A priority Critical patent/JP7124801B2/ja
Priority to US16/884,732 priority patent/US11360473B2/en
Priority to CN202010646193.3A priority patent/CN112238869A/zh
Publication of JP2021015561A publication Critical patent/JP2021015561A/ja
Application granted granted Critical
Publication of JP7124801B2 publication Critical patent/JP7124801B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0055Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot with safety arrangements
    • G05D1/0061Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot with safety arrangements for transition from automatic pilot to manual pilot and vice versa
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0011Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement
    • G05D1/0027Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement involving a plurality of vehicles, e.g. fleet or convoy travelling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0059Estimation of the risk associated with autonomous or manual driving, e.g. situation too complex, sensor failure or driver incapacity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0011Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0011Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement
    • G05D1/0016Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot associated with a remote control arrangement characterised by the operator's input device
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0214Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas

Description

本発明は、自動運転及び遠隔運転が可能な車両制御装置に関する。
特許文献1には、車両の走行中において、ドライバの挙動が異常となり、それが所定の判定時間以上、継続された場合に、ドライバが車両運転に支障を来す異常状態になったと判定する技術が開示されている。
この特許文献1の車両では、ドライバが異常状態になったと判定された場合、減速、又は停止して、車両を路肩に退避させる。
特開2016-045714号公報
ところで、自動運転及び遠隔運転を可能とする車両では、ドライバが異常状態になったと判定された場合に、遠隔運転に切り替えて危険を回避することが可能となる。
本発明は、乗員の操作による手動運転が困難である異常状態になる前及び異常状態になった時の少なくとも一方の時に、遠隔運転者を確保することが可能な車両制御装置を提供することを目的とする。
請求項1に記載の車両制御装置は、車両の外部に配置され、かつ、遠隔操作者によって操作される操作装置から前記車両を操作させるための操作情報を受信する通信部と、前記車両の周辺の周辺情報を周辺情報検出部から取得する取得部と、前記車両の前記周辺情報に基づいて、前記車両の走行計画を生成する走行計画生成部と、前記走行計画生成部で生成された前記走行計画に基づく前記車両の走行である自動運転、前記通信部において受信された前記操作情報に基づく前記車両の走行である遠隔運転及び乗員の操作による手動運転を制御する走行制御部と、乗員の生体情報を取得する生体情報取得部と、前記生体情報取得部で取得した前記生体情報に基づいて前記手動運転中に乗員の操作による手動運転が困難になることが予測される異常予測状態であるか否か及び手動運転が困難である異常状態であるか否かを判定する状態判定部と、前記状態判定部で前記異常予測状態又は前記異常状態が判定された場合に、判定された状態を前記操作装置に通知する通知部と、前記通知に対して前記操作装置から前記遠隔操作者による操作が可能であることを示す操作可能情報を受け付け可能とする受付部と、を備え、前記走行制御部は、前記通知に対して前記受付部で前記操作可能情報が受け付けられる前に前記状態判定部で乗員が異常状態であることが判定された場合に、前記手動運転から前記自動運転に切り替える
請求項1に記載の車両制御装置では、自律した走行である自動運転と、操作装置による遠隔運転とを実行可能とされている。また、車両制御装置は、生体情報に基づいて乗員の手動運転が困難になることが予測される異常予測状態であること又は手動運転が困難である異常状態であることを判定した場合に、操作装置に対して判定された状態を通知する。また、車両制御装置は、当該通知に対して操作装置から遠隔操作者による車両の遠隔運転が可能であることを示す操作可能情報を受け付け可能とする。これにより、車両は、乗員が異常状態になる前、及び、異常状態になった時の少なくとも一方の時に遠隔操作者を確保することができる。
また、乗員が異常予測状態であること又は異常状態であることを知らせる通知を遠隔操作装置に行い、遠隔操作者を確保したことが確認される前に乗員が異常状態であると判定された場合、手動運転から自動運転に切り替える。これにより、乗員の異常時に即座に遠隔操作に切り替えることができない場合、替わりに自動運転に切り替えることで車両の走行を安全に継続させることができる。
請求項2に記載の車両制御装置は、請求項1に記載の構成において、前記走行制御部は、前記通知に対して前記受付部で前記操作可能情報が受け付けられた後、前記状態判定部の判定結果が異常予測状態である場合は自動運転を維持し、その後、前記状態判定部の判定結果が異常状態となった場合に、前記手動運転から前記遠隔運転に切り替える。
請求項2に記載の車両制御装置では、乗員が異常予測状態であること又は異常状態であることを知らせる通知を遠隔操作装置に行い、遠隔操作者を確保したことが確認された後に乗員が異常状態であると判定された場合、自動で手動運転から遠隔運転に切り替える。これにより、乗員の異常時において円滑に遠隔運転への切り替えを行うことができる。
請求項3に記載の車両制御装置は、請求項1に記載の構成において、前記走行制御部は、前記自動運転中に前記受付部で前記操作可能情報が受け付けられた場合に、前記自動運転から前記遠隔運転に切り替える。
請求項3に記載の車両制御装置では、乗員が異常状態であると判定されると、操作可能情報が受け付けられるまで自動運転で走行し、操作可能情報が受け付けられると自動運転から遠隔運転に切り替える。これにより、乗員の異常時に、車両の安全な走行を維持しつつ、円滑に遠隔操作へと切り替えることができる。
請求項4に記載の車両制御装置は、請求項1~請求項3の何れか1項に記載の構成において、更に、前記車両の付近を走行する他の車両から走行態様が危険であることを示す危険情報を受け付ける情報提供受付部を備え、前記状態判定部は、前記生体情報及び受け付けられた前記危険情報の少なくとも一方に基づいて前記異常予測状態であるか否かを判定し、前記通知部は、状態判定部で判定された状態を前記操作装置に通知する。
請求項4に記載の車両制御装置では、乗員の生体情報及び車両の付近を走行する他の車両から提供された危険情報の少なくとも一方に基づいて異常予測状態を判定し、操作装置に通知する。これにより、乗員の生体情報の他に、他の車両から提供される情報に基づいて異常予測状態を判定することができる。すなわち、異常予測状態の判定を多面的に行い、乗員が異常状態になる前に、遠隔運転者を確保することが可能となる。
本発明によれば、乗員が、乗員の操作による手動運転が困難である異常状態になる前及び異常状態になった時の少なくとも一方の時に、遠隔運転者を確保することができる。
第1の実施形態に係る車両制御システムの概略構成を示す図である。 第1の実施形態の車両のハードウェア構成を示すブロック図である。 第1の実施形態の車両制御装置の機能構成の例を示すブロック図である。 第1の実施形態の遠隔操作装置のハードウェア構成を示すブロック図である。 第1の実施形態の遠隔制御装置の機能構成の例を示すブロック図である。 第1の実施形態の状態通知処理の流れを説明するフローチャートである。 第1の実施形態の引継処理の流れを説明するフローチャートである。 第1の実施形態の引受処理の流れを説明するフローチャートである。
図1は、第1の実施形態に係る車両制御システム10の概略構成を示すブロック図である。
(概要)
図1に示されるように、第1の実施形態に係る車両制御システム10は、自動運転車両11と、操作装置としての遠隔操作装置16と、を含んで構成されている。本実施形態において、自動運転車両11は、車両としての自車両12と、他の車両としての他車両14と、を含んでいる。
本実施形態の自車両12及び他車両14は、それぞれ車両制御装置20を備え、遠隔操作装置16は遠隔制御装置40を備えている。そして、車両制御システム10において、自車両12の車両制御装置20、他車両14の車両制御装置20、遠隔操作装置16の遠隔制御装置40は、ネットワークN1を介して相互に接続されている。また、各車両制御装置20は、互いに車車間通信N2により直接通信が可能に構成されている。
なお、図1の車両制御システム10は、2台の自動運転車両11(自車両12、他車両14)、1台の遠隔操作装置16により構成されているが、台数はこれに限らない。車両制御システム10は、自動運転車両11を3台以上含んでいてもよいし、遠隔操作装置16をそれぞれ2台以上含んでいてもよい。
自車両12は、車両制御装置20によって予め生成された走行計画に基づいて自律走行を行う自動運転と、遠隔操作装置16におけるリモートドライバの操作に基づく遠隔運転と、自車両12の乗員(つまり、運転者)の操作に基づく手動運転と、を実行可能に構成されている。なお、他車両14も自車両12と同様に車両制御装置20により自動運転、遠隔運転及び手動運転を実行可能である。
(自動運転車両)
図2は、本実施形態の自動運転車両11に搭載される機器のハードウェア構成を示すブロック図である。なお、本実施形態の自動運転車両11は、自車両12及び他車両14において同様の構成を有するため、自車両12についてのみ説明する。自車両12は、上述した車両制御装置20の他、GPS(Global Positioning System)装置22と、外部センサ24と、内部センサ26と、入力装置28と、アクチュエータ30と、生体センサ32と、を含んでいる。
車両制御装置20は、CPU(Central Processing Unit)20A、ROM(Read Only Memory)20B、RAM(Random Access Memory)20C、ストレージ20D、通信I/F(Inter Face)20E及び入出力I/F20Fを含んで構成されている。CPU20A、ROM20B、RAM20C、ストレージ20D、通信I/F20E及び入出力I/F20Fは、バス20Gを介して相互に通信可能に接続されている。
CPU20Aは、中央演算処理ユニットであり、各種プログラムを実行したり、各部を制御したりする。すなわち、CPU20Aは、ROM20Bからプログラムを読み出し、RAM20Cを作業領域としてプログラムを実行する。本実施形態では、ROM20Bに実行プログラムが記憶されている。CPU20Aが実行プログラムを実行することで、車両制御装置20は、図3に示す位置取得部200、周辺情報取得部210、車両情報取得部220、走行計画生成部230、操作受付部240、走行制御部250、生体情報取得部260、状態判定部270、通知部280、情報提供部290、情報提供受付部300として機能する。
図2に示されるように、ROM20Bは、各種プログラム及び各種データを記憶している。RAM20Cは、作業領域として一時的にプログラム又はデータを記憶する。
記憶部としてのストレージ20Dは、HDD(Hard Disk Drive)又はSSD(Solid State Drive)により構成され、オペレーティングシステムを含む各種プログラム、及び各種データを記憶している。また、ストレージ20Dには、後述する異常状態及び異常予測状態に係る情報、並びに、生体情報、危険情報が対応付けられた状態で記憶されている。
通信部としての通信I/F20Eは、他の車両制御装置20、遠隔制御装置40及び図示しない情報サーバ等と通信すべく、ネットワークN1に接続するためのインタフェースを含む。当該インタフェースは、例えば、LTE(Long Term Evolution)、Wi-Fi(登録商標)等の通信規格が用いられる。また、通信I/F20Eは、車車間通信N2により、他の車両制御装置20と直接通信するための無線装置を含む。
本実施形態の通信I/F20Eは、ネットワークN1を介して、自車両12の外部の遠隔操作装置16に向けてカメラ24Aによる撮像画像を送信し、遠隔操作装置16から自車両12を操作させるための操作情報である遠隔操作情報を受信する。また、通信I/F20Eは、DSRC(Desicated Short Range Communications)等を利用した車車間通信N2により、他の車両である他車両14に対して後述する危険情報を送信する。なお、通信I/F20Eは、ネットワークN1を介して、外部の情報サーバから気象情報や地震情報、渋滞、事故、道路工事等の交通情報を受信してもよい。
入出力I/F20Fは、自車両12に搭載される各装置と通信するためのインタフェースである。本実施形態の車両制御装置20は、入出力I/F20Fを介してGPS装置22、外部センサ24、内部センサ26、入力装置28、アクチュエータ30及び生体センサ32が接続されている。なお、GPS装置22、外部センサ24、内部センサ26、入力装置28、アクチュエータ30及び生体センサ32は、バス20Gに対して直接接続されていてもよい。
GPS装置22は自車両12の現在位置を測定する装置である。GPS装置22は、GPS衛星からの信号を受信するアンテナ(図示省略)を含んでいる。
周辺情報検出部としての外部センサ24は、自車両12の周囲の周辺情報を検出するセンサ群である。外部センサ24は、所定範囲を撮像するカメラ24Aと、所定範囲に探査波を送信し、反射波を受信するミリ波レーダ24Bと、所定範囲をスキャンするライダ(Laser Imaging Detection and Ranging)24Cとを含む。
内部センサ26は、自車両12の走行状態を検出するセンサ群である。内部センサ26は、車速センサ、加速度センサ及びヨーレートセンサのうち少なくとも一つを含む。
入力装置28は自車両12に乗車している乗員が操作するためのスイッチ群である。入力装置28は、自車両12の操舵輪を操舵させるスイッチとしてのステアリングホイール28Aと、自車両12を加速させるスイッチとしてのアクセルペダル28Bと、自車両12を減速させるスイッチとしてのブレーキペダル28Cと、を含む。
アクチュエータ30は、自車両12の操舵輪を駆動させるステアリングホイールアクチュエータ、自車両12の加速を制御するアクセルアクチュエータ、自車両12の減速を制御するブレーキアクチュエータを含んでいる。
生体センサ32は、車両の乗員の後述する生体情報を推定するための情報を検出する各種センサを含んでいる。一例として、生体センサ32は、乗員の頭部を撮影する車載カメラ、乗員の体温を検出するサーモグラフィカメラ、車室内で発生する音を集音する集音マイク、着座乗員のシートに対する荷重を検出する体圧センサ、ウエビングの引き出し量を検出するウエビングセンサ、乗員の生命活動を検出する各種センサのうち少なくとも一つを含む。
図3は、車両制御装置20の機能構成の例を示すブロック図である。図3に示されるように、車両制御装置20は、位置取得部200、周辺情報取得部210、車両情報取得部220、走行計画生成部230、操作受付部240、走行制御部250、生体情報取得部260、状態判定部270、通知部280、情報提供部290、情報提供受付部300を有している。各機能構成は、CPU20AがROM20Bに記憶された実行プログラムを読み出し、これを実行することによって実現される。
位置取得部200は、自車両12の現在位置を取得する機能を有している。位置取得部200は、入出力I/F20Fを介してGPS装置22から位置情報を取得する。
取得部としての周辺情報取得部210は、自車両12の周辺の周辺情報を取得する機能を有している。周辺情報取得部210は、入出力I/F20Fを介して外部センサ24から自車両12の周辺情報を取得する。「周辺情報」には、自車両12の周囲の車両、歩行者に限らず、天候、明るさ、走行路の幅、障害物等が含まれる。
車両情報取得部220は、自車両12の車速、加速度、ヨーレート等の車両情報を取得する機能を有している。車両情報取得部220は、入出力I/F20Fを介して内部センサ26から自車両12の車両情報を取得する。
走行計画生成部230は、位置取得部200で取得された位置情報、周辺情報取得部210で取得された周辺情報、車両情報取得部220で取得された車両情報に基づいて、自車両12を走行させるための走行計画を生成する機能を有している。走行計画には、予め設定された目的地までに走行ルートのみならず、自車両12前方の障害物を回避するための進路、自車両12の速度等の情報を含む。
操作受付部240は、自車両12の乗員の操作に基づく手動運転が行われる場合に、各入力装置28から出力された信号を受け付ける機能を有している。操作受付部240は、各入力装置28から受け付けた信号を基にアクチュエータ30を制御するための操作情報である車両操作情報を生成する。
走行制御部250は、走行計画生成部230で生成された走行計画に基づく自動運転、遠隔操作装置16から受信した遠隔操作情報に基づく遠隔運転、及び操作受付部240から受け付けた車両操作情報に基づく手動運転を制御する機能を有している。
生体情報取得部260は、乗員の生体情報を取得する機能を有している。生体情報取得部260は、入出力I/F20Fを介して生体センサ32及び入力装置28から乗員の生体情報を取得する。なお、生体センサ32から取得可能な生体情報は、乗員の視線方向、顔の位置、表情、姿勢、呼吸音、体温、心拍数、血圧である。また、入力装置28から取得可能な生体情報は、ステアリングホイール28Aの操舵力や、アクセルペダル28B及びブレーキペダル28Cに対するペダル踏力である。生体情報取得部260は、これらの生体情報のうち少なくとも一つを取得する。
状態判定部270は、生体情報取得部260で取得した生体情報に基づいて、乗員の操作による手動運転が困難である異常状態及び手動運転が困難になることが予測される異常予測状態を判定する。生体情報に基づいて異常状態及び異常予測状態を判定する場合、例えば、上述した各種生体情報のパラメータに二段階の閾値を設定することにより行われる。すなわち、状態判定部270は、各種生体情報について、異常予測状態の閾値以上、かつ、異常状態の閾値未満の検出値が所定の判定時間以上の間検出されると、乗員が困難予測状態である判定する。また、状態判定部270は、各種生体情報について、異常状態の閾値以上の検出値が所定の判定時間以上の間検出されると、乗員が異常状態である判定する。
また、状態判定部270は、他の車両から提供される危険情報に基づいて、乗員の異常予測状態を判定する。危険情報に基づいて異常予測状態を判定する場合、例えば、後述する危険情報のパラメータに閾値を設定し、闘値以上の検出値が検出された場合に、異常予測状態であると判定する。また、状態判定部270は、危険情報が提供された回数が所定の値を超えた場合に、異常予測状態であると判定してもよい。
また、周辺車両から受け付ける危険情報に基づいて異常状態及び異常予測状態を判定する場合、例えば、危険情報の受付回数や情報提供した車両の台数等に二段階の閾値を設定し、異常状態又は異常予測状態を判定する。
通知部280は、状態判定部270において異常状態又は異常予測状態が判定された場合に遠隔操作装置16に対してこれらの状態を通知する機能を有している。
情報提供部290は、車両制御装置20を搭載する他の車両に対して、当該他の車両の走行態様が危険であることを示す危険情報を提供する。具体的には、情報提供部290は、通信I/F20Eを介して他の車両に対して、危険情報を送信する。ここで、他の車両の走行態様が危険であるか否かは、外部センサ24から検出された周辺情報に基づいて判定される。他の車両の走行態様が危険である要因とは、例えば、他の車両において蛇行走行や車線逸脱、急加速、急減速、先行車両に対する異常接近がある。なお、走行態様が危険であるか否かは、乗員の目視で判断してもよい。この場合、乗員が操作部を操作して危険情報を送信してもよい。
情報提供受付部300は、通信I/F20Eを介して車両制御装置20を搭載する他の車両から送信された危険情報を受け付ける機能を有する。
(遠隔操作装置)
図4は、本実施形態の遠隔操作装置16に搭載される機器のハードウェア構成を示すブロック図である。遠隔操作装置16は、上述した遠隔制御装置40の他、表示装置42と、スピーカ44と、入力装置48と、を含んでいる。
遠隔制御装置40は、CPU40A、ROM40B、RAM40C、ストレージ40D、通信I/F40E及び入出力I/F40Fを含んで構成されている。CPU40A、ROM40B、RAM40C、ストレージ40D、通信I/F40E及び入出力I/F40Fは、バス40Gを介して相互に通信可能に接続されている。CPU40A、ROM40B、RAM40C、ストレージ40D、通信I/F40E及び入出力I/F40Fの機能は、上述した車両制御装置20のCPU20A、ROM20B、RAM20C、ストレージ20D、通信I/F20E及び入出力I/F20Fと同じである。
CPU40Aは、ROM40Bからプログラムを読み出し、RAM40Cを作業領域としてプログラムを実行する。本実施形態では、ROM40Bに、処理プログラムが記憶されている。CPU40Aが処理プログラムを実行することで、遠隔制御装置40は、図5に示す走行情報取得部400、操作情報生成部410、ドライバ決定部420及び操作切替部430として機能する。
本実施形態の遠隔制御装置40には、入出力I/F40Fを介して表示装置42、スピーカ44及び入力装置48が接続されている。なお、表示装置42、スピーカ44及び入力装置48は、バス40Gに対して直接接続されていてもよい。
表示装置42は、自車両12のカメラ24Aにより撮像された画像や、自車両12に係る各種情報を表示させるための液晶モニタである。
スピーカ44は、自車両12のカメラ24Aに付属するマイク(図示省略)により撮像画像と共に収録された音声を再生するものである。
入力装置48は遠隔操作装置16を利用する遠隔運転者としてのリモートドライバが操作するためのコントローラである。入力装置48は、自車両12の操舵輪を操舵させるスイッチとしてのステアリングホイール48Aと、自車両12を加速させるスイッチとしてのアクセルペダル48Bと、自車両12を減速させるスイッチとしてのブレーキペダル48Cと、を含む。なお、各入力装置48の形態はこの限りでない。例えば、ステアリングホイール48Aに替えてレバースイッチを設けてもよい。また例えば、アクセルペダル48Bやブレーキペダル48Cのペダルスイッチに替えて、押しボタンスイッチやレバースイッチを設けてもよい。
図5は、遠隔制御装置40の機能構成の例を示すブロック図である。図5に示されるように、遠隔制御装置40は、走行情報取得部400、操作情報生成部410、ドライバ決定部420及び操作切替部430、状態取得部440を有している。
走行情報取得部400は、車両制御装置20から送信されたカメラ24Aの撮像画像及び音声、並びに車速等の車両情報を取得する機能を有している。取得された撮像画像や車両情報は表示装置42に表示され、音声情報はスピーカ44から出力される。
操作情報生成部410は、リモートドライバの操作に基づく遠隔運転が行われる場合に、各入力装置48から出力された信号を受け付ける機能を有している。また、操作情報生成部410は、各入力装置48から受け付けた信号を基に車両制御装置20に送信する遠隔操作情報を生成する。
ドライバ決定部420は、遠隔操作装置16を操作するリモートドライバを決定する機能を有している。例えば、リモートドライバが複数人いる場合、一のリモートドライバを、操作を行うリモートドライバとして決定する。
操作切替部430は、車両制御装置20に対し、遠隔運転への切り替えを実行する機能を有している。遠隔操作装置16では、遠隔運転を行うリモートドライバが図示しない操作部を操作した場合、車両制御装置20に向けて、操作可能情報としての切替準備信号が出力される。例えば、自車両12の車両制御装置20から遠隔運転への切り替えに係る情報を既に受信している場合、操作切替部430は切替準備信号を車両制御装置20向けて出力することにより、自車両12では自動運転又は手動運転から遠隔運転への切り替えが行われる。また例えば、操作切替部430が切替準備信号を先に車両制御装置20に送信した場合、車両制御装置20から遠隔運転への切り替えに係る情報を受信した段階で、自車両12では自動運転又は手動運転から遠隔運転への切り替えが行われる。
状態取得部440は、通信I/F40Eを介して車両制御装置20から送信された乗員の状態に関する情報を取得する機能を有する。具体的には、乗員が異常状態である情報及び乗員が異常予測状態である情報を取得する。
(制御の流れ)
本実施形態の車両制御装置20では、状態通知処理が実行され、遠隔操作装置16に対して自車両12の乗員の異常状態及び異常予測状態を通知する。以下、状態通知処理の流れを図6のフローチャートで説明する。
図6のステップS100において、CPU20Aは、入力装置28及び生体センサ32から生体情報を取得する。また、ステップS101において、CPU20Aは、車車間通信N2を介して他車両14の車両制御装置20との交信を試みる。そして、CPU20Aは、他車両14の車両制御装置20から危険情報が送信された場合、当該危険情報を取得する。
ステップS102において、CPU20Aは、取得した生体情報及び危険情報に基づいて、乗員の状態を判定する。具体的には、乗員が、乗員による手動運転が可能なことを示す正常状態、上記異常状態、上記異常予測状態のうち、いずれに該当する状態であるかの判定を行う。
ステップS103において、CPU20Aは、乗員が異常状態又は異常予測状態であると判定した場合、ステップS104に進む。一方、CPU20Aが異常状態又は異常予測状態ではないと判定した場合、ステップS100に戻る。
ステップS104において、CPU20Aは、判定された乗員の状態を遠隔操作装置16に対して通知し、ステップS100に戻って処理を繰り返す。
また、本実施形態の車両制御装置20では、手動運転中において、乗員が異常状態又は異常予測状態であると判定された場合に、遠隔操作装置16のリモートドライバに操作を引き継ぐ引継処理が実行される。以下、引継処理の流れを図7のフローチャートで説明する。
図7のステップS110において、CPU20Aは、生体情報及び危険情報に基づいて判定された乗員の状態を取得する。
ステップS111において、CPU20Aは、遠隔操作装置16からリモートドライバによる操作が可能であることを示す操作可能情報が受け付けられたか否かを判定する。CPU20Aは、操作可能情報が受け付けられていると判定した場合、ステップS112に進む。一方、CPU20Aは、操作可能情報が受け付けられていないと判定した場合、ステップS114に進む。
ステップS112において、CPU20Aは、生体情報及び危険情報に基づいて、乗員が異常状態であるか否かの判定を行う。CPU20Aは、異常状態であると判定した場合、ステップS113に進む。一方、異常状態ではないと判定した場合、ステップS110に戻る。
ステップS113において、CPU20Aは、手動運転から遠隔運転に切り替える切替処理を実行する。また、CPU20Aは、リモートドライバに対して遠隔運転が開始されたことを通知して処理を終了する。
一方、ステップS111でリモートドライバから操作可能情報が受け付けられていないと判定され、ステップS114に進んだ場合、CPU20Aは、生体情報及び危険情報に基づいて、乗員が異常状態であるか否かの判定を行う。CPU20Aは、異常状態であると判定した場合、ステップS115に進む。一方、異常状態ではないと判定した場合、ステップS111に戻る。
ステップS115において、CPU20Aは、手動運転から自動運転に切り替える切替処理を実行する。つまり、リモートドライバを確保する前に乗員が異常状態であると判断された場合、自動運転を行うことで自車両12を継続して走行させる。
ステップS116において、CPU20Aは、リモートドライバから操作可能情報が受け付けられたか否かを判定する。操作可能情報が受け付けられたと判定された場合、ステップS117に進む。一方、操作可能状態が受け付けられていないと判定した場合、ステップS116の処理を繰り返す。この間、自車両12は自動運転が続行される。
ステップS117において、CPU20Aは、自動運転から遠隔運転に切り替える切替処理を実行する。また、CPU20Aは、リモートドライバに対して遠隔運転が開始されたことを通知して処理を終了する。
次に、遠隔操作装置16において実行される引受処理の流れを図8のフローチャートで説明する。
図7のステップS120において、CPU40Aは、車両制御装置20から通知された乗員の状態通知を取得する。
ステップS121において、CPU40Aは、取得した状態通知から、乗員が異常予測状態であるか否かを判定し、異常予測状態であると判定した場合、ステップS122に進む。一方、異常予測状態ではないと判定した場合、ステップS125に進む。
ステップS122においてCPU40Aは、複数のリモートドライバの中から運転の引継ぎが可能なリモートドライバを選定する。
ステップS123において、CPU40Aは、リモートドライバが決定したか否かの判定を行う。CPU40Aは、リモートドライバが決定したと判定した場合、ステップS124に進む。一方、リモートドライバを決定することができなかったと判定した場合、ステップS120に戻る。
ステップS124において、CPU40Aは、操作可能情報を車両制御装置20に対して通知し、ステップS120に戻る。
一方、ステップS121において乗員が異常予測状態ではないと判定された場合、CPU40Aは、ステップS125に進み、乗員が異常状態であるか否かを判定する。CPU40Aは、異常状態であると判定した場合、ステップS126に進む。一方、異常状態ではないと判定した場合、ステップS120に戻る。
ステップS126において、CPU40Aは、操作可能情報を車両制御装置20に対して通知したか否かの判定を行う。操作可能情報が通知されている場合、既にリモートドライバが決定していることになる。CPU40Aは、操作可能情報が通知されていると判定した場合、ステップS127に進む。一方、操作可能情報が通知されていないと判定した場合、ステップS128に進む。
ステップS127において、CPU40Aは、遠隔運転を開始し、処理を終了する。
一方、ステップS126において未だ操作可能情報が通知されていないと判断され、ステップS128に進んだ場合、CPU40Aは、複数のリモートドライバの中から運転の引継ぎが可能なリモートドライバを選定する。
ステップS129において、CPU40Aは、リモートドライバが決定したか否かの判定を行う。CPU40Aは、リモートドライバが決定したと判定した場合、ステップS130に進む。一方、リモートドライバを決定することができなかったと判定した場合、ステップS120に戻る。
(作用並びに効果)
以上、本実施形態によれば、乗員の生体情報に基づいて自車両12の手動運転が困難になることが予測される異常予測状態であること、又は、既に手動運転が困難である異常状態であることが判定された場合、遠隔操作装置16に対して判定された状態を通知する。また、車両制御装置20は、当該通知に対して遠隔操作装置16からリモートドライバによる車両の遠隔運転が可能であることを示す操作可能情報を受け付け可能とする。これにより、自車両12は、乗員が異常状態になったと判定される前にリモートドライバを確保し、異常状態が判定されると速やかに遠隔運転に切り替えることが可能となる。すなわち、自車両12は、乗員が異常状態になる前、及び、異常状態になった時の少なくとも一方の時にリモートドライバを確保することができる。
また、本実施形態の車両制御装置20では、乗員の異常予測状態又は異常状態を知らせる通知を遠隔操作装置16に行い、リモートドライバを確保したことが確認された後に乗員が異常状態であると判定された場合、自動で手動運転から遠隔運転に切り替える。これにより、乗員の異常時において円滑に遠隔運転への切り替えを行うことができる。
また、本実施形態の車両制御装置20では、乗員の異常予測状態又は異常状態を知らせる通知を遠隔操作装置16に行い、リモートドライバを確保したことが確認される前に乗員が異常状態であると判定された場合、手動運転から自動運転に切り替える。これにより、乗員の異常時に即座に遠隔運転に切り替えることが困難である場合に、替わりに自動運転に切り替えることで車両を安全に走行させることができる。
また、本実施形態によれば、上述した通り、リモートドライバを確保する前に自動運転に切り替えられた場合、その後、操作可能情報が受け付けられると自動運転から遠隔運転に切り替える。これにより、乗員の異常時に、自車両12の安全な走行を維持しつつ、円滑に遠隔操作へと切り替えることができる。
また、本実施形態によれば、乗員の生体情報及び自車両12の付近を走行する他車両14から提供された危険情報の少なくとも一方に基づいて異常予測状態であるか否かを判定し、遠隔操作装置16に通知する。これにより、乗員の生体情報の他に、他車両14から提供される情報に基づいて異常予測状態を判定することができる。すなわち、異常予測状態の判定を多面的に行い、乗員が異常状態になる前に、リモートドライバを確保することができる。
[補足説明]
上記実施形態では、異常状態の通知を受けたリモートドライバが自車両12の運転を引き取る、すなわち、遠隔操作装置16が操作権限を取得する構成としたが、これに限らない。異常状態が判定された場合に、車両制御装置20がリモートドライバに対して操作権限を付与するように構成してもよい。
上記実施形態の引継処理では、正常状態、異常状態、異常予測状態の判定が、車両制御装置20において実行されるが、自車両12とネットワークN1を介して相互に接続された外部の情報サーバにおいて実行されてもよい。
また、正常状態、異常状態、異常予測状態の判定に用いる生体情報の閾値は、車両制御装置20のストレージ20D又は、外部サーバに記憶された個々の乗員のパーソナルデータによってそれぞれ設定される構成としてもよい。さらに、当該パーソナルデータが、過去の乗車時に取得された生体情報の蓄積により形成される構成としてもよい。
なお、上記実施形態において、生体情報が検出される乗員は、運転席の乗員に限らず、助手席や、後席の乗員でもよい。
なお、上記実施形態でCPU20Aがソフトウェア(プログラム)を読み込んで実行した引継処理、CPU40Aがソフトウェア(プログラム)を読み込んで実行した引受処理を、CPU以外の各種のプロセッサが実行してもよい。この場合のプロセッサとしては、FPGA(Field-Programmable Gate Array)等の製造後に回路構成を変更可能なPLD(Programmable Logic Device)、及びASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が例示される。また、引継処理及び引受処理を、これらの各種のプロセッサのうちの1つで実行してもよいし、同種又は異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGA、及びCPUとFPGAとの組み合わせ等)で実行してもよい。また、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
また、上記実施形態において、プログラムはコンピュータが読み取り可能な非一時的記録媒体に予め記憶(インストール)されている態様で説明した。例えば、自動運転車両11の車両制御装置20において実行プログラムは、ROM20Bに予め記憶されている。また、遠隔操作装置16の遠隔制御装置40において処理プログラムは、ROM40Bに予め記憶されている。しかしこれに限らず、各プログラムは、CD-ROM(Compact Disc Read Only Memory)、DVD-ROM(Digital Versatile Disc Read Only Memory)、及びUSB(Universal Serial Bus)メモリ等の非一時的記録媒体に記録された形態で提供されてもよい。また、各プログラムは、ネットワークを介して外部装置からダウンロードされる形態としてもよい。
上記実施形態で説明した処理の流れも、一例であり、主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。
10 車両制御システム
12 自車両(車両)
14 他車両(他の車両)
16 遠隔操作装置(操作装置)
20 車両制御装置
20E 通信I/F(通信部)
24 外部センサ(周辺情報検出部)
210 周辺情報取得部(取得部)
230 走行計画生成部
250 走行制御部
260 生体情報取得部
270 状態判定部
280 通知部
290 情報提供部
300 情報提供受付部

Claims (4)

  1. 車両の外部に配置され、かつ、遠隔操作者によって操作される操作装置から前記車両を操作させるための操作情報を受信する通信部と、
    前記車両の周辺の周辺情報を周辺情報検出部から取得する取得部と、
    前記車両の前記周辺情報に基づいて、前記車両の走行計画を生成する走行計画生成部と、
    前記走行計画生成部で生成された前記走行計画に基づく前記車両の走行である自動運転、前記通信部において受信された前記操作情報に基づく前記車両の走行である遠隔運転及び乗員の操作による手動運転を制御する走行制御部と、
    乗員の生体情報を取得する生体情報取得部と、
    前記生体情報取得部で取得した前記生体情報に基づいて前記手動運転中に乗員の操作による手動運転が困難になることが予測される異常予測状態であるか否か及び手動運転が困難である異常状態であるか否かを判定する状態判定部と、
    前記状態判定部で前記異常予測状態又は前記異常状態が判定された場合に、判定された状態を前記操作装置に通知する通知部と、
    前記通知に対して前記操作装置から前記遠隔操作者による操作が可能であることを示す操作可能情報を受け付け可能とする受付部と、を備え、
    前記走行制御部は、前記通知に対して前記受付部で前記操作可能情報が受け付けられる前に前記状態判定部で乗員が異常状態であることが判定された場合に、前記手動運転から前記自動運転に切り替える、車両制御装置。
  2. 前記走行制御部は、前記通知に対して前記受付部で前記操作可能情報が受け付けられた後、前記状態判定部の判定結果が異常予測状態である場合は自動運転を維持し、その後、前記状態判定部の判定結果が異常状態となった場合に、前記手動運転から前記遠隔運転に切り替える、
    請求項1に記載の車両制御装置。
  3. 前記走行制御部は、前記自動運転中に前記受付部で前記操作可能情報が受け付けられた場合に、前記自動運転から前記遠隔運転に切り替える、
    請求項1に記載の車両制御装置。
  4. 更に、前記車両の付近を走行する他車両から前記車両の走行態様が危険であることを示す危険情報を受け付ける情報提供受付部を備え、
    前記状態判定部は、前記生体情報及び受け付けられた前記危険情報の少なくとも一方に基づいて前記異常予測状態であるか否かを判定し、前記通知部は、状態判定部で判定された状態を前記操作装置に通知する、
    請求項1~請求項3の何れか1項に記載の車両制御装置。
JP2019131267A 2019-07-16 2019-07-16 車両制御装置 Active JP7124801B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019131267A JP7124801B2 (ja) 2019-07-16 2019-07-16 車両制御装置
US16/884,732 US11360473B2 (en) 2019-07-16 2020-05-27 Vehicle controller device
CN202010646193.3A CN112238869A (zh) 2019-07-16 2020-07-07 车辆控制装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019131267A JP7124801B2 (ja) 2019-07-16 2019-07-16 車両制御装置

Publications (2)

Publication Number Publication Date
JP2021015561A JP2021015561A (ja) 2021-02-12
JP7124801B2 true JP7124801B2 (ja) 2022-08-24

Family

ID=74170586

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019131267A Active JP7124801B2 (ja) 2019-07-16 2019-07-16 車両制御装置

Country Status (3)

Country Link
US (1) US11360473B2 (ja)
JP (1) JP7124801B2 (ja)
CN (1) CN112238869A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115410374A (zh) * 2022-11-01 2022-11-29 中国第一汽车股份有限公司 一种远程控制自动驾驶车辆管理系统及管理方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006301963A (ja) 2005-04-20 2006-11-02 Toyota Motor Corp 遠隔操作システム
JP2018062223A (ja) 2016-10-12 2018-04-19 矢崎総業株式会社 車両システム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016045714A (ja) 2014-08-22 2016-04-04 株式会社デンソー 車載制御装置
CN106846901B (zh) * 2015-12-03 2019-07-05 财团法人资讯工业策进会 回避异常车辆的系统与方法
JP6662080B2 (ja) * 2016-02-16 2020-03-11 株式会社デンソー ドライバ状態判定装置
JP6520974B2 (ja) * 2017-03-14 2019-05-29 オムロン株式会社 運転切り替え判定装置、及び運転切り替え判定のためのプログラム
KR20190048085A (ko) * 2017-10-30 2019-05-09 한국철도기술연구원 차량 간 통신을 이용한 자율주행차량 제어 장치 및 그 방법
CN207924505U (zh) * 2017-12-13 2018-09-28 多伦科技股份有限公司 一种机器人智能自动驾驶装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006301963A (ja) 2005-04-20 2006-11-02 Toyota Motor Corp 遠隔操作システム
JP2018062223A (ja) 2016-10-12 2018-04-19 矢崎総業株式会社 車両システム

Also Published As

Publication number Publication date
US11360473B2 (en) 2022-06-14
CN112238869A (zh) 2021-01-19
US20210018913A1 (en) 2021-01-21
JP2021015561A (ja) 2021-02-12

Similar Documents

Publication Publication Date Title
EP3378722B1 (en) Drive assistance device and drive assistance method, and moving body
JP7200862B2 (ja) 車両制御装置及び車両制御システム
EP3621310A1 (en) Video transmitting device, video transmitting method, and program
JP2023168360A (ja) 車両停止制御装置及び車両停止制御方法
CN112238866A (zh) 车辆控制装置以及车辆控制系统
JP7124801B2 (ja) 車両制御装置
JP7172892B2 (ja) 車両制御装置及び車両制御システム
US11565724B2 (en) Operation device and vehicle control system
CN112660041B (zh) 车辆以及远程操作系统
JP7314858B2 (ja) 車両用制御システム
JP7310424B2 (ja) 車両走行システム
JP7188322B2 (ja) 車両走行システム
JP2021060764A (ja) 運転制御装置
JP7099412B2 (ja) 車両制御装置及び車両制御システム
JP7163880B2 (ja) 誘導制御装置、誘導システム、および誘導制御プログラム
JP7221835B2 (ja) 車両及び遠隔操作システム
US11505214B2 (en) Driving operation handover system and vehicle
JP7221834B2 (ja) 車両及び遠隔操作システム
CN112238868B (zh) 车辆控制装置以及车辆控制系统
JP2021068118A (ja) 遠隔運転システム
JP2021068984A (ja) 車両遠隔操作システム
CN112379665A (zh) 紧急车辆行驶系统、服务器装置以及记录介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210719

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220420

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220610

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220712

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220725

R151 Written notification of patent or utility model registration

Ref document number: 7124801

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151