JP7467384B2 - 車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラム - Google Patents
車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラム Download PDFInfo
- Publication number
- JP7467384B2 JP7467384B2 JP2021056497A JP2021056497A JP7467384B2 JP 7467384 B2 JP7467384 B2 JP 7467384B2 JP 2021056497 A JP2021056497 A JP 2021056497A JP 2021056497 A JP2021056497 A JP 2021056497A JP 7467384 B2 JP7467384 B2 JP 7467384B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- remote
- driving
- unit
- transmission method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007726 management method Methods 0.000 title claims description 104
- 238000004590 computer program Methods 0.000 title claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 130
- 238000000034 method Methods 0.000 claims description 101
- 238000004891 communication Methods 0.000 claims description 86
- 238000012544 monitoring process Methods 0.000 claims description 49
- 238000012545 processing Methods 0.000 description 87
- 238000006243 chemical reaction Methods 0.000 description 22
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
- Telephonic Communication Services (AREA)
Description
この技術によれば、遠隔運転時にネットワーク品質の揺らぎにより映像に乱れが生じる場合に、安全のため、制御速度の調整を自動で行うことが可能である。
仮に遠隔運転を行う車両に搭載されたカメラが取得した映像がピアツーピア(P2P: Peer to Peer)で送信される場合には、遅延を低減できる。しかし、P2Pのネットワーク構成は、映像の送信先が一つの地点に限定されるため、遠隔運転を行わない車両、つまり自動運転を行う車両を多地点から監視を行う用途には不向きである。
従来技術では、通信品質が低下した結果として映像の乱れが扱われている。しかし、通信品質の改善を見込んだネットワークの構成の変更や、他の車両の通信を考慮したリソース管理は検討されていない。
本発明の目的は、遠隔運転と自動運転とのいずれかに基づいて、車両から映像を送信できる車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラムを提供することにある。
(2)本発明の一態様は、上記(1)に記載の車両遠隔管理システムにおいて、前記設定する手段は、自動運転である車両の伝送方式よりも、遠隔運転である車両の伝送方式を低遅延のものに設定する。
(3)本発明の一態様は、上記(1)又は上記(2)に記載の車両遠隔管理システムにおいて、前記設定する手段は、前記車両が自動運転から遠隔運転に切り替えられる場合に、前記伝送方式を設定する。
(4)本発明の一態様は、上記(1)から上記(3)のいずれか一項に記載の車両遠隔管理システムにおいて、前記設定する手段は、通信リソースに基づいて前記伝送方式を設定する。
(5)本発明の一態様は、上記(1)から上記(4)のいずれか一項に記載の車両遠隔管理システムにおいて、前記設定する手段は、複数の伝送方式のうち、前記車両が遠隔運転である場合に前記遠隔運転システムにピアツーピア接続を行う。
なお、実施形態を説明するための全図において、同一の機能を有するものは同一符号を用い、繰り返しの説明は省略する。
また、本願でいう「XXに基づいて」とは、「少なくともXXに基づく」ことを意味し、XXに加えて別の要素に基づく場合も含む。また、「XXに基づいて」とは、XXを直接に用いる場合に限定されず、XXに対して演算や加工が行われたものに基づく場合も含む。「XX」は、任意の要素(例えば、任意の情報)である。
(車両遠隔管理システム)
図1は、本発明の一実施形態に係る車両遠隔管理システムの構成例を示す図である。図1に示される車両遠隔管理システム1は、車両10-1から車両10-n(nは、n>0の整数)と、運用管理サーバ100と、映像変換サーバ200と、遠隔運転システム300と、遠隔監視システム400とを備える。
運用管理サーバ100と車両10-1から車両10-nと遠隔運転システム300と、車両10-1から車両10-nと映像変換サーバ200と、映像変換サーバ200と遠隔監視システム400とは、ネットワークNWを介して通信する。ネットワークNWの一例は、モバイルネットワークである。ネットワークNWに、例えば、インターネット、WAN(Wide Area Network)、LAN(Local Area Network)、プロバイダ装置、無線基地局などが含まれてもよい。
車両10-1から車両10-nの各々は、カメラを搭載している。車両遠隔管理システムでは、遠隔運転に加え、自動運転の場合でもカメラが撮像した撮像画像の監視が行われてもよい。
運用管理サーバ100は、設定した伝送方式で車両10-1から車両10-nの各々に撮像画像を送信させる制御信号を作成する。運用管理サーバ100は、作成した制御信号を送信する。車両10-1から車両10-nの各々は、運用管理サーバ100が送信した制御信号を受信する。車両10-1から車両10-nのうち遠隔運転を行う車両は、受信した制御信号に基づいて、遠隔運転システム300に送信する撮像画像の伝送方式を第1伝送方式に設定する。車両10-1から車両10-nのうち自動転を行う車両は、受信した制御信号に基づいて、遠隔監視システム400に送信する撮像画像の伝送方式を第2伝送方式に設定する。
さらに、運用管理サーバ100は、車両10-1から車両10-nのうちいずれかの車両を遠隔運転に切り替える場合に、遠隔運転を開始する車両へ、映像信号の送信先を切り替えることを要求するための映像送信先切替指示を作成する。運用管理サーバ100は、作成した映像送信先切替指示を送信する。遠隔運転を開始する車両は、運用管理サーバ100が送信した映像送信先切替指示を受信する。遠隔運転を開始する車両は、受信した映像送信先切替指示に基づいて、映像信号の送信先を遠隔運転システム300へ切り替える。
遠隔運転システム300は、遠隔運転を行う車両の運転手の操作に基づいて、制御信号を作成する。遠隔運転システム300は、作成した制御信号を、遠隔運転を行う車両へ送信する。
遠隔運転を行う車両は、遠隔運転システム300が送信した制御信号を受信する。遠隔運転を行う車両は、受信した制御信号に基づいて動作する。
遠隔運転を行う車両は、カメラが撮像することで取得した撮像画像を含む、映像信号を作成する。遠隔運転開始車両は、作成した映像信号を第1伝送方式で遠隔運転システム300へ送信する。
遠隔運転システム300は、遠隔運転を行う車両が送信した映像信号を受信する。遠隔運転システム300は、受信した映像信号に含まれる撮像画像を処理することによって表示する。
さらに、運用管理サーバ100は、車両10-1から車両10-nのうちいずれかの車両を自動運転に切り替える場合に、自動運転を開始する車両へ、映像信号の送信先を切り替えることを要求するための映像送信先切替指示を作成する。運用管理サーバ100は、作成した映像送信先切替指示を送信する。自動運転を開始する車両は、運用管理サーバ100が送信した映像送信先切替指示を受信する。自動運転を開始する車両は、受信した映像送信先切替指示に基づいて、映像信号の送信先を映像変換サーバ200へ切り替える。
自動運転を行う車両は、カメラが撮像することで取得した撮像画像を含む、映像信号を作成する。自動運転開始車両は、作成した映像信号を第2伝送方式で遠隔監視システム400へ送信する。
遠隔監視システム400は、自動運転を行う車両が送信した映像信号を受信する。遠隔監視システム400は、受信した映像信号に含まれる撮像画像を処理することによって表示する。
図2は、本実施形態に係る車両と運用管理サーバと映像変換サーバと遠隔運転システムと遠隔監視システムとの構成例を示す図である。
(車両10)
車両10は、車載機10aを搭載する。車載機10aは、通信部12と、作成部13と、処理部16と、カメラ18と、記憶部20とを備える。
通信部12は、受信機12-1と送信機12-2とを備える。受信機12-1と送信機12-2との各々は、通信モジュールによって実現される。受信機12-1と送信機12-2との各々は、ネットワークNWを介して外部の通信装置と通信する。受信機12-1と送信機12-2との各々は、例えば無線LAN、又はLTE(登録商標)などの無線通信方式で通信する。また、受信機12-1と送信機12-2との各々は、例えば有線LANなどの通信方式で通信してもよい。
受信機12-1は、運用管理サーバ100が送信した遠隔操作開始情報を受信する。受信機12-1は、運用管理サーバ100が送信した映像送信先切替指示を受信する。受信機12-1は、遠隔運転システム300が送信した制御信号を受信する。受信機12-1は、運用管理サーバ100が送信した自動運転開始情報を受信する。
送信機12-2は、第1伝送方式で作成部13が出力した映像信号を遠隔運転システム300へ送信する。送信機12-2は、第2伝送方式で作成部13が出力した映像信号を映像変換サーバ200へ送信する。
処理部16は、受信機12-1が受信した映像送信先切替指示を取得し、取得した映像送信先切替指示に基づいて、作成部13に映像の送信先を設定する。ここでは、一例として、遠隔運転システム300に映像の送信先が設定される場合について説明を続ける。処理部16は、映像送信先切替指示に含まれる映像パラメータを設定し、送信機12-2と遠隔運転システム300との間で、第1伝送方式で伝送するために接続する処理を行う。第2伝送方式と比較して、第1伝送方式は低遅延である。
このように構成することによって、自動運転を行う車両が送信する映像信号よりも、遠隔運転を行う車両が送信する映像信号を低遅延とすることができる。第1伝送方式の一例は、P2Pである。以下、第1伝送方式の一例として、P2Pを適用した場合について説明を続ける。ここで、P2Pを適用した場合、遠隔運転を行う車両は、映像信号の送信先として、遠隔運転システム300を直接指定することで、中継サーバなどの他のサーバを介することなく、遠隔運転システム300へ映像を伝送する。
作成部13は、カメラ18が取得した撮像画像を取得する。作成部13は、取得した撮像画像を含む、遠隔運転システム300を宛先とする映像信号を作成する。作成部13は、作成した映像信号を送信機12-2へ出力する。
処理部16は、受信機12-1が受信した制御信号を取得し、取得した制御信号を車両10に出力する。車両10は、処理部16が出力した制御信号を取得し、取得した制御信号に基づいて動作する。
処理部16は、受信機12-1が受信した映像送信先切替指示を取得し、取得した映像送信先切替指示に基づいて、作成部13に映像の送信先を設定する。ここでは、一例として、映像変換サーバ200を経由して遠隔監視システム400に映像の送信先が設定される場合について説明を続ける。処理部16は、映像送信先切替指示に含まれる映像パラメータを設定し、送信機12-2と遠隔監視システム400との間で、第2伝送方式で伝送するために接続する処理を行う。
作成部13は、カメラ18が取得した撮像画像を取得する。作成部13は、取得した撮像画像を含む、映像変換サーバ200を宛先とする撮像画像情報を作成する。作成部13は、作成した撮像画像情報を送信機12-2へ出力する。
作成部13、及び処理部16は、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサが記憶部20に格納されたコンピュータプログラム(ソフトウェア)を実行することにより実現される。また、これらの機能部のうち一部または全部は、LSI(Large Scale Integration)やASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアとの協働によって実現されてもよい。
運用管理サーバ100は、パーソナルコンピュータ、サーバ、スマートフォン、タブレットコンピュータ又は産業用コンピュータ等の装置によって実現される。運用管理サーバ100は、例えば通信部102と、作成部103と、操作部105と、処理部106と、記憶部110とを備える。
通信部102は、通信モジュールによって実現される。通信部102は、ネットワークNWを介して、外部の通信装置と通信する。通信部102は、例えば有線LANなどの通信方式で通信する。また、通信部102は、例えば無線LAN、又はLTE(登録商標)などの無線通信方式で通信してもよい。
通信部102は、作成部103が出力した遠隔操作開始情報などの制御信号を車載機10aへ送信する。通信部102は、作成部103が出力した遠隔操作開始情報などの制御信号を遠隔運転システム300へ送信する。通信部102は、作成部103が出力した映像送信先切替指示などの制御信号を車載機10aへ送信する。通信部102は、作成部103が出力した自動運転開始情報などの制御信号を車載機10aへ送信する。通信部102は、作成部103が出力した自動運転開始情報などの制御信号を遠隔監視システム400へ送信する。
記憶部110は、HDDやフラッシュメモリ、RAM、ROMなどにより実現される。記憶部110は、一又は複数の車両の識別情報と、一又は複数の車両の各々について、その車両に搭載された車載機のアドレスとを関連付けたアドレス情報を記憶する。
処理部106は、操作部105が出力した遠隔運転情報を取得する。処理部106は、遠隔運転情報に含まれる遠隔運転又は自動運転に切り替える情報と、遠隔運転又は自動運転に切り替える車両の識別情報とを取得する。処理部106は、取得した遠隔運転又は自動運転に切り替える情報と、遠隔運転又は自動運転に切り替える車両の識別情報とを作成部103へ出力する。
作成部103は、遠隔運転に切り替える情報を取得した場合に、遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを含む、取得した車載機のアドレスを宛先とする遠隔操作開始情報を作成する。作成部103は、作成した遠隔操作開始情報を通信部102へ出力する。
作成部103は、遠隔運転に切り替える情報を取得した場合に、遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを含む、遠隔運転システム300を宛先とする遠隔操作開始情報を作成する。作成部103は、作成した遠隔操作開始情報を通信部102へ出力する。
作成部103は、遠隔運転に切り替える情報を取得した場合に、映像の送信先を遠隔運転システム300に切り替える情報と映像パラメータとを含む、取得した車載機のアドレスを宛先とする映像送信先切替指示を作成する。作成部103は、作成した映像送信先切替指示を通信部102へ出力する。
作成部103は、自動運転に切り替える情報を取得した場合に、自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを含む、遠隔監視システム400を宛先とする自動運転開始情報を作成する。作成部103は、作成した自動運転開始情報を通信部102へ出力する。
作成部103は、自動運転に切り替える情報を取得した場合に、映像の送信先を遠隔監視システム400に切り替える情報と映像パラメータとを含む、取得した車載機のアドレスを宛先とする映像送信先切替指示を作成する。作成部103は、作成した映像送信先切替指示を通信部102へ出力する。
作成部103、及び処理部106は、例えば、CPUなどのハードウェアプロセッサが記憶部110に格納されたコンピュータプログラム(ソフトウェア)を実行することにより実現される。また、これらの機能部のうち一部または全部は、LSIやASIC、FPGA、GPUなどのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアとの協働によって実現されてもよい。
映像変換サーバ200は、パーソナルコンピュータ、サーバ、スマートフォン、タブレットコンピュータ又は産業用コンピュータ等の装置によって実現される。映像変換サーバ200は、例えば通信部202と、作成部203と、記憶部210とを備える。
通信部202は、通信モジュールによって実現される。通信部202は、ネットワークNWを介して、外部の通信装置と通信する。通信部202は、例えば有線LANなどの通信方式で通信する。また、通信部202は、例えば無線LAN、又はLTE(登録商標)などの無線通信方式で通信してもよい。
通信部202は、車載機10aが送信した映像信号を受信する。通信部202は、作成部203が出力した映像信号を遠隔監視システム400へ送信する。
記憶部210は、HDDやフラッシュメモリ、RAM、ROMなどにより実現される。
作成部203は、例えば、CPUなどのハードウェアプロセッサが記憶部210に格納されたコンピュータプログラム(ソフトウェア)を実行することにより実現される。また、これらの機能部のうち一部または全部は、LSIやASIC、FPGA、GPUなどのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアとの協働によって実現されてもよい。
遠隔運転システム300は、パーソナルコンピュータ、サーバ、スマートフォン、タブレットコンピュータ又は産業用コンピュータ等の装置によって実現される。遠隔運転システム300は、例えば通信部302と、作成部303と、操作部305と、処理部306と、表示部309と、記憶部310とを備える。
通信部302は、受信機302-1と送信機302-2とを備える。受信機302-1と送信機302-2との各々は、通信モジュールによって実現される。受信機302-1と送信機302-2との各々は、ネットワークNWを介して外部の通信装置と通信する。受信機302-1と送信機302-2との各々は、例えば有線LANなどの通信方式で通信する。また、受信機302-1と送信機302-2との各々は、例えば無線LAN、又はLTE(登録商標)などの無線通信方式で通信してもよい。
送信機302-2は、作成部303が出力した制御信号を、車載機10aへ送信する。
記憶部310は、HDDやフラッシュメモリ、RAM、ROMなどにより実現される。記憶部310は、一又は複数の車両の識別情報と、一又は複数の車両の各々についてその車両に搭載された車載機のアドレスとを関連付けたアドレス情報を記憶する。
表示部309は、例えば液晶ディスプレイ等によって構成され、撮像画像などを表示する。
処理部306は、取得した遠隔運転に切り替える情報と遠隔運転に切り替える車両の識別情報とに基づいて、車両識別情報に該当する車両を遠隔運転に切り替え、その車両の遠隔操作を開始する。処理部306は、遠隔運転に切り替える車両の識別情報を作成部303に出力する。
作成部303は、処理部306が出力した遠隔運転に切り替える車両の識別情報を取得する。作成部303は、記憶部310に記憶されたアドレス情報から、取得した車両の識別情報に関連付けられている車載機のアドレスを特定する情報を取得する。
処理部306は、受信機302-1が受信した映像信号を取得し、取得した映像信号に含まれる撮像画像を処理し、表示部309に表示させる。
作成部303、及び処理部306は、例えば、CPUなどのハードウェアプロセッサが記憶部310に格納されたコンピュータプログラム(ソフトウェア)を実行することにより実現される。また、これらの機能部のうち一部または全部は、LSIやASIC、FPGA、GPUなどのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアとの協働によって実現されてもよい。
遠隔監視システム400は、パーソナルコンピュータ、サーバ、スマートフォン、タブレットコンピュータ又は産業用コンピュータ等の装置によって実現される。遠隔監視システム400は、例えば通信部402と、処理部406と、表示部409と、記憶部410とを備える。
通信部402は、受信機402-1と送信機402-2とを備える。受信機402-1と送信機402-2との各々は、通信モジュールによって実現される。受信機402-1と送信機402-2との各々は、ネットワークNWを介して外部の通信装置と通信する。受信機402-1と送信機402-2との各々は、例えば有線LANなどの通信方式で通信する。また、受信機402-1と送信機402-2との各々は、例えば無線LAN、又はLTE(登録商標)などの無線通信方式で通信してもよい。
受信機402-1は、運用管理サーバ100が送信した自動運転開始情報を受信する。受信機402-1は、車載機10aが第2伝送方式で映像変換サーバ200を経由して送信した映像信号を受信する。
記憶部410は、HDDやフラッシュメモリ、RAM、ROMなどにより実現される。
表示部309は、例えば液晶ディスプレイ等によって構成され、撮像画像などを表示する。
処理部406は、取得した自動運転に切り替える情報と自動運転に切り替える車両の識別情報とに基づいて、車両識別情報に該当する車両を自動運転に切り替え、その車両の自動運転を開始する。
処理部406は、受信機402-1が受信した映像信号を取得し、取得した映像信号に含まれる撮像画像を処理し、表示部409に表示させる。
処理部406は、例えば、CPUなどのハードウェアプロセッサが記憶部310に格納されたコンピュータプログラム(ソフトウェア)を実行することにより実現される。また、これらの機能部のうち一部または全部は、LSIやASIC、FPGA、GPUなどのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアとの協働によって実現されてもよい。
図3は、本実施形態に係る車両遠隔管理システムの動作の例1を示すフローチャートである。図3を参照して、車両10が遠隔操作に切り替えられる場合の動作について説明する。
(ステップS1-1)
運用管理サーバ100において、操作部105は、遠隔運転に切り替える操作を検出し、遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを含む遠隔運転情報を作成し、作成した遠隔運転情報を処理部106に出力する。
(ステップS2-1)
運用管理サーバ100において、処理部106は、操作部105が出力した遠隔運転情報を取得する。処理部106は、遠隔運転情報に含まれる遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを取得する。処理部106は、取得した遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを作成部103へ出力する。
作成部103は、処理部106が出力した遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを取得する。作成部103は、記憶部110に記憶されたアドレス情報から、取得した車両の識別情報に関連付けられている車載機のアドレスを特定する情報を取得する。作成部103は、遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを含む、取得した車載機のアドレスを宛先とする遠隔操作開始情報を作成する。
運用管理サーバ100において、作成部103は、作成した遠隔操作開始情報を通信部102へ出力する。通信部102は、作成部103が出力した遠隔操作開始情報を車載機10aへ送信する。
(ステップS4-1)
車載機10aにおいて、受信機12-1は、運用管理サーバ100が送信した遠隔操作開始情報を受信する。処理部16は、受信機12-1が受信した遠隔操作開始情報を取得する。処理部16は、取得した遠隔操作開始情報に基づいて、車両10に遠隔操作を指示する。車両10は、処理部16による遠隔操作の指示に基づいて遠隔操作機能を起動することによって遠隔運転に切り替える。
(ステップS5-1)
運用管理サーバ100において、作成部103は、取得した遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを含む、遠隔運転システム300を宛先とする遠隔操作開始情報を作成する。
運用管理サーバ100において、作成部103は、作成した遠隔操作開始情報を通信部102へ出力する。通信部102は、作成部103が出力した遠隔操作開始情報を遠隔運転システム300へ送信する。
(ステップS7-1)
遠隔運転システム300において、受信機302-1は、運用管理サーバ100が送信した遠隔操作開始情報を受信する。処理部306は、受信機302-1が受信した遠隔操作開始情報を取得する。処理部306は、取得した遠隔操作開始情報に含まれる遠隔運転に切り替える情報と、遠隔運転に切り替える車両の識別情報とを取得する。処理部306は、取得した遠隔運転に切り替える情報と遠隔運転に切り替える車両の識別情報とに基づいて、車両識別情報に該当する車両を遠隔運転に切り替え、その車両の遠隔操作を開始する。
(ステップS8-1)
運用管理サーバ100において、作成部103は、映像の送信先を遠隔運転システム300に切り替える情報と映像パラメータとを含む、取得した車載機のアドレスを宛先とする映像送信先切替指示を作成する。
(ステップS9-1)
運用管理サーバ100において、作成部103は、作成した映像送信先切替指示を通信部102へ出力する。通信部102は、作成部103が出力した映像送信先切替指示を取得し、取得した映像送信先切替指示を車載機10aに送信する。
車載機10aにおいて、受信機12-1は、運用管理サーバ100が送信した映像送信先切替指示を受信する。処理部16は、受信機12-1が受信した映像送信先切替指示を取得し、取得した映像送信先切替指示に基づいて、作成部13に映像の送信先を設定する。ここで、作成部13が、遠隔監視システム400を宛先とする映像信号を作成していた場合には、処理部16は、遠隔監視システム400を宛先とする映像信号の作成を停止させる。処理部16は、送信機12-2と遠隔運転システム300との間で、映像パラメータを設定し、第1伝送方式で伝送するために接続する処理を行う。
(ステップS11-1)
車載機10aにおいて、作成部13は、カメラ18が取得した撮像画像を取得する。作成部13は、取得した撮像画像を含む、遠隔運転システム300を宛先とする映像信号を作成する。
(ステップS12-1)
車載機10aにおいて、作成部13は、作成した映像信号を送信機12-2へ出力する。送信機12-2は、作成部13が出力した映像信号を取得し、取得した映像信号を第1伝送方式で遠隔運転システム300へ送信する。
遠隔運転システム300において、受信機302-1は、車載機10aが第1伝送方式で送信した映像信号を受信する。処理部306は、受信機302-1が受信した映像信号を取得し、取得した映像信号に含まれる撮像画像を処理し、表示部309に表示させる。
(ステップS14-1)
遠隔運転システム300において、操作部305は、運転手の操作を検出した場合に操作情報を作成し、作成した操作情報を作成部303に出力する。作成部303は、操作部305が出力した操作情報を取得し、取得した操作情報を含む、車載機のアドレスを宛先とする制御信号を作成する。
(ステップS15-1)
遠隔運転システム300において、作成部303は、作成した制御信号を送信機302-2に出力する。送信機302-2は、作成部303が出力した制御信号を取得し、取得した制御信号を車載機10aへ送信する。
車載機10aにおいて、受信機12-1は、遠隔運転システム300が送信した制御信号を受信する。処理部16は、受信機12-1が受信した制御信号を取得し、取得した制御信号を車両10に出力する。車両10は、処理部16が出力した制御信号を取得し、取得した制御信号に基づいて動作する。
図3に示したフローチャートにおいて、ステップS2-1からS4-1と、ステップS5-1からS7-1と、ステップS8-1からS10-1とは任意の順序で実行されてもよいし、同時に実行されてもよい。
(ステップS1-2)
運用管理サーバ100において、操作部105は、自動運転に切り替える操作を検出し、自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを含む遠隔運転情報を作成し、作成した遠隔運転情報を処理部106に出力する。
(ステップS2-2)
運用管理サーバ100において、処理部106は、操作部105が出力した遠隔運転情報を取得する。処理部106は、遠隔運転情報に含まれる自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを取得する。処理部106は、取得した自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを作成部103へ出力する。
作成部103は、処理部106が出力した自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを取得する。作成部103は、記憶部110に記憶されたアドレス情報から、取得した車両の識別情報に関連付けられている車載機のアドレスを特定する情報を取得する。作成部103は、自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを含む、取得した車載機のアドレスを宛先とする自動運転開始情報を作成する。
運用管理サーバ100において、作成部103は、作成した自動運転開始情報を通信部102へ出力する。通信部102は、作成部103が出力した自動運転開始情報を車載機10aへ送信する。
(ステップS4-2)
車載機10aにおいて、受信機12-1は、運用管理サーバ100が送信した自動運転開始情報を受信する。処理部16は、受信機12-1が受信した自動運転開始情報を取得する。処理部16は、取得した自動運転開始情報に基づいて、車両10に自動運転を指示することによって車両10を自動運転に切り替える。
(ステップS5-2)
運用管理サーバ100において、作成部103は、取得した自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを含む、遠隔監視システム400を宛先とする自動運転開始情報を作成する。
運用管理サーバ100において、作成部103は、作成した自動運転開始情報を通信部102へ出力する。通信部102は、作成部103が出力した自動運転開始情報を遠隔監視システム400へ送信する。
(ステップS7-2)
遠隔監視システム400において、受信機402-1は、運用管理サーバ100が送信した自動運転開始情報を受信する。処理部406は、受信機402-1が受信した自動運転開始情報を取得する。処理部406は、取得した自動運転開始情報に含まれる自動運転に切り替える情報と、自動運転に切り替える車両の識別情報とを取得する。処理部406は、取得した自動運転に切り替える情報と自動運転に切り替える車両の識別情報とに基づいて、車両識別情報に該当する車両を自動運転に切り替え、その車両の自動運転を開始する。
運用管理サーバ100において、作成部103は、映像の送信先を遠隔監視システム400に切り替える情報と映像パラメータとを含む、取得した車載機のアドレスを宛先とする映像送信先切替指示を作成する。
(ステップS9-2)
運用管理サーバ100において、作成部103は、作成した映像送信先切替指示を通信部102へ出力する。通信部102は、作成部103が出力した映像送信先切替指示を取得し、取得した映像送信先切替指示を車載機10aに送信する。
(ステップS10-2)
車載機10aにおいて、受信機12-1は、運用管理サーバ100が送信した映像送信先切替指示を受信する。処理部16は、受信機12-1が受信した映像送信先切替指示を取得し、取得した映像送信先切替指示に基づいて、作成部13に映像の送信先を設定する。
ここで、作成部13が、遠隔運転システム300を宛先とする映像信号を作成していた場合には、処理部16は、遠隔運転システム300を宛先とする映像信号の作成を停止させる。処理部16は、映像パラメータを設定し、送信機12-2と遠隔監視システム400との間で、映像パラメータを設定し、第2伝送方式で伝送するために接続する処理を行う。
車載機10aにおいて、作成部13は、カメラ18が取得した撮像画像を取得する。作成部13は、取得した撮像画像を含む、映像変換サーバ200を宛先とする映像信号を作成する。
(ステップS12-2)
車載機10aにおいて、作成部13は、作成した映像信号を送信機12-2へ出力する。送信機12-2は、作成部13が出力した映像信号を取得し、取得した映像信号を第2伝送方式で映像変換サーバ200へ送信する。
(ステップS13-2)
映像変換サーバ200において、通信部202は、車載機10aが送信した映像信号を受信する。作成部203は、通信部202が受信した映像信号を取得する。作成部203は、取得した映像信号に含まれる撮像画像を取得する。作成部203は取得した撮像画像を含む、遠隔監視システム400を宛先とする映像信号を作成する。作成部203は、作成した映像信号を通信部202へ出力する。通信部202は、作成部203が出力した映像信号を遠隔監視システム400へ送信する。
遠隔監視システム400において、受信機402-1は、車載機10aが第2伝送方式で送信した映像信号を、映像変換サーバ200を経由して受信する。処理部406は、受信機402-1が受信した映像信号を取得し、取得した映像信号に含まれる撮像画像を処理し、表示部409に表示させる。
図4に示したフローチャートにおいて、ステップS2-2からS4-2と、ステップS5-2からS7-2と、ステップS8-2からS10-2とは任意の順序で実行されてもよいし、同時に実行されてもよい。
例えば、処理部106は、車両10と遠隔運転システム300との間の無線リソースが閾値以下である場合には第1伝送方式に設定し、閾値を超える場合には第2伝送方式に設定する。このように構成することによって、車両10と遠隔運転システム300との間の無線リソースが閾値以下である場合に第1伝送方式に設定できるため、車両に搭載されたカメラが取得した映像の遅延を短くするとともに、映像の品質を向上させることができる。このため、遠隔運転の操作性を向上できる。
このように構成することによって、遠隔運転を行う車両に搭載されたカメラが取得した映像を送信する伝送方式と自動運転を行う車両に搭載されたカメラが取得した映像を送信する伝送方式とを異ならせることができる。このため、遠隔運転と自動運転とのいずれかに基づいて、車両10から映像を送信できる。
遠隔運転と自動運転との拡大によって交通の安全性を改善して、すべての人々が、安全で、手頃な価格の、使いやすく持続可能な輸送システムを利用できるようになることが想定されることから、国連が主導する持続可能な開発目標(SDGs)の目標11「住み続けられるまちづくりを」に貢献することが可能となる。
また、車両遠隔管理システム1において、処理部106は、車両10が自動運転から遠隔運転に切り替えられる場合に、伝送方式を設定する。このように構成することによって、遠隔運転と自動運転とのいずれかに基づいて、車両から映像を送信できる。
また、車両遠隔管理システム1において、処理部106は、通信リソースに基づいて伝送方式を設定する。このように構成することによって、通信リソースを増減させる場合に伝送方式を設定できる。このため、遠隔運転を行う場合などに映像の品質を向上させることができる。
また、車両遠隔管理システム1において、処理部106は、複数の伝送方式のうち、車両10が遠隔運転である場合に遠隔運転システムにピアツーピア接続を行う。このように構成することによって、遠隔運転を行うときに、遠隔運転に特化した映像品質とネットワーク構成に切り替えることができる。遠隔運転が行われる場合に、車両に搭載されたカメラが取得した映像の遅延を短くするとともに、映像の品質を向上させることができる。このため、遠隔運転が行われる車両の操作性を向上できるとともに、モバイルネットワークを用いた自動運転が行われる車両の監視のリソースを低減することができる。
例えば、上述した各装置の機能を実現するためのコンピュータプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたコンピュータプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、フラッシュメモリ等の書き込み可能な不揮発性メモリ、DVD(Digital Versatile Disc)等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してコンピュータプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(例えばDRAM(Dynamic Random Access Memory))のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。
さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。
Claims (7)
- 遠隔運転と自動運転とが可能である車両が送信する映像に基づいて前記車両を管理する車両遠隔管理システムであって、
車両が遠隔運転システムと遠隔監視システムとのいずれかに送信する映像の伝送方式を設定する手段と、
前記設定する手段が設定した前記伝送方式で前記車両に前記映像を送信させる制御信号を作成する手段と
を備え、
前記設定する手段は、複数の伝送方式のうち、前記車両が自動運転であるか遠隔運転であるかによって、異なる伝送方式を設定する、車両遠隔管理システム。 - 前記設定する手段は、自動運転である車両の伝送方式よりも、遠隔運転である車両の伝送方式を低遅延のものに設定する、請求項1に記載の車両遠隔管理システム。
- 前記設定する手段は、前記車両が自動運転から遠隔運転に切り替えられる場合に、前記伝送方式を設定する、請求項1又は請求項2に記載の車両遠隔管理システム。
- 前記設定する手段は、通信リソースに基づいて前記伝送方式を設定する、請求項1から請求項3のいずれか一項に記載の車両遠隔管理システム。
- 前記設定する手段は、複数の伝送方式のうち、前記車両が遠隔運転である場合に前記遠隔運転システムにピアツーピア接続を行う、請求項1から請求項4のいずれか一項に記載の車両遠隔管理システム。
- 遠隔運転と自動運転とが可能である車両が送信する映像に基づいて前記車両を管理する車両遠隔管理システムが実行する車両遠隔管理方法であって、
車両が遠隔運転システムと遠隔監視システムとのいずれかに送信する映像の伝送方式を設定するステップと、
前記設定するステップで設定した前記伝送方式で前記車両に前記映像を送信させる制御信号を作成するステップと
を有し、
前記設定するステップでは、複数の伝送方式のうち、前記車両が自動運転であるか遠隔運転であるかによって、異なる伝送方式に設定する、車両遠隔管理方法。 - コンピュータに、
車両が遠隔運転システムと遠隔監視システムとのいずれかに送信する映像の伝送方式を設定するステップと、
前記設定するステップで設定した前記伝送方式で前記車両に前記映像を送信させる制御信号を作成するステップと
を実行させ、
前記設定するステップでは、複数の伝送方式のうち、前記車両が自動運転であるか遠隔運転であるかによって、異なる伝送方式に設定する、コンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021056497A JP7467384B2 (ja) | 2021-03-30 | 2021-03-30 | 車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021056497A JP7467384B2 (ja) | 2021-03-30 | 2021-03-30 | 車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022153794A JP2022153794A (ja) | 2022-10-13 |
JP7467384B2 true JP7467384B2 (ja) | 2024-04-15 |
Family
ID=83556846
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021056497A Active JP7467384B2 (ja) | 2021-03-30 | 2021-03-30 | 車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7467384B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018155159A1 (ja) | 2017-02-24 | 2018-08-30 | パナソニックIpマネジメント株式会社 | 遠隔映像出力システム、及び遠隔映像出力装置 |
JP2020039120A (ja) | 2018-08-31 | 2020-03-12 | バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド | 自動運転車両の遠隔制御方法、装置およびサーバ |
JP2020165832A (ja) | 2019-03-29 | 2020-10-08 | 本田技研工業株式会社 | 経路設定装置、経路設定方法及びプログラム |
JP2021020632A (ja) | 2019-07-30 | 2021-02-18 | トヨタ自動車株式会社 | 運転制御装置 |
-
2021
- 2021-03-30 JP JP2021056497A patent/JP7467384B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018155159A1 (ja) | 2017-02-24 | 2018-08-30 | パナソニックIpマネジメント株式会社 | 遠隔映像出力システム、及び遠隔映像出力装置 |
JP2020039120A (ja) | 2018-08-31 | 2020-03-12 | バイドゥ オンライン ネットワーク テクノロジー (ベイジン) カンパニー リミテッド | 自動運転車両の遠隔制御方法、装置およびサーバ |
JP2020165832A (ja) | 2019-03-29 | 2020-10-08 | 本田技研工業株式会社 | 経路設定装置、経路設定方法及びプログラム |
JP2021020632A (ja) | 2019-07-30 | 2021-02-18 | トヨタ自動車株式会社 | 運転制御装置 |
Also Published As
Publication number | Publication date |
---|---|
JP2022153794A (ja) | 2022-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4716815B2 (ja) | 車々間通信装置、車々間通信システムおよび動画情報のアプリケーション適用可否判断方法 | |
US20160159281A1 (en) | Vehicle and control method thereof | |
JP2020107328A (ja) | 車両データで使用する動的データ圧縮システムおよび方法 | |
KR20220053562A (ko) | 고체 촬상 소자, 촬상 장치 및 고체 촬상 소자의 제어 방법 | |
JP6450583B2 (ja) | ドライブレコーダーおよびドライブレコーダーシステム | |
JPWO2016013409A1 (ja) | 制御装置、制御方法、プログラム、および制御システム | |
JP2018029280A (ja) | 撮像装置と撮像方法 | |
TWI788818B (zh) | 攝像裝置及攝像方法 | |
KR102253163B1 (ko) | 차량 | |
WO2020080383A1 (ja) | 撮像装置及び電子機器 | |
US11802533B2 (en) | Safely initiating an autonomous vehicle ride | |
JP2021150931A (ja) | 遠隔操作支援サーバ、遠隔操作支援システムおよび遠隔操作支援方法 | |
JP7467384B2 (ja) | 車両遠隔管理システム、車両遠隔管理方法及びコンピュータプログラム | |
JPWO2018016150A1 (ja) | 画像処理装置と画像処理方法 | |
JPWO2018016151A1 (ja) | 画像処理装置と画像処理方法 | |
US20210149392A1 (en) | Vehicle, remote imaging-and-controlling system, method for controlling vehicle, and non-transitory recording medium | |
US10986608B2 (en) | Communication apparatus that uses plurality of communication methods, method for controlling the same, and storage medium | |
US11563913B2 (en) | Solid-state imaging element and imaging device | |
US11671700B2 (en) | Operation control device, imaging device, and operation control method | |
US20160167581A1 (en) | Driver interface for capturing images using automotive image sensors | |
JP2008035201A (ja) | カメラシステム | |
WO2021153428A1 (ja) | 撮像装置、電子機器及び撮像方法 | |
JP3197545U (ja) | 車両用セキュリティシステム | |
US20230031034A1 (en) | Information processing apparatus, information processing method, and non-transitory storage medium | |
WO2024154616A1 (ja) | 光検出装置及び電子機器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230222 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231121 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231128 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240118 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240403 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7467384 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |