JP7389782B2 - 表示装置、及び表示装置の制御方法 - Google Patents
表示装置、及び表示装置の制御方法 Download PDFInfo
- Publication number
- JP7389782B2 JP7389782B2 JP2021174355A JP2021174355A JP7389782B2 JP 7389782 B2 JP7389782 B2 JP 7389782B2 JP 2021174355 A JP2021174355 A JP 2021174355A JP 2021174355 A JP2021174355 A JP 2021174355A JP 7389782 B2 JP7389782 B2 JP 7389782B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- driving
- vehicle
- data
- driver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 23
- 238000011156 evaluation Methods 0.000 claims description 160
- 238000004891 communication Methods 0.000 claims description 47
- 238000012549 training Methods 0.000 description 113
- 238000000605 extraction Methods 0.000 description 32
- 238000012545 processing Methods 0.000 description 29
- 239000000284 extract Substances 0.000 description 19
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 13
- 238000013480 data collection Methods 0.000 description 10
- 238000001514 detection method Methods 0.000 description 5
- 240000004050 Pentaglottis sempervirens Species 0.000 description 3
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 3
- 239000013256 coordination polymer Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000011410 subtraction method Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
Description
例えば、特許文献1は、運転講習に係わる技術として、動的に変化する周囲の状況の中で危険シーンの予測を研修者が訓練できる技術を開示している。
本発明は、上述した事情に鑑みてなされたものであり、受講者に対して効果的な運転講習を提供できるようにすることを目的とする。
また、上記目的を達成するための一態様の表示装置は、車両の運転者が受講する運転講習に関する表示装置であって、前記車両の走行データに基づいて前記運転者の運転技量を評価するサーバ装置と通信する通信ユニットと、プロセッサと、を備え、前記プロセッサは、前記運転者の運転技量の評価に基づいて前記サーバ装置が選択した前記運転講習において、前記運転者が運転した前記車両の走行動画と、前記サーバ装置が評価した評価項目に対応する模範の動画である模範動画とを重畳又は並べて表示し、前記走行動画の再生開始タイミングと前記模範動画の再生開始タイミングとを同期させて、前記走行動画及び前記模範動画を再生し、前記サーバ装置が選択した前記運転講習において、前記走行データに基づいて前記サーバ装置が抽出した、前記車両の運転で前記運転者が注意すべき注意事項を示す注意事項情報をさらに表示する。
また、上記目的を達成するための別の一態様の表示装置の制御方法は、車両の走行データに基づいて前記車両の運転者の運転技量を評価するサーバ装置と通信する、前記運転者が受講する運転講習に関する表示装置の制御方法であって、前記運転者の運転技量の評価に基づいて前記サーバ装置が選択した前記運転講習において、前記運転者が運転した前記車両の走行動画と、前記サーバ装置が評価した評価項目に対応する模範の動画である模範動画とを重畳又は並べて表示する表示ステップを含み、前記表示ステップは、前記走行動画の再生開始タイミングと前記模範動画の再生開始タイミングとを同期させて、前記走行動画及び前記模範動画を再生し、前記サーバ装置が選択した前記運転講習において、前記走行データに基づいて前記サーバ装置が抽出した、前記車両の運転で前記運転者が注意すべき注意事項を示す注意事項情報をさらに表示する。
図1を参照して、本実施形態の運転講習システム1000の概要を説明する。
図1は、運転講習システム1000の概要を示す図である。
従業員Pは、本開示の「運転者」に相当する。
図2は、車両1の一例を示す図である。
第1端末装置3は、本開示の「第1表示装置」に相当する。
VRデバイス5は、本開示の「第3表示装置」に相当する。
第2端末装置4は、本開示の「第2表示装置」に相当する。
次に、車両1の構成について説明する。
図3は、車両1の構成の一例を示す図である。
運転講習システム1000は、車両1を備える。
また、データ収集部112は、ペダルセンサ21、車両状態センサ22、及びステアリングセンサ23の検出値を、車両1の走行データとして収集する。収集された検出値の各々には、検出された時間のデータが対応付いている。
また、データ収集部112は、GNSS20が測位する車両1の現在位置、及び地図データ122を参照し、車両1が走行したルートRTのデータを、車両1の走行データとして収集する。図1のルートRTの場合、データ収集部112は、会社CPの所在地点PTを起点とし会社CPの所在地点PTを終点としたルートRTのデータを、車両1の走行データとして収集する。
また、データ収集部112は、GNSS20が測位した車両1の現在位置を示す現在位置データを、車両1の走行データとして収集する。収集された現在位置データの各々には、測位された時間のデータが対応付いている。
次に、サーバ装置2の構成について説明する。
運転講習システム1000は、サーバ装置2を備える。
図4は、サーバ装置2の構成の一例を示す図である。
運転講習DB214が格納するレコードのうち、合流の評価項目に対応するレコードは、項目名「合流」の情報と、講習名「合流動画講習」の情報と、講習内容「合流の動画を見る講習」の情報と、講習名「合流動画講習」の運転講習で表示される模範動画MDを示す模範動画データとを有する。
運転講習DB214が格納するレコードのうち、駐車の評価項目に対応するレコードは、項目名「駐車」の情報と、講習名「駐車動画講習」の情報と、講習内容「駐車の動画を見る講習」の情報と、講習名「駐車動画講習」の運転講習で表示される模範動画MDを示す模範動画データとを有する。
運転講習DB214が格納するレコードのうち、狭路の評価項目に対応するレコードは、項目名「狭路」の情報と、講習名「狭路動画講習」の情報と、講習内容「狭路の走行の仕方の動画を見る講習」の情報と、講習名「狭路動画講習」の運転講習で表示される模範動画MDを示す模範動画データとを有する。
また、例えば、評価部203は、フロントカメラ18A、右サイドカメラ18C、左サイドカメラ18D、及びリアカメラ18Bの動画データや、ルートRTのデータ、現在位置データ、車両状態センサ22の検出値などを解析して、車両1が駐車場で駐車をしたことを認識する。この場合、評価部206は、評価を行う評価項目として駐車の評価項目を特定する。
また、例えば、評価部203は、フロントカメラ18Aの動画データや、ルートRTのデータ、現在位置データ、地図データ215などを解析することで、車両1が狭路を走行したと認識する。この場合、評価部203は、評価を行う評価項目として狭路の評価項目を特定する。
また、例えば、評価部203は、基準データが示す切り返しの回数より、車両1の走行データが示す切り返しの回数が多い場合、駐車の評価項目について評価値を下げる。なお、評価部203は、ステアリングセンサ23の検出値に基づいて、車両1の走行データが示す切り返しの回数を認識する。
また、例えば、評価部203は、ルートRTのデータ、及び地図データ215などを解析して、車両1が走行したルートRTが所定距離以上の狭路を走行したルートRTである場合、ルート選択が不適切であったとして、狭路の評価項目について評価値を下げる。
例えば、第2抽出部206は、合流車線において車両状態センサ22の検出値が示す車速が所定値以下である場合、合流の評価項目について車速を上げることを注意事項として抽出する。
例えば、第2抽出部206は、ステアリングセンサ23の検出値に基づいて、駐車におけるステアリングホールの舵角が所定値以上である場合、駐車の評価項目についてステアリングホールを回しすぎないことを注意事項として抽出する。
例えば、第2抽出部206は、狭路の走行における車両状態センサ22の検出値が示す車速が所定値以上である場合、狭路の評価項目について車速を下げることを注意事項として抽出する。
第2抽出部206は、抽出した注意事項を示す注意事項情報J1をデータ処理部207に出力する。
データ処理部207は、評価部203が特定した評価項目が合流である場合、車両1の走行データから、合流を行っているときの動画データを走行動画データとして切り出す。例えば、データ処理部207は、車両1の現在位置データ、ルートRTのデータ、及び地図データ215に基づいて、合流車線に入ったタイミングから当該合流車線を出たタイミングまでの動画データを、走行動画データとして、ドライブレコーダ17やフロントカメラ18Aの動画データから切り出す。
また、データ処理部207は、評価部203が特定した評価項目が駐車である場合、車両1の走行データから、駐車を行っているときの動画データを走行動画データとして切り出す。例えば、データ処理部207は、車両1の現在位置データ、車両状態センサ22の検出値、及び地図データ215に基づいて、車両1が後退を開始したタイミングから停車するタイミングまでの動画データを、走行動画データとして、ドライブレコーダ17やフロントカメラ18Aの動画データから切り出す。
また、データ処理部207は、評価部203が特定した評価項目が狭路である場合、車両1の走行データから、狭路を走行しているときの動画データを走行動画データとして切り出す。例えば、データ処理部207は、車両1の現在位置データ、及び地図データ215に基づいて、狭路に進入してから退出するまでの動画データを、走行動画データとして、ドライブレコーダ17やフロントカメラ18Aの動画データから切り出す。
次に、図5を参照して、第1端末装置3及び第2端末装置4の構成について説明する。
運転講習システム1000は、第1端末装置3及び第2端末装置4を備える。
第1アプリ実行部300は、第1端末通信ユニット32を介して、サーバ装置2と通信する。
第1アプリ実行部300は、近距離無線通信部33を介して、VRデバイス5と通信する。
第1アプリ実行部300は、第1運転講習画面GM1を端末タッチパネル34に表示させる。
第2アプリ実行部400は、第2端末通信ユニット42を介して、サーバ装置2と通信する。
第2アプリ実行部400は、第2運転講習画面GM2をディスプレイ43に表示させる。
次に、運転講習システム1000の動作について説明する。
図6は、運転講習システム1000の動作を示すフローチャートである。図5において、フローチャートFAは車両1の動作を示し、フローチャートFBはサーバ装置2の動作を示し、フローチャートFCは第1端末装置3の動作を示す。
ステップSB2は、本開示の「取得ステップ」に相当する。
ステップSB3は、本開示の「評価ステップ」に相当する。
ステップSB6は、本開示の「選択ステップ」に相当する。
図7は、運転講習システム1000の動作を示すフローチャートである。
図7において、フローチャートFDはサーバ装置2の動作を示し、フローチャートFEは第1端末装置3の動作を示す。
ステップSE4は、本開示の「表示ステップ」に相当する。
第1運転講習画面GM1は、第1表示領域A1、第2表示領域A2、第3表示領域A3、及び第4表示領域A4を有する。第1表示領域A1、第2表示領域A2、及び第3表示領域A3は、図中上下方向に並んでいる。また、第1表示領域A1及び第2表示領域A2と、第4表示領域A4とは、図中左右方向に並んでいる。なお、第1表示領域A1、第2表示領域A2、第3表示領域A3、及び第4表示領域A4の配置は、図8の配置に限定されず、少なくとも第1表示領域A1及び第2表示領域A2が第1運転講習画面GM1において所定方向に並んでいればよい。
図9において、フローチャートFFはサーバ装置2の動作を示し、フローチャートFGは第2端末装置4の動作を示す。
第2運転講習画面GM2は、走行動画SDを表示する。第2運転講習画面GM2が表示する模範動画MDは、ステップSG3で受信された第2表示データD2が含む模範動画データの動画である。
上述した実施形態では、走行動画SDと模範動画MDとを並べて表示する場合を例示したが、走行動画SDと模範動画MDとを重畳させて表示する構成でもよい。重畳させて表示する構成の場合、走行動画SD及び模範動画MDは、車両1を俯瞰した俯瞰動画でもよい。走行動画SD及び模範動画MDが俯瞰動画である場合、データ処理部207は、取得部202が取得した車両1の走行データと、空中写真の画像データと、地図データ215とに基づいて、走行動画SDを生成する。なお、空中写真の画像データは、サーバ装置2が保持していてもよいし、通信ネットワークNWに接続する他の装置が保持していてもよい。
上記実施形態は、以下の構成をサポートする。
構成1の運転講習システムによれば、受講者である従業員は、自身の行った走行と模範の走行とを見比べることができるため、どのように走行を改善すればよいのかを容易に把握できるようになる。よって、運転講習システムは、受講者である従業員に対して効果的な運転講習を提供できる。
構成2の運転講習システムによれば、運転者に対して、車両の運転で苦手な項目に対応する運転講習を選択できる。よって、運転講習システムは、受講者である従業員に対して効果的且つ適切な運転講習を提供できる。
構成3の運転講習システムによれば、受講者である従業員は、車両の運転で注意すべき事項を容易に把握できるようになる。よって、運転講習システムは、受講者である従業員に対してより効果的な運転講習を提供できる。
構成4の運転講習システムによれば、自身の走行がどのような進行方向であったのかを把握でき、進行方向に関してどのように改善すればよいのかを容易に把握できる。よって、運転講習システムは、受講者である従業員に対してより効果的な運転講習を提供できる。
構成5の運転講習システムによれば、複数の受講者での受講に適した運転講習も提供可能になるため、受講態様に応じた適切な運転講習を提供できる。
構成6の運転講習システムによれば、車両の運転において確認すべき箇所を直感的に把握できるようになるため、受講者である従業員に対してより効果的な運転講習を提供できる。
構成7の運転講習システムの制御方法によれば、構成1の運転講習システムの作用効果と同様の作用効果を奏する。
Claims (4)
- 車両の運転者が受講する運転講習に関する表示装置であって、
前記車両の走行データに基づいて前記運転者の運転技量を評価するサーバ装置と通信する通信ユニットと、
プロセッサと、を備え、
前記プロセッサは、
前記運転者の運転技量の評価に基づいて前記サーバ装置が選択した前記運転講習において、前記運転者が運転した前記車両の走行動画と、前記サーバ装置が評価した評価項目に対応する模範の動画である模範動画とを重畳又は並べて表示し、
前記サーバ装置が選択した前記運転講習において、前記車両の俯瞰画像と、前記走行動画において前記車両が進行する進行方向に対応した方向を指し示す進行方向動画とをさらに表示し、
前記走行動画の再生開始タイミングと前記模範動画の再生開始タイミングと前記進行方向動画の再生開始タイミングとを同期させて、前記走行動画、前記模範動画、及び進行方向動画を再生する、
表示装置。 - 車両の運転者が受講する運転講習に関する表示装置であって、
前記車両の走行データに基づいて前記運転者の運転技量を評価するサーバ装置と通信する通信ユニットと、
プロセッサと、を備え、
前記プロセッサは、
前記運転者の運転技量の評価に基づいて前記サーバ装置が選択した前記運転講習において、前記運転者が運転した前記車両の走行動画と、前記サーバ装置が評価した評価項目に対応する模範の動画である模範動画とを重畳又は並べて表示し、
前記走行動画の再生開始タイミングと前記模範動画の再生開始タイミングとを同期させて、前記走行動画及び前記模範動画を再生し、
前記サーバ装置が選択した前記運転講習において、前記走行データに基づいて前記サーバ装置が抽出した、前記車両の運転で前記運転者が注意すべき注意事項を示す注意事項情報をさらに表示する、
表示装置。 - 車両の走行データに基づいて前記車両の運転者の運転技量を評価するサーバ装置と通信する、前記運転者が受講する運転講習に関する表示装置の制御方法であって、
前記表示装置のプロセッサが、前記運転者の運転技量の評価に基づいて前記サーバ装置が選択した前記運転講習において、前記運転者が運転した前記車両の走行動画と、前記サーバ装置が評価した評価項目に対応する模範の動画である模範動画とを重畳又は並べて表示する表示ステップを含み、
前記表示ステップは、
前記サーバ装置が選択した前記運転講習において、前記車両の俯瞰画像と、前記走行動画において前記車両が進行する進行方向に対応した方向を指し示す進行方向動画とをさらに表示し、
前記走行動画の再生開始タイミングと前記模範動画の再生開始タイミングと前記進行方向動画の再生開始タイミングとを同期させて、前記走行動画、前記模範動画、及び進行方向動画を再生する、
表示装置の制御方法。 - 車両の走行データに基づいて前記車両の運転者の運転技量を評価するサーバ装置と通信する、前記運転者が受講する運転講習に関する表示装置の制御方法であって、
前記表示装置のプロセッサが、前記運転者の運転技量の評価に基づいて前記サーバ装置が選択した前記運転講習において、前記運転者が運転した前記車両の走行動画と、前記サーバ装置が評価した評価項目に対応する模範の動画である模範動画とを重畳又は並べて表示する表示ステップを含み、
前記表示ステップは、
前記走行動画の再生開始タイミングと前記模範動画の再生開始タイミングとを同期させて、前記走行動画及び前記模範動画を再生し、
前記サーバ装置が選択した前記運転講習において、前記走行データに基づいて前記サーバ装置が抽出した、前記車両の運転で前記運転者が注意すべき注意事項を示す注意事項情報をさらに表示する、
表示装置の制御方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021174355A JP7389782B2 (ja) | 2021-10-26 | 2021-10-26 | 表示装置、及び表示装置の制御方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021174355A JP7389782B2 (ja) | 2021-10-26 | 2021-10-26 | 表示装置、及び表示装置の制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023064218A JP2023064218A (ja) | 2023-05-11 |
JP7389782B2 true JP7389782B2 (ja) | 2023-11-30 |
Family
ID=86271542
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021174355A Active JP7389782B2 (ja) | 2021-10-26 | 2021-10-26 | 表示装置、及び表示装置の制御方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7389782B2 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001186471A (ja) | 1999-12-27 | 2001-07-06 | Hisaya Sato | 映像比較装置及び映像比較プログラムを記録した記録媒体 |
JP2008293184A (ja) | 2007-05-23 | 2008-12-04 | Kayaba Ind Co Ltd | 運行管理装置 |
WO2017104794A1 (ja) | 2015-12-17 | 2017-06-22 | マツダ株式会社 | 視覚認知支援システムおよび視認対象物の検出システム |
JP2018124439A (ja) | 2017-02-01 | 2018-08-09 | 株式会社デンソー | 能力評価システムおよび能力評価装置 |
JP2021000975A (ja) | 2019-06-24 | 2021-01-07 | 本田技研工業株式会社 | 駐車支援システム |
JP2021000974A (ja) | 2019-06-24 | 2021-01-07 | 本田技研工業株式会社 | 駐車支援システム |
JP2021071328A (ja) | 2019-10-29 | 2021-05-06 | 株式会社イノビオット | 安全運転支援サーバ |
-
2021
- 2021-10-26 JP JP2021174355A patent/JP7389782B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001186471A (ja) | 1999-12-27 | 2001-07-06 | Hisaya Sato | 映像比較装置及び映像比較プログラムを記録した記録媒体 |
JP2008293184A (ja) | 2007-05-23 | 2008-12-04 | Kayaba Ind Co Ltd | 運行管理装置 |
WO2017104794A1 (ja) | 2015-12-17 | 2017-06-22 | マツダ株式会社 | 視覚認知支援システムおよび視認対象物の検出システム |
JP2018124439A (ja) | 2017-02-01 | 2018-08-09 | 株式会社デンソー | 能力評価システムおよび能力評価装置 |
JP2021000975A (ja) | 2019-06-24 | 2021-01-07 | 本田技研工業株式会社 | 駐車支援システム |
JP2021000974A (ja) | 2019-06-24 | 2021-01-07 | 本田技研工業株式会社 | 駐車支援システム |
JP2021071328A (ja) | 2019-10-29 | 2021-05-06 | 株式会社イノビオット | 安全運転支援サーバ |
Also Published As
Publication number | Publication date |
---|---|
JP2023064218A (ja) | 2023-05-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7756602B2 (en) | Vehicle entertainment and gaming system | |
WO2021079975A1 (ja) | 表示システム、表示装置、表示方法、及び、移動装置 | |
US20180182261A1 (en) | Real Time Car Driving Simulator | |
WO2018230688A1 (ja) | エクスペリエンス提供システム、エクスペリエンス提供方法およびエクスペリエンス提供プログラム | |
JP2008039596A (ja) | 情報提供装置、情報提供方法、情報提供プログラム、および記録媒体 | |
US11151775B2 (en) | Image processing apparatus, display system, computer readable recoring medium, and image processing method | |
JP6324196B2 (ja) | 情報処理装置、情報処理方法および情報処理システム | |
JP2020080542A (ja) | 車両の画像提供システム、サーバーシステムおよび車両の画像提供方法 | |
JP2008018853A (ja) | 情報記録装置、情報記録方法およびプログラム | |
JP2024041746A (ja) | 情報処理装置 | |
JP7389782B2 (ja) | 表示装置、及び表示装置の制御方法 | |
CN109969199A (zh) | 车辆 | |
JP2012155285A (ja) | 運転危険予測学習支援システム | |
JP7011364B1 (ja) | 体験装置、体験システム、及び、表示方法 | |
JP2012098609A (ja) | 情報処理装置、自動車、情報処理方法及びプログラム | |
JP2000203465A (ja) | 情報記録装置 | |
US11670187B2 (en) | Information processing device, information processing system, program, and vehicle | |
JP2010085203A (ja) | ナビゲーション装置及び案内誘導方法 | |
JP4923579B2 (ja) | 挙動情報取得装置、表示端末及び挙動情報通知システム | |
JP6917426B2 (ja) | 画像表示装置、画像表示方法、および、画像表示システム | |
CN111568447A (zh) | 信息处理装置和信息处理方法 | |
US11881065B2 (en) | Information recording device, information recording method, and program for recording information | |
JP2023064217A (ja) | 運転講習システム、及び運転講習システムの制御方法 | |
JPH10215407A (ja) | 画像取り込み装置、運転支援画像取り込み装置 | |
JP2018174512A (ja) | 画像共有システム、画像共有サーバ及び画像共有方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230516 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230713 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231024 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231117 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7389782 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |