JP2021103449A

JP2021103449A - 情報記録再生装置、情報記録再生プログラムおよび情報記録再生システム

Info

Publication number: JP2021103449A
Application number: JP2019234640A
Authority: JP
Inventors: 敦史前田; Atsushi Maeda; 佑真石原; Yuma Ishihara
Original assignee: Toyota Motor Corp
Current assignee: Toyota Motor Corp
Priority date: 2019-12-25
Filing date: 2019-12-25
Publication date: 2021-07-15
Anticipated expiration: 2039-12-25
Also published as: CN113034724B; JP7243616B2; CN113034724A; US20210197835A1

Abstract

【課題】挙動異常の原因の解析が容易となるデータを取得することができる情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムを提供すること。【解決手段】情報記録再生装置は、ハードウェアを有するプロセッサとを備え、プロセッサが、車両に搭載された第一装置から、運転者の挙動に関する情報を示す第一情報を取得し、車両に搭載された第二装置から、車両の挙動に関する情報を示す第二情報を取得し、第一情報および第二情報を、同期再生可能にメモリに蓄積する。【選択図】図１

Description

本開示は、情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムに関する。

特許文献１には、車内外に配置されたカメラを備え、例えば居眠り等の運転者の挙動異常を検出すると、アラートによる報知（警告）および車内の録画を行うドライブレコーダシステムが開示されている。

特開２０１４−０４４６９１号公報

運転者の挙動異常の原因の解析を容易とする技術が求められていた。

本開示は、上記に鑑みてなされたものであって、挙動異常の原因の解析が容易となるデータを取得することができる情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムを提供することを目的とする。

本開示に係る情報記録再生装置は、ハードウェアを有するプロセッサとを備え、前記プロセッサが、車両に搭載された第一装置から、運転者の挙動に関する情報を示す第一情報を取得し、前記車両に搭載された第二装置から、前記車両の挙動に関する情報を示す第二情報を取得し、前記第一情報および前記第二情報を、同期再生可能にメモリに蓄積する。

本開示に係る情報記録再生プログラムは、ハードウェアを有するプロセッサに、車両に搭載された第一装置から、運転者の挙動に関する情報を示す第一情報を取得し、前記車両に搭載された第二装置から、前記車両の挙動に関する情報を示す第二情報を取得し、前記第一情報および前記第二情報を、同期再生可能に情報記録再生装置が備えるメモリに蓄積する、ことを実行させる。

本開示に係る情報記録再生システムは、ハードウェアを有する第一のプロセッサであって、車両に搭載され、運転者の挙動に関する情報を示す第一情報を送信する第一のプロセッサを有する第一装置と、ハードウェアを有する第二のプロセッサであって、前記車両に搭載され、前記車両の挙動に関する情報を示す第二情報を送信する第二のプロセッサを有する第二装置と、ハードウェアを有する第三のプロセッサであって、前記第一装置から前記第一情報を取得し、前記第二装置から前記第二情報を取得し、前記第一情報および前記第二情報を、同期再生可能にメモリに蓄積する第三のプロセッサを有するサーバと、を備える。

本開示によれば、車両挙動情報および運転者挙動情報を後から同期再生可能であるため、挙動異常の原因を容易に解析することができ、解析用データとしての有用性が向上する。

図１は、実施形態１に係る情報記録再生装置を含む情報記録再生システムの構成を概略的に示すブロック図である。図２は、実施形態１に係る情報記録再生装置の表示制御部が表示部に表示させる表示画面の一例を示す図である。図３は、実施形態１に係る情報記録再生システムが実行する情報記録再生方法の処理手順を示すフローチャートである。図４は、実施形態２に係る情報記録再生装置を含む情報記録再生システムの構成を概略的に示すブロック図である。

［実施形態１］
本開示の実施形態１に係る情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムについて、図１〜図３を参照しながら説明する。なお、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。

（情報記録再生システム）
本実施形態に係る情報記録再生装置を含む情報記録再生システムの構成について、図１を参照しながら説明する。情報記録再生システムは、車載装置の出力データを蓄積し、再生するためのものである。情報記録再生システムは、同図に示すように、サーバ１と、デジタルタコグラフ３と、ドライバステータスモニタ（ＤＳＭ：Driver Status Monitor、以下「ＤＳＭ」という）４と、を備えている。なお、本実施形態に係る情報記録再生装置は、具体的にはサーバ１によって実現される。

デジタルタコグラフ３およびＤＳＭ４は、車両２に車載機として搭載されている。車両２は、外部と通信可能な移動体であり、デジタルタコグラフ３およびＤＳＭ４に加えて、通信部５と、ＥＣＵ（Electronic Control Unit）６と、スピーカ７と、マイク８と、を備えている。なお、図１では、車両２を一台のみ図示しているが、車両２は複数台であってもよい。

サーバ１、デジタルタコグラフ３、ＤＳＭ４および車両２の通信部５は、ネットワークＮＷを通じて相互に通信可能に構成されている。このネットワークＮＷは、例えばインターネット回線網、携帯電話回線網等から構成される。

（サーバ）
サーバ１は、デジタルタコグラフ（第二装置）３の出力データ（車両挙動情報（第二情報）等）とＤＳＭ（第一装置）４の出力データ（運転者挙動情報（第一情報）等）とをネットワークＮＷ経由で取得し、これらのデータを同期再生可能な状態で蓄積し、同期再生するためのものである。サーバ１は、制御部１１と、通信部１２と、記憶部１３と、表示部（ディスプレイ）１４と、スピーカ１５と、マイク１６と、を備えている。

制御部１１は、具体的には、ＣＰＵ（Central Processing Unit）、ＤＳＰ（Digital Signal Processor）、ＦＰＧＡ（Field-Programmable Gate Array）等からなるプロセッサと、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）等からなるメモリ（主記憶部）と、を備えている。

制御部１１は、記憶部１３に格納されたプログラムを主記憶部の作業領域にロードして実行し、プログラムの実行を通じて各構成部等を制御することにより、所定の目的に合致した機能を実現する。制御部１１は、プログラムの実行を通じて、同期部１１１および表示制御部１１２として機能する。

同期部１１１は、ネットワークＮＷ経由で受信した車両挙動情報および運転者挙動情報を、同期再生可能に記憶部１３に蓄積する。同期部１１１は、デジタルタコグラフ３から車両挙動情報を、ＤＳＭ４から運転者挙動情報をそれぞれ受信（取得）した後、車両挙動情報および運転者挙動情報に含まれる時刻情報に基づいて、両者を時間的に同期させて記憶部１３に蓄積する。

ここで、車両挙動情報とは、デジタルタコグラフ３によって生成される、車両２の挙動に関する情報である。車両挙動情報には、センサ群３６によって検出された車速、ジャイロ（角速度）、他車との車間距離、Ｇ値（前後Ｇ、左右Ｇ、縦Ｇ）等のセンサ値と、測位部３５によって検出された車両位置（座標）と、車両２の挙動異常の有無に関する情報と、時刻情報と、が含まれる。車両２の挙動異常としては、例えば車両２の急加速、急旋回、他車両への急接近、または白線外へのはみ出し等が挙げられる。デジタルタコグラフ３は、これらの車両挙動情報とともに、カメラ３４によって撮像した映像（画像）を、サーバ１の同期部１１１に対して出力する。

また、運転者挙動情報とは、ＤＳＭ４によって生成される、車両２の運転者の挙動に関する情報である。運転者挙動情報には、例えば運転者の脇見（よそ見）、閉眼（居眠り）、頭部の揺れ、運転姿勢の乱れ等の、運転者の挙動異常の有無に関する情報が含まれる。ＤＳＭ４は、これらの運転者挙動情報とともに、カメラ４４によって撮像した映像（画像）を、サーバ１の同期部１１１に対して出力する。

本実施形態に係る情報記録再生システムで運用される車両２は、例えば決まった時間に決まったルートを走行する運搬車、路線バス等を想定している。すなわち、車両２の運転者は、運転を専門とするプロドライバを想定している。そのため、車両挙動情報および運転者挙動情報は、同じ時間（時間帯）に同じルートを繰り返し走行する車両２から受信した情報といえる。

表示制御部１１２は、車両挙動情報および運転者挙動情報を同期させて表示部１４に表示させる。図２は、表示制御部１１２が表示部１４に表示させる表示画面９の一例を示している。表示画面９は、例えばデジタルタコグラフ３が備えるカメラ３４のうち、車両２内の運転者を撮像するカメラ３４によって撮像された映像（以下、「車内映像」という）を表示する映像表示領域９１と、車内映像を再生する際の操作が可能な操作領域９２と、運転者挙動情報が表示される運転者挙動情報表示領域９３と、車両挙動情報が表示される車両挙動情報表示領域９４と、から構成される。なお、同図に示した映像表示領域９１では、車内映像を表示しているが、デジタルタコグラフ３が備えるカメラ３４のうち、車両２外を撮像するカメラ３４によって撮像された映像（以下、「車外映像」という）を表示してもよい。また、表示制御部１１２は、映像表示領域９１内に、車内映像と車外映像を切り替えることができる切り替えボタン等を表示させてもよい。

表示制御部１１２は、例えば運転席に着座している運転者Ｄｒを写した車内映像を、映像表示領域９１に表示させる。また、表示制御部１１２は、例えば車内映像の再生ボタン、一時停止ボタン、停止ボタン、巻き戻しボタンおよび早送りボタン等の操作ボタン群９２１と、シークバー９２２とを、操作領域９２に表示させる。操作ボタン群９２１およびシークバー９２２は、マウス等のポインティングデバイスによって操作可能である。また、シークバー９２２の可動方向（図２の左右方向）は、時間軸方向と一致しており、シークバー９２２を左右に動かすことにより、対応する時刻の車内映像を映像表示領域９１に表示させることができる。

表示制御部１１２は、車両挙動情報および運転者挙動情報を同期させて表示部１４に表示させる際に、運転者の挙動異常が発生している区間を、挙動異常の種類（例えば運転者の脇見、閉眼、頭部の揺れ、運転姿勢の乱れ等）に応じて色分けして表示させる。表示制御部１１２は、例えば図２に示すように、運転者挙動情報表示領域９３に、所定時間ごとに区切ったマス目状の領域を時間軸方向に並べて表示し、挙動異常の種類に応じて各マス目を色分けして表示させる。例えば同図のＡ部のマス目に表示された色は、運転者が閉眼していることを示している。このように、運転者の挙動異常が発生している区間を色分けして表示することにより、運転者の挙動異常を一目で把握することが可能となる。

表示制御部１１２は、例えば図２に示すように、車両挙動情報表示領域９４に、車速、ジャイロ、他車との車間距離、Ｇ値等の情報を示すグラフを表示させる。また、表示制御部１１２は、同図に示したグラフの他に、例えば地図上に車両位置の座標を表示させたり、あるいは車両２の挙動異常が発生している区間を、挙動異常の種類（例えば車両２の急加速、急旋回、他車両への急接近、または白線外へのはみ出し等）に応じて色分けして表示してもよい。このように、車両２の挙動をグラフで示したり、あるいは車両２の挙動異常が発生している区間を色分けして表示することにより、車両２の挙動異常を一目で把握することが可能となる。

表示制御部１１２は、車両挙動情報および運転者挙動情報を同期させて表示部１４に表示させる際に、運転者挙動情報に含まれている運転者の挙動異常が継続している区間のみを表示させてもよい。すなわち、表示制御部１１２は、図２のＡ部に示すように、運転者の同じ挙動異常（例えば閉眼）が継続している部分の情報および映像のみを抜き出して表示部１４に表示させてもよい。これにより、サーバ１を管理するユーザ（以下、「オペレータ」という）は、運転者の挙動異常が発生している可能性の高い部分だけを優先的に確認することができる。

また、表示制御部１１２は、車両挙動情報および運転者挙動情報を同期させて表示部１４に表示させる際に、車両挙動情報に含まれている車両２の挙動異常が継続している部分の情報および映像のみを抜き出して表示部１４に表示させてもよい。これにより、オペレータは、車両２の挙動異常が発生している可能性の高い部分だけを優先的に確認することができる。

通信部１２は、例えばＬＡＮ（Local Area Network）インターフェースボード、無線通信のための無線通信回路等から構成される。通信部１２は、公衆通信網であるインターネット等のネットワークＮＷに接続されている。そして、通信部１２は、当該ネットワークＮＷに接続することにより、デジタルタコグラフ３、ＤＳＭ４および車両２の通信部５との間で通信を行う。

記憶部１３は、ＥＰＲＯＭ（Erasable Programmable ROM）、ハードディスクドライブ（Hard Disk Drive：ＨＤＤ）およびリムーバブルメディア等の記録媒体から構成される。リムーバブルメディアとしては、例えばＵＳＢ（Universal Serial Bus）メモリ、ＣＤ（Compact Disc）、ＤＶＤ（Digital Versatile Disc）、ＢＤ（Blu-ray（登録商標） Disc）のようなディスク記録媒体が挙げられる。また、記憶部１３には、オペレーティングシステム（Operating System：ＯＳ）、各種プログラム、各種テーブル、各種データベース等が格納可能である。

記憶部１３は、車両挙動ＤＢ１３１と、運転者挙動ＤＢ１３２と、を備えている。これらのデータベース（ＤＢ）は、制御部１１によって実行されるデータベース管理システム（Database Management System：ＤＢＭＳ）のプログラムが、記憶部１３に記憶されるデータを管理することによって構築される。

車両挙動ＤＢ１３１は、例えばデジタルタコグラフ３から受信した車両挙動情報が索出可能に格納されたリレーショナルデータベースによって構成されている。また、運転者挙動ＤＢ１３２は、例えばＤＳＭ４から受信した運転者挙動情報が索出可能に格納されたリレーショナルデータベースによって構成されている。

表示部１４は、ＬＣＤ（液晶ディスプレイ）またはＯＬＥＤ（有機ＥＬディスプレイ）等から構成される。表示部１４は、表示制御部１１２の制御に基づいて、車両挙動情報および運転者挙動情報を同期させて表示する。なお、表示部１４は、表示制御部１１２の制御に基づいて、車両挙動情報および運転者挙動情報をリアルタイムで同期させながら表示することも可能であり、あるいは記憶部１３に別々のタイミングで格納された車両挙動情報および運転者挙動情報を、後から同期させながら表示することも可能である。

スピーカ１５は、サーバ１を管理するオペレータに対して音声情報を出力する出力部である。スピーカ１５は、例えばオペレータがネットワークＮＷ経由で車両２の運転者と対話を行う際に用いられる。また、スピーカ１５は、車両または運転者の挙動異常が発生した際に、オペレータにアラートを報知する用途で用いられてもよい。

マイク１６は、オペレータからの音声入力を受け付ける入力部である。マイク１６は、例えばオペレータがネットワークＮＷ経由で車両２の運転者と対話を行う際に用いられる。

デジタルタコグラフ（車両情報取得部）３は、制御部３１と、通信部３２と、記憶部３３と、カメラ３４と、測位部３５と、センサ群３６と、を備えている。制御部３１、通信部３２および記憶部３３は、物理的には制御部１１、通信部１２および記憶部１３と同様である。制御部３１は、記憶部３３に格納されたプログラムの実行を通じて、車両挙動検出部３１１および報知部３１２として機能する。

車両挙動検出部３１１は、センサ群３６から入力されるセンサデータに基づいて、車両２の挙動（例えば車速、ジャイロ、他車との車間距離、Ｇ値、車両位置等）および車両２の挙動異常（例えば車両２の急加速、急旋回、他車両への急接近、または白線外へのはみ出し等）の有無を検出する。

車両挙動検出部３１１は、例えば車速、ジャイロ、他車との車間距離、Ｇ値、白線との距離等に対して予め閾値（第二の判定基準）を設定し、センサ群３６から入力されたセンサデータが閾値を超えた場合、あるいは閾値を超えた経過時間に基づいて、「車両２の挙動異常あり」と判定する。

報知部３１２は、車両挙動検出部３１１によって車両２の挙動異常が検出された際に、車両２に搭載されたスピーカ７を通じて運転者に対してアラートを報知する。なお、報知部３１２は、アラートに代えて、挙動異常の改善を促す音声（例えば白線外へのはみ出しの場合「白線をはみ出しています」等の音声）を流してもよい。また、デジタルタコグラフ３自体がスピーカを備えていてもよく、当該スピーカからアラートまたは音声を流してもよい。

カメラ３４は、例えばＣＣＤ（Charge Coupled Device）またはＣＩＳ（CMOS Image Sensor）等の撮像素子を内蔵するカメラである。カメラ３４は、車内外に配置されており、例えば車両２の前方を撮像できる位置、車両２の後方を撮像できる位置、車両２内の運転者を撮像できる位置等にそれぞれ配置される。カメラ３４は、撮像した映像（画像）データを車両挙動検出部３１１に対して出力する。

測位部３５は、ＧＰＳ（Global Positioning System）衛星からの電波を受信して、車両位置を検出する。なお、車両位置の検出方法は、ＧＰＳ衛星を利用した方法に限定されず、例えばＬｉＤＡＲ（Light Detection and Ranging、Laser Imaging Detection and Ranging）と３次元デジタル地図とを組み合わせた方法等を利用してもよい。

センサ群３６は、例えば車速センサ、エンジン回転数センサ、Ｇセンサおよびジャイロセンサ等から構成される。センサ群３６は、検出した各センサデータを制御部３１に出力する。

ＤＳＭ（運転者情報取得部）４は、制御部４１と、通信部４２と、記憶部４３と、カメラ４４と、を備えている。制御部４１、通信部４２および記憶部４３は、物理的には制御部１１、通信部１２および記憶部１３と同様である。制御部４１は、記憶部４３に格納されたプログラムの実行を通じて、運転者挙動検出部４１１および報知部４１２として機能する。

運転者挙動検出部４１１は、カメラ４４によって撮像された画像を解析することにより、運転者の挙動異常を検出する。なお、運転者挙動検出部４１１は、運転者の挙動異常を検出する際に、ディープラーニング等の機械学習技術を利用してもよい。

運転者挙動検出部４１１は、例えば画像から解析した運転者の顔の角度、眼の開き具合、頭部および身体の位置等に対して予め閾値（第一の判定基準）を設定し、画像解析結果が閾値を超えた場合、あるいは閾値を超えた経過時間に基づいて、「運転者の挙動異常あり」と判定する。

報知部４１２は、運転者挙動検出部４１１によって運転者の挙動異常が検出された際に、車両２に搭載されたスピーカ７を通じて運転者に対してアラートを報知する。なお、報知部４１２は、アラートに代えて、挙動異常の改善を促す音声（例えば脇見の場合「前方に注意を払って下さい」等の音声）を流してもよい。また、ＤＳＭ４自体がスピーカを備えていてもよく、当該スピーカからアラートまたは音声を流してもよい。

カメラ４４は、例えば赤外線カメラからなり、車両２内の運転者を撮像できる位置に配置されている。カメラ４４は、撮像した映像（画像）データを車両挙動検出部３１１に対して出力する。

通信部５は、例えばＤＣＭ（Data Communication Module）等から構成され、ネットワークＮＷを介した無線通信により、サーバ１との間で通信を行う。ＥＣＵ６は、車両２に搭載される各種構成要素の動作を統括的に制御する。スピーカ７およびマイク８は、車両２内に設けられており、物理的にはスピーカ１５およびマイク１６と同様である。なお、スピーカ７およびマイク８は、デジタルタコグラフ３およびＤＳＭ４のそれぞれに設けられていてもよい。

（情報記録再生方法）
本実施形態に係る情報記録再生システムが実行する情報記録再生方法について、図３を参照しながら説明する。なお、以下で説明する処理フローは、車両２のイグニッションスイッチがオフ状態からオン状態に切り替えられたタイミングで開始となり、ステップＳ１の処理に進む。また、デジタルタコグラフ３における処理（ステップＳ１〜Ｓ３）と、ＤＳＭ４における処理（ステップＳ４〜Ｓ６）とは、同図に示すように異なるタイミングで行ってもよく、あるいは同じタイミングで行ってもよい。

まず、デジタルタコグラフ３の制御部３１は、車両挙動情報のデータ記録を開始する（ステップＳ１）。続いて、車両挙動検出部３１１は、センサ群３６から入力されるセンサデータに基づいて、車両２の挙動を検出する（ステップＳ２）。続いて、車両挙動検出部３１１は、車両挙動情報およびカメラ３４で撮像した映像（画像）をサーバ１に送信する（ステップＳ３）。

続いて、ＤＳＭ４の制御部４１は、運転者挙動情報のデータ記録を開始する（ステップＳ４）。続いて、運転者挙動検出部４１１は、カメラ４４から入力される画像に基づいて、運転者の挙動を検出する（ステップＳ５）。続いて、運転者挙動検出部４１１は、運転者挙動情報およびカメラ４４で撮像した映像（画像）をサーバ１に送信する（ステップＳ６）。

続いて、サーバ１の同期部１１１は、デジタルタコグラフ３から受信した車両挙動情報およびＤＳＭ４から受信した運転者挙動情報を、同期再生可能に記憶部１３に蓄積する（ステップＳ７）。以上により情報記録再生方法の処理は終了する。

以上説明したように、本実施形態に係る情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムによれば、車両挙動情報および運転者挙動情報を後から同期再生することが可能であるため、挙動異常の原因の解析が容易となり、解析用データとしての有用性が向上する。すなわち、車両２の挙動と運転者の挙動を関連付けて分析することにより、運転者の挙動異常（例えば居眠り）の原因をつきとめることができるため、運転者の挙動異常を未然に防止することも可能となる。

［実施形態２］
本開示の実施形態２に係る情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムについて、図４を参照しながら説明する。

（情報記録再生システム）
本実施形態に係る情報記録再生システムは、サーバ１に代えてサーバ１Ａを備えること以外は、実施形態１に係る情報記録再生システムと同様の構成を備えている。そのため、以下ではサーバ１Ａの構成についてのみ説明を行う。

（サーバ）
サーバ１Ａは、制御部１１Ａと、通信部１２と、記憶部１３と、表示部１４と、スピーカ１５と、マイク１６と、を備えている。制御部１１Ａは、物理的には制御部１１と同様である。制御部１１Ａは、記憶部１３に格納されたプログラムの実行を通じて、同期部１１１、表示制御部１１２、分析部１１３および学習部１１４として機能する。

ここで、デジタルタコグラフ３の車両挙動検出部３１１は、予め定めた第一の判定基準（閾値）に基づいて、車両２の挙動異常の有無を判定する。また、ＤＳＭ４の運転者挙動検出部４１１は、予め定めた第二の判定基準（閾値）に基づいて、運転者の挙動異常の有無を判定する。

そこで、本実施形態に係る分析部１１３は、車両挙動検出部３１１から取得した車両挙動情報および運転者挙動検出部４１１から取得した運転者動情報を分析し、その分析結果に基づいて、第一の判定基準および第二の判定基準を変更する。このように、車両挙動情報および運転者挙動情報の分析結果をフィードバックし、挙動異常を検出する際の閾値（第一、第二の判定基準）を変更することにより、挙動異常の検出精度を向上させることができる。

また、本実施形態に係る学習部１１４は、ＤＳＭ４の運転者挙動検出部４１１が判定した運転者の挙動異常の有無と、実際の挙動異常の有無との関係を機械学習することにより学習モデルを生成する。そして、運転者挙動検出部４１１による判定の代わりに、当該学習モデルを用いて、運転者の挙動異常の有無を判定する。このように、運転者の挙動異常の有無と、実際の挙動異常の有無との関係を学習させた学習モデルを利用することにより、挙動異常の検出精度を向上させることができる。

以上説明したように、本実施形態に係る情報記録再生装置、情報記録再生プログラムおよび情報記録再生システムによれば、車両２および運転者の挙動異常の検出精度が向上する。

さらなる効果や変形例は、当業者によって容易に導き出すことができる。よって、本発明のより広範な態様は、以上のように表わしかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付のクレームおよびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。

例えば、実施形態１，２において、車両挙動情報および運転者挙動情報の同期のタイミングは特に限定されない。実施形態１，２では、デジタルタコグラフ３から受信した車両挙動情報と、ＤＳＭ４から受信した運転者挙動情報とを、時間的に同期させて記憶部１３に蓄積していたが、車両挙動情報および運転者挙動情報を時間的に同期させていない状態で記憶部１３に蓄積し、再生する際に同期させてもよい。この場合、表示制御部１１２は、記憶部１３から車両挙動情報および運転者挙動情報を読み込んだ後、車両挙動情報および運転者挙動情報に含まれる時刻情報に基づいて両者を時間的に同期させながら、表示部１４に表示させる。

１，１Ａサーバ
１１，１１Ａ制御部
１１１同期部
１１２表示制御部
１１３分析部
１１４学習部
１２通信部
１３記憶部
１３１車両挙動ＤＢ
１３２運転者挙動ＤＢ
１４表示部
１５スピーカ
１６マイク
２車両
３デジタルタコグラフ
３１制御部
３１１車両挙動検出部
３１２報知部
３２通信部
３３記憶部
３４カメラ
３５測位部
３６センサ群
４ドライバステータスモニタ（ＤＳＭ）
４１制御部
４１１運転者挙動検出部
４１２報知部
４２通信部
４３記憶部
４４カメラ
５通信部
６ＥＣＵ
７スピーカ
８マイク
９表示画面
９１映像表示領域
９２操作領域
９２１操作ボタン群
９２２シークバー
９３運転者挙動情報表示領域
９４車両挙動情報表示領域
Ｄｒ運転者
ＮＷネットワーク

Claims

ハードウェアを有するプロセッサとを備え、
前記プロセッサは、
車両に搭載された第一装置から、運転者の挙動に関する情報を示す第一情報を取得し、
前記車両に搭載された第二装置から、前記車両の挙動に関する情報を示す第二情報を取得し、
前記第一情報および前記第二情報を、同期再生可能にメモリに蓄積する、
情報記録再生装置。
前記第一情報および前記第二情報を表示するディスプレイを備え、
前記プロセッサは、前記第一情報および前記第二情報を同期させて前記ディスプレイに表示させる際に、前記第一情報に含まれている前記運転者の挙動異常または前記第二情報に含まれている前記車両の挙動異常が継続している区間のみを表示させる、
請求項１に記載の情報記録再生装置。
前記プロセッサは、前記第一情報および前記第二情報を同期させて前記ディスプレイに表示させる際に、前記運転者の挙動異常が発生している区間を、挙動異常の種類に応じて色分けして表示させる、
請求項２に記載の情報記録再生装置。
前記第一装置は、予め定めた第一の判定基準に基づいて、前記運転者の挙動異常の有無を判定し、
前記第二装置は、予め定めた第二の判定基準に基づいて、前記車両の挙動異常の有無を判定し、
前記プロセッサは、前記第一情報および前記第二情報を分析し、その分析結果に基づいて、前記第一の判定基準および前記第二の判定基準を変更する、
請求項１から請求項３のいずれか一項に記載の情報記録再生装置。
前記プロセッサは、
前記第一装置が判定した前記運転者の挙動異常の有無と、実際の挙動異常の有無との関係を機械学習することにより学習モデルを生成し、
前記第一装置による判定の代わりに、前記学習モデルを用いて、前記運転者の挙動異常の有無を判定する、
請求項４に記載の情報記録再生装置。
前記第一情報および前記第二情報は、同じ時間に同じルートを繰り返し走行する車両から取得した情報である、
請求項１から請求項５のいずれか一項に記載の情報記録再生装置。
前記第一装置は、前記運転者を撮像するカメラを備えるドライバステータスモニタであり、
前記第二装置は、車内外に配置されたカメラおよびセンサを備えるデジタルタコグラフであり、
前記運転者の挙動異常は、前記運転者のよそ見、閉眼、頭部の揺れ、運転姿勢の乱れの少なくとも一つを含み、
前記車両の挙動異常は、前記車両の急加速、急旋回、他車両への急接近、または白線外へのはみ出しの少なくとも一つを含む、
請求項２から請求項６のいずれか一項に記載の情報記録再生装置。
ハードウェアを有するプロセッサに、
車両に搭載された第一装置から、運転者の挙動に関する情報を示す第一情報を取得し、
前記車両に搭載された第二装置から、前記車両の挙動に関する情報を示す第二情報を取得し、
前記第一情報および前記第二情報を、同期再生可能に情報記録再生装置が備えるメモリに蓄積する、
ことを実行させる情報記録再生プログラム。
前記プロセッサに、前記第一情報および前記第二情報を同期させて、前記第一情報および前記第二情報を表示するディスプレイに表示させる際に、前記第一情報に含まれている前記運転者の挙動異常または前記第二情報に含まれている前記車両の挙動異常が継続している区間のみを表示させる、
ことを実行させる請求項８に記載の情報記録再生プログラム。
前記プロセッサに、前記第一情報および前記第二情報を同期させて前記ディスプレイに表示させる際に、前記運転者の挙動異常が発生している区間を、挙動異常の種類に応じて色分けして表示させる、
ことを実行させる請求項９に記載の情報記録再生プログラム。
前記第一装置は、予め定めた第一の判定基準に基づいて、前記運転者の挙動異常の有無を判定し、
前記第二装置は、予め定めた第二の判定基準に基づいて、前記車両の挙動異常の有無を判定し、
前記プロセッサに、前記第一情報および前記第二情報を分析し、その分析結果に基づいて、前記第一の判定基準および前記第二の判定基準を変更する、
ことを実行させる請求項８から請求項１０のいずれか一項に記載の情報記録再生プログラム。
前記プロセッサに、
前記第一装置が判定した前記運転者の挙動異常の有無と、実際の挙動異常の有無との関係を機械学習することにより学習モデルを生成し、
前記第一装置による判定の代わりに、前記学習モデルを用いて、前記運転者の挙動異常の有無を判定する、
ことを実行させる請求項１１に記載の情報記録再生プログラム。
前記第一情報および前記第二情報は、同じ時間に同じルートを繰り返し走行する車両から取得した情報である、
請求項８から請求項１２のいずれか一項に記載の情報記録再生プログラム。
前記第一装置は、前記運転者を撮像するカメラを備えるドライバステータスモニタであり、
前記第二装置は、車内外に配置されたカメラおよびセンサを備えるデジタルタコグラフであり、
前記運転者の挙動異常は、前記運転者のよそ見、閉眼、頭部の揺れまたは運転姿勢の乱れの少なくとも一つを含み、
前記車両の挙動異常は、前記車両の急加速、急旋回、他車両への急接近、または白線外へのはみ出しの少なくとも一つを含む、
請求項９から請求項１３のいずれか一項に記載の情報記録再生プログラム。
ハードウェアを有する第一のプロセッサであって、車両に搭載され、運転者の挙動に関する情報を示す第一情報を送信する第一のプロセッサを有する第一装置と、
ハードウェアを有する第二のプロセッサであって、前記車両に搭載され、前記車両の挙動に関する情報を示す第二情報を送信する第二のプロセッサを有する第二装置と、
ハードウェアを有する第三のプロセッサであって、前記第一装置から前記第一情報を取得し、前記第二装置から前記第二情報を取得し、前記第一情報および前記第二情報を、同期再生可能にメモリに蓄積する第三のプロセッサを有するサーバと、
を備える情報記録再生システム。
前記サーバは、前記第一情報および前記第二情報を表示するディスプレイを備え、
前記第三のプロセッサは、前記第一情報および前記第二情報を同期させて前記ディスプレイに表示させる際に、前記第一情報に含まれている前記運転者の挙動異常または前記第二情報に含まれている前記車両の挙動異常が継続している区間のみを表示させる、
請求項１５に記載の情報記録再生システム。
前記第三のプロセッサは、前記第一情報および前記第二情報を同期させて前記ディスプレイに表示させる際に、前記運転者の挙動異常が発生している区間を、挙動異常の種類に応じて色分けして表示させる、
請求項１６に記載の情報記録再生システム。
前記第一のプロセッサは、予め定めた第一の判定基準に基づいて、前記運転者の挙動異常の有無を判定し、
前記第二のプロセッサは、予め定めた第二の判定基準に基づいて、前記車両の挙動異常の有無を判定し、
前記第三のプロセッサは、前記第一情報および前記第二情報を分析し、その分析結果に基づいて、前記第一の判定基準および前記第二の判定基準を変更する、
請求項１５から請求項１７のいずれか一項に記載の情報記録再生システム。
前記第三のプロセッサは、
前記第一装置が判定した前記運転者の挙動異常の有無と、実際の挙動異常の有無との関係を機械学習することにより学習モデルを生成し、
前記第一装置による判定の代わりに、前記学習モデルを用いて、前記運転者の挙動異常の有無を判定する、
請求項１８に記載の情報記録再生システム。
前記第一情報および前記第二情報は、同じ時間に同じルートを繰り返し走行する車両から取得した情報である、
請求項１５から請求項１９のいずれか一項に記載の情報記録再生システム。