JP2024021176A - 情報処理装置および情報処理方法 - Google Patents
情報処理装置および情報処理方法 Download PDFInfo
- Publication number
- JP2024021176A JP2024021176A JP2022123830A JP2022123830A JP2024021176A JP 2024021176 A JP2024021176 A JP 2024021176A JP 2022123830 A JP2022123830 A JP 2022123830A JP 2022123830 A JP2022123830 A JP 2022123830A JP 2024021176 A JP2024021176 A JP 2024021176A
- Authority
- JP
- Japan
- Prior art keywords
- sign
- vehicle
- driver
- area
- information processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 29
- 238000003672 processing method Methods 0.000 title claims description 9
- 238000001514 detection method Methods 0.000 claims description 73
- 238000000034 method Methods 0.000 claims description 18
- 238000004891 communication Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 13
- 238000013473 artificial intelligence Methods 0.000 description 11
- 239000003550 marker Substances 0.000 description 10
- 238000012545 processing Methods 0.000 description 9
- 238000012546 transfer Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000009434 installation Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000006872 improvement Effects 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
開示の実施形態は、情報処理装置および情報処理方法に関する。
従来、車載カメラの撮像画像に基づいて進入禁止や制限速度、一時停止といった特定の道路標識(以下、単に「標識」と言う)を検知する標識検知装置が知られている(たとえば、特許文献1参照)。
標識検知装置は、検知した標識をたとえばカーナビゲーション装置のディスプレイや、インストルメント・パネル付近に設けられたヘッドアップディスプレイといった車載ディスプレイを介してドライバへ通知する。
しかしながら、上述した従来技術には、検知した標識をより効果的に通知するうえで、さらなる改善の余地がある。
たとえば、ドライバが普段走行するエリアにはない見慣れない標識が通知対象とされない場合、規制内容の理解不足による交通違反や事故等の誘因となるおそれがある。また、ドライバが普段走行するエリアでは、走り慣れた道であるにも関わらず通知対象の標識が検知されるたびにドライバへの通知が行われるため、ドライバに煩わしさを感じさせてしまうおそれがある。
実施形態の一態様は、上記に鑑みてなされたものであって、検知した標識をより効果的に通知することができる情報処理装置および情報処理方法を提供することを目的とする。
実施形態の一態様に係る情報処理装置は、コントローラを備える。前記コントローラは、車載カメラの撮像画像から標識を検知して予め設定された通知条件に基づき、検知した前記標識の内容をドライバへ通知する。また、前記コントローラは、車両が予め設定された第1エリアの外である第2エリアを走行する場合に、前記第1エリアでの通知対象である第1標識以外の第2標識に関する標識情報を取得して、前記車両が前記第2エリアを走行中は前記第2標識を検知した場合のみ前記ドライバへ通知する前記通知条件を設定する。
実施形態の一態様によれば、検知した標識をより効果的に通知することができる。
以下、添付図面を参照して、本願の開示する情報処理装置および情報処理方法の実施形態を詳細に説明する。なお、以下に示す実施形態によりこの発明が限定されるものではない。
また、以下では、実施形態に係る情報処理装置が、車両に搭載されるドライブレコーダ10,10Aまたはこれらドライブレコーダ10,10Aと通信可能に設けられたサーバ装置100であるものとする。また、以下では、実施形態に係る情報処理方法が、ドライブレコーダ10,10Aまたはサーバ装置100が実行する標識検知方法であるものとする。
(第1の実施形態)
まず、第1の実施形態に係る標識検知方法の概要について図1を用いて説明する。図1は、第1の実施形態に係る標識検知方法の概要説明図である。
まず、第1の実施形態に係る標識検知方法の概要について図1を用いて説明する。図1は、第1の実施形態に係る標識検知方法の概要説明図である。
第1の実施形態に係る標識検知方法は、たとえば車両に搭載されるドライブレコーダ10が実行する情報処理方法である。
ドライブレコーダ10の基本動作から説明する。ドライブレコーダ10は、車両の起動中に、ドライブレコーダ10の有するカメラ11a(図3参照)によって撮像した車外映像を含む記録データを繰り返し上書きしながら常時記録することができる。
また、ドライブレコーダ10は、車両の起動中に、事故発生等の特定のイベントを検知した場合に、検知時点の前後一定時間分の記録データを上書き禁止の不揮発性記録であるイベント記録方式で記録することができる。
また、ドライブレコーダ10は、このイベント記録方式で記録する記録データのうち予め転送対象と指定された特定のイベントの記録データについては、ドライブレコーダ10と通信可能に設けられたサーバ装置100(図2参照)へ転送することができる。サーバ装置100は、たとえばクラウドサーバとして実現され、ドライブレコーダ10から転送された記録データに基づいて事故発生時等の状況を解析する。
また、ドライブレコーダ10は、標識検知機能を有する。ドライブレコーダ10は、たとえば車両前方を撮像した車外映像の画像解析を行い、その結果に基づいて進入禁止や制限速度、一時停止といった標識を検知する。また、ドライブレコーダ10は、検知した標識をたとえば車載ディスプレイなどを介してドライバへ通知する。
ところで、これまで述べたドライブレコーダ10の基本動作には、検知した標識をより効果的に通知するうえで、さらなる改善の余地がある。
既に述べた通り、たとえばドライバが普段走行するエリアにはない見慣れない標識が通知対象とされない場合、規制内容の理解不足による交通違反や事故等の誘因となるおそれがある。また、ドライバが普段走行するエリアでは、走り慣れた道であるにも関わらず通知対象の標識が検知されるたびにドライバへの通知が行われるため、ドライバに煩わしさを感じさせてしまうおそれがある。
そこで、第1の実施形態に係る標識検知方法では、ドライブレコーダ10のコントローラ14(図3参照)が、カメラ11aの撮像画像から標識を検知して予め設定された通知条件に基づき、検知した上記標識の内容をドライバへ通知することとした。また、コントローラ14は、車両が予め設定された第1エリアの外である第2エリアを走行する場合に、第1エリアでの通知対象である第1標識以外の第2標識に関する標識情報を取得して、上記車両が第2エリアを走行中は第2標識を検知した場合のみ上記ドライバへ通知する上記通知条件を設定することとした。
具体的には、図1に示すように、第1の実施形態に係る標識検知方法では、まずコントローラ14はドライブレコーダ10の起動時に基準エリアR1を設定する(ステップS1)。基準エリアR1は、ドライブレコーダ10を搭載する車両が普段走行する走行エリアである。基準エリアR1は、第1エリアの一例に相当する。
コントローラ14は、たとえばドライブレコーダ10に事前に登録されたドライバの居住エリアに関する情報や、ドライブレコーダ10に保持されている普段の走行エリアに関する情報に基づいて基準エリアR1を設定する。
そして、コントローラ14は、車両が基準エリアR1内を走行中は、基準エリアR1内の通知条件に沿って検知した標識を通知する。たとえばコントローラ14は、車両が基準エリアR1内を走行中は進入禁止や制限速度、一時停止といった特定の標識M1,M2,M3…を通知対象とする。標識M1,M2,M3…は第1標識の一例に相当する。
なお、コントローラ14は、基準エリアR1内で検知して通知した標識M1,M2,M3…の過去の通知数に応じ、たとえば通知数が多い標識M1,M2,M3…については通知対象から除外するようにしてもよい。この点については、第2の実施形態において後述する。
そして、第1の実施形態に係る標識検知方法では、コントローラ14は、車両が基準エリアR1を出て基準エリアR1の外であるエリアR2を走行中は、基準エリアR1にはない標識を検知した場合のみドライバへ通知する(ステップS2)。基準エリアR1にはない標識とは、基準エリアR1に物理的に存在しない標識の他、基準エリアR1には存在するが基準エリアR1では検知対象外である標識を含む。
図1の例では、コントローラ14は、エリアR2を走行中は基準エリアR1にはない最低速度の標識M4を検知した場合、これをドライバへ通知する。また、コントローラ14は、エリアR2内でも特にエリアR3においてエリア特有の標識が存在する場合、エリアR3を走行中に当該標識を検知した場合のみドライバへ通知する(ステップS2-1)。なお、エリアR2,R3は、第2エリアの一例に相当する。
図1の例では、コントローラ14は、エリアR3を走行中はエリアR3に特有の馬横断ありの標識M5を検知した場合のみ、これをドライバへ通知する。すなわち、ドライブレコーダ10は、ステップS2,S2-1においては、基準エリアR1内での通知対象である標識M1,M2,M3…を通知対象としない。なお、標識M4,M5は、第2標識の一例に相当する。
したがって、第1の実施形態に係る標識検知方法によれば、車両が基準エリアR1の外であるエリアR2,R3を走行中は、ドライバが見慣れていない標識M4,M5を通知することで、規制内容の理解不足による交通違反や事故等の低減を図ることができる。また、車両がエリアR2,R3を走行中は、少なくともドライバが基準エリアR1内において見慣れている標識M1,M2,M3…を通知しないことでドライバが感じる煩わしさを軽減することができる。
なお、図1には基準エリアR1および基準エリアR1の外であるエリアR2,R3をごく模式的に閉曲線で囲まれた領域として示したが、これらエリアの形状を限定するものではない。各エリアは、都道府県や市区町村といった行政区画で区切られた形状であってもよいし、道路区画に沿ってあるいは道路区画には関わりなく設定された任意の形状であってもよい。
以下、上述した実施形態に係る標識検知方法を適用した標識検知システム1の構成例について、より具体的に説明する。
図2は、実施形態に係る標識検知システム1の構成例を示す図である。標識検知システム1は、1以上のドライブレコーダ10と、サーバ装置100とを含む。
各ドライブレコーダ10と、サーバ装置100とは、インターネットや携帯電話回線網、C-V2X(Cellular Vehicle to Everything)通信網等であるネットワークNを介して相互に通信可能に接続される。
ドライブレコーダ10は、上述したように、カメラ11aによって撮影した車外映像を含む記録データを繰り返し上書きしながら常時記録する。
また、ドライブレコーダ10は、事故発生等の特定のイベントを検知した場合に、検知時点の前後一定時間分の記録データを上書き禁止の不揮発性記録であるイベント記録方式で記録する。
また、ドライブレコーダ10は、イベント記録方式での記録と同時に、当該記録データをサーバ装置100へ転送する。
また、ドライブレコーダ10は、カメラ11aの撮像画像から標識を検知して予め設定された通知条件に基づき、検知した上記標識の内容をドライバへ通知する。また、ドライブレコーダ10は、車両が予め設定された基準エリアR1の外であるエリアR2,R3を走行する場合に、基準エリアR1での通知対象である標識M1,M2,M3…以外の標識M4,M5に関する標識情報を取得して、車両がエリアR2,R3を走行中は標識M4,M5を検知した場合のみドライバへ通知する通知条件を設定する。なお、ドライブレコーダ10は、たとえば事前に登録された上記ドライバの居住地に関する情報または車両の過去の走行履歴に関する履歴情報に基づいて基準となる基準エリアR1を設定する。
また、ドライブレコーダ10は、車両の過去の走行履歴や、過去に検知した標識の種別、種別ごとの通知数を含む履歴情報を記録する。また、ドライブレコーダ10は、当該履歴情報を記録データとしてサーバ装置100へ転送する。
また、ドライブレコーダ10は、ドライバが事前に登録した自身の居住エリアに関する情報等を含む事前登録情報をサーバ装置100へ転送する。
サーバ装置100は、上述したように、たとえばクラウドサーバとして実現される。サーバ装置100は、たとえば標識検知システム1を運用・管理するデータセンタに設けられる。サーバ装置100は、ドライブレコーダ10から転送された記録データに基づいて各車両の状況を解析する。また、サーバ装置100は、解析した解析結果に基づく各種のクラウドサービスを提供する。
また、サーバ装置100は、ドライブレコーダ10における事前登録情報、履歴情報等を管理する。また、サーバ装置100は、ドライブレコーダ10で用いられる標識DB(Database)を管理する。標識DBは、標識の種別、設置エリア、エリアごとの設置数、分布等を含む標識に関する各種情報のデータベースである。
次に、ドライブレコーダ10の構成例について説明する。図3は、実施形態に係るドライブレコーダ10の構成例を示すブロック図である。なお、図3および後に示す図6では、本実施形態の特徴を説明するために必要な構成要素のみを表しており、一般的な構成要素についての記載を省略している。
換言すれば、図3および図6に図示される各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。例えば、各ブロックの分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することが可能である。
また、図3および図6を用いた説明では、既に説明済みの構成要素については、説明を簡略するか、説明を省略する場合がある。
図3に示すように、実施形態に係るドライブレコーダ10は、センサ部11と、通信部12と、記憶部13と、コントローラ14とを有する。また、ドライブレコーダ10は、通知装置30が図示略の車載ネットワーク等を介して接続される。通知装置30は、ドライバへの通知を行う通知デバイスである。通知装置30は、たとえば前述の車載ディスプレイである。また、通知装置30は、音声による通知を行うスピーカである。
センサ部11は、ドライブレコーダ10に搭載される各種のセンサ群である。センサ部11は、たとえばカメラ11aと、GPS(Global Positioning System)センサ11bとを含む。
カメラ11aは、1以上設けられる。カメラ11aは、フロントガラス付近やリアガラス付近、ダッシュボード付近等の車両の各所に取り付けられ、車両内外の予め決められた撮像領域を撮像可能に設けられる。本実施形態では、カメラ11aは少なくとも、車両前方の標識を撮像可能に設けられる。GPSセンサ11bは、車両のGPS位置を測位する。
通信部12は、ネットワークアダプタ等によって実現される。通信部12は、ネットワークNと無線で接続され、ネットワークNを介して、サーバ装置100との間で情報の送受信を行う。
記憶部13は、ROM(Read Only Memory)、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の記憶デバイスによって実現される。記憶部13は、図3の例では、事前登録情報13aと、履歴情報13bと、設定エリア情報13cと、標識DB13dと、通知条件情報13eと、画像認識AI13fと、記録データ情報13gとを記憶する。
事前登録情報13aは、自宅住所といったドライバの居住エリアに関する情報を含む。居住エリアに関する情報は、自宅住所の他、勤務先住所や通勤ルート、営業ルートといったドライバが車で普段走行するエリアを示す各種情報が含まれてもよい。事前登録情報13aは、図示略の操作部品を用いてドライバによって予め登録される。
履歴情報13bは、車両の過去の走行履歴や、過去に検知されて通知された標識の種別、種別ごとの通知数といった履歴に関する情報である。履歴情報13bは、後述する記録部14fによって記録される。
設定エリア情報13cは、前述の基準エリアR1を特定する設定情報である。設定エリア情報13cは、後述する設定部14aによって設定される。
標識DB13dは、前述の標識に関する各種情報のデータベースである。標識DB13dは、たとえばサーバ装置100から適宜配信される。
通知条件情報13eは、基準エリアR1を走行中の通知条件、および、基準エリアR1の外であるエリアR2,R3を走行中の通知条件を含む情報である。通知条件情報13eは、後述する判定部14cによって設定される。
画像認識AI(Artificial Intelligence)13fは、検知対象物の特徴量を機械学習のアルゴリズムを用いて学習した学習モデルに相当する。画像認識AI13fは、たとえばディープラーニングのアルゴリズムを用いて学習されたDNN(Deep Neural Network)モデルである。
画像認識AI13fは、後述する画像認識部14dにDNNモデルとして読み込まれた後、カメラ11aによって撮像された映像のフレーム画像が入力された場合に、画像中の各種の検知対象物の検知枠および検知枠ごとの確信度を画像認識結果として出力する。本実施形態では、画像認識AI13fは、少なくとも標識の検知枠およびその確信度を出力する。
記録データ情報13gは、カメラ11aによって撮像された映像データ、および、GPSセンサ11bによって測位されたGPS位置等を含む記録データ群が格納される。各記録データは、後述する記録部14fによって記録される。
コントローラ14は、いわゆるプロセッサに相当する。コントローラ14は、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等によって、記憶部13に記憶されている図示略の各種プログラムがRAMを作業領域として実行されることにより実現される。また、コントローラ14は、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路により実現することができる。
コントローラ14は、設定部14aと、取得部14bと、判定部14cと、画像認識部14dと、検知部14eと、記録部14fとを有し、以下に説明する情報処理の機能や作用を実現または実行する。
設定部14aは、事前登録情報13aおよび履歴情報13bの一方または双方に基づいて基準エリアR1を設定する。また、設定部14aは、設定した基準エリアR1の設定情報を設定エリア情報13cへ格納する。
取得部14bは、カメラ11aによって撮像された映像データおよびGPSセンサ11bによって測位された測位データを含む各種のセンサデータをセンサ部11から取得する。
また、取得部14bは、測位データの示す位置情報に基づいて判定部14cによって車両が基準エリアR1の外であるエリアR2,R3を走行中であると判定された場合に、基準エリアR1にはない標識に関する標識情報(種別等)を標識DB13dから取得する。
また、取得部14bは、通信部12を介し、サーバ装置100から送信される各種のデータを取得する。取得部14bは、たとえばサーバ装置100から配信される標識DB13dを取得する。
また、取得部14bは、たとえばサーバ装置100のみが標識DB13dを保持しているシステム構成の場合、サーバ装置100の保持する標識DB13dから基準エリアR1にはない標識に関する標識情報を都度取得する。また、取得部14bは、たとえばサーバ装置100のみが事前登録情報13aや履歴情報13bを保持しているシステム構成の場合、サーバ装置100から事前登録情報13aや履歴情報13bを都度取得する。
判定部14cは、取得部14bによって取得された位置情報に基づいて車両が走行中であるエリアを判定する。また、判定部14cは、車両が基準エリアR1の外であるエリアR2,R3を走行中であると判定した場合、取得部14bに基準エリアR1にはない標識に関する標識情報を標識DB13dから取得させる。また、判定部14cは、取得部14bによって取得された基準エリアR1にはない標識に関する標識情報に基づいて、基準エリアR1の外であるエリアR2,R3における通知条件を設定する。また、判定部14cは、設定した基準エリアR1の外でのエリアR2,R3における通知条件を通知条件情報13eへ格納する。
また、判定部14cは、車両が基準エリアR1内を走行中であると判定した場合、取得部14bに基準エリアR1内の標識に関する標識情報を標識DB13dから取得させる。また、判定部14cは、取得部14bによって取得された基準エリアR1内の標識に関する標識情報に基づいて、基準エリアR1内における通知条件を設定する。また、判定部14cは、設定した基準エリアR1内における通知条件を通知条件情報13eへ格納する。
画像認識部14dは、取得部14bによって取得された映像データのフレーム画像を画像認識AI13fへ入力する。また、画像認識部14dは、画像を入力した結果、画像認識AI13fから出力される画像認識結果である検知枠および確信度を取得する。また、画像認識部14dは、画像認識AI13fから取得した画像認識結果を検知部14eへ出力する。
検知部14eは、画像認識部14dから入力された画像認識結果に基づいて標識に該当する検知枠を抽出し、予め決められた確信度の閾値を上回る確信度を有する検知枠を標識として検知する。なお、標識に該当する検知枠には標識の種別を示すラベル等の識別子が付与されている。検知部14eは、当該識別子を参照することによって標識の種別を検知する。
また、検知部14eは、取得部14bによって取得された位置情報および当該位置情報に対応する通知条件に基づいて、検知した標識を通知装置30へ通知する。すなわち、検知部14eは、車両が基準エリアR1の外であるエリアR2,R3を走行中である場合、当該エリアR2,R3に対応する通知条件に基づいて通知装置30へ通知する。また、検知部14eは、車両が基準エリアR1内を走行中である場合、当該基準エリアR1に対応する通知条件に基づいて通知装置30へ通知する。
記録部14fは、検知部14eによって検知されて通知された各標識の種別および種別ごとの通知数を履歴情報13bへ記録する。
また、記録部14fは、事故発生等の特定のイベントが検知されない間、記録データを繰り返し上書きしながら常時記録データ情報13gへ記録する。
また、記録部14fは、前述の特定のイベントが検知された場合、上書き禁止のイベント記録方式で記録データを記録データ情報13gへ記録する。なお、記録部14fは、イベント検知時点の前後一定時間分の記録データが記録された後は、イベント記録方式での記録を停止した後、上書き可能な常時記録を再開する。
また、記録部14fは、予め転送対象として指定された特定のイベントについては、通信部12を介し、当該イベントに対応する記録データをサーバ装置100へ転送する。
次に、ドライブレコーダ10が実行する処理手順について図4を用いて説明する。図4は、第1の実施形態に係るドライブレコーダ10が実行する処理手順を示すフローチャートである。
図4に示すように、ドライブレコーダ10のコントローラ14は、ドライブレコーダ10の起動時に事前登録情報13aおよび履歴情報13bの一方または双方に基づいて基準エリアR1を設定する(ステップS101)。
そして、コントローラ14は、センサ部11による走行中の画像および位置情報を取得し(ステップS102)、車両が基準エリアR1外を走行中であるか否かを判定する(ステップS103)。車両が基準エリアR1外を走行中である場合(ステップS103,Yes)、コントローラ14は当該エリア外の通知条件の有無を判定する(ステップS104)。
当該エリア外の通知条件がない場合(ステップS104,No)、コントローラ14は、基準エリアR1にはない標識に関する標識情報(種別等)を取得する(ステップS105)。そして、コントローラ14は、当該標識情報に基づいて基準エリアR1外のエリアR2,R3の通知条件を設定する(ステップS106)。
つまり、ステップS106ではコントローラ14は、車両がエリアR2,R3を走行中の場合、基準エリアR1にはなくエリアR2,R3に存在する標識のみ通知する通知条件を設定する。また、コントローラ14は、既に基準エリアR1外の通知条件がある場合(ステップS104,Yes)、ステップS110へ遷移する。
また、車両が基準エリアR1内を走行中である場合(ステップS103,No)、コントローラ14は基準エリアR1内の通知条件の有無を判定する(ステップS107)。
基準エリアR1内の通知条件がない場合(ステップS107,No)、コントローラ14は、基準エリアR1内の標識に関する標識情報を取得する(ステップS108)。そして、コントローラ14は、当該標識情報に基づいて基準エリアR1内の通知条件を設定する(ステップS109)。また、コントローラ14は、既に基準エリアR1内の通知条件がある場合(ステップS107,Yes)、ステップS110へ遷移する。
ステップS110では、コントローラ14は、ステップS102で取得した画像の画像認識を行う(ステップS110)。そして、コントローラ14は、画像認識結果に基づいて標識を検知する(ステップS111)。
そして、コントローラ14は、検知した標識を位置情報および当該位置情報に対応する通知条件に基づいて通知装置30へ通知する(ステップS112)。そして、コントローラ14は走行終了か否かを判定し(ステップS113)、走行終了でない場合(ステップS113,No)、ステップS102からの処理を繰り返す。一方、走行終了の場合(ステップS113,Yes)、コントローラ14は処理を終了する。
(第2の実施形態)
次に、第2の実施形態について説明する。第2の実施形態では、ドライブレコーダ10Aのコントローラ14が、過去に検知された標識の種別および種別ごとの通知数を含む標識検知に関する履歴をドライバごとに履歴情報13bへ記録し、乗車時にドライバを認証し、認証したドライバについての上記履歴に基づいて当該ドライバが運転中の通知条件を設定する。
次に、第2の実施形態について説明する。第2の実施形態では、ドライブレコーダ10Aのコントローラ14が、過去に検知された標識の種別および種別ごとの通知数を含む標識検知に関する履歴をドライバごとに履歴情報13bへ記録し、乗車時にドライバを認証し、認証したドライバについての上記履歴に基づいて当該ドライバが運転中の通知条件を設定する。
図5は、第2の実施形態に係る標識検知方法の概要説明図である。図5に示すように、第2の実施形態に係る標識検知方法では、まずドライブレコーダ10Aのコントローラ14はドライブレコーダ10Aの起動時にドライバを認証する(ステップS11)。
そして、コントローラ14は、認証したドライバについての標識検知に関する履歴を履歴情報13bから取得する(ステップS12)。既に述べた通りサーバ装置100のみが履歴情報13bを保持するシステム構成の場合、コントローラ14はサーバ装置100から標識検知に関する履歴を取得してもよい。
標識検知に関する履歴は、認証されたドライバが過去の乗車中に標識検知機能によって検知されて通知された標識の種別、種別ごとの通知数等である。
そして、コントローラ14は、取得した履歴に基づいて認証したドライバへの通知条件を設定する(ステップS13)。図5に示すように、コントローラ14はたとえば標識M1,M2,M3…の過去の通知数に応じ、通知数が多い標識M1,M2,M3…については通知対象外とする通知条件を設定する。
そして、コントローラ14は、当該通知条件の設定後、検知した標識を当該通知条件に基づいてドライバへ通知する(ステップS14)。図5の例の場合、コントローラ14は、標識M1,M2,M3のうちでは、通知数が閾値を下回る標識M1のみを検知時の通知対象とする。
なお、図5の例で、標識の種別を問わず閾値を一定の値としているが、コントローラ14は、各標識の設置の分布や検知頻度等に応じて標識の種別ごとに閾値を設定するようにしてもよい。たとえば、設置の分布が疎である種別の標識や検知頻度の低い種別の標識は、他の種別の標識に比べて前述の閾値が低くなるように設定されてもよい。
これにより、第2の実施形態に係る標識検知方法によれば、ドライバごとに標識の通知条件を設定することで、たとえばドライバごとの普段の走行ルートの違いに応じつつドライバが感じる煩わしさを軽減することが可能となる。また、コントローラ14がサーバ装置100から前述の標識検知に関する履歴を取得するシステム構成の場合、車両が社用車やシェアリングカーでドライバが入れ替わる場合でもドライバごとに通知条件を設定することが可能となる。
次に、ドライブレコーダ10Aの構成例について説明する。図6は、第2の実施形態に係るドライブレコーダ10Aの構成例を示すブロック図である。なお、図6は既に示した図3に対応しているため、ここでは図3と異なる点について主に説明する。
図6に示すように、ドライブレコーダ10Aは、センサ部11が認証センサ11cをさらに含む点が図3とは異なる。認証センサ11cは、ドライバの認証データを読み取るセンサである。認証センサ11cの認証方式は種別を問わない。たとえば認証センサ11cは、ドライバの認証データとして指紋や顔等の生体データを読み取るものであってもよいし、近距離無線通信等を介し、ドライバが携帯する携帯端末等に保持される認証データを読み取るものであってもよい。
また、ドライブレコーダ10Aは、コントローラ14が認証部14gをさらに有する点が図3とは異なる。認証部14gは、認証センサ11cによって読み取られた認証データを事前登録情報13aに予め登録された認証情報に照合することによってドライバの認証を行う。予め登録される認証情報はサーバ装置100が保持し、認証部14gはこの認証情報を認証センサ11cによって認証データが読み取られた場合にサーバ装置100から都度取得してもよい。
また、ドライブレコーダ10Aの取得部14bは、認証部14gによって認証されたドライバについての標識検知に関する履歴を記憶部13の履歴情報13bまたはサーバ装置100から取得する。
また、ドライブレコーダ10Aの設定部14aは、取得された履歴に基づいて認証したドライバへの通知条件を設定し、通知条件情報13eへ格納する。
また、ドライブレコーダ10Aの検知部14eは、当該通知条件の設定後、検知した標識を当該通知条件に基づいてドライバへ通知する。
次に、ドライブレコーダ10Aが実行する処理手順について図7を用いて説明する。図7は、第2の実施形態に係るドライブレコーダ10Aが実行する処理手順を示すフローチャートである。
図7に示すように、ドライブレコーダ10のコントローラ14は、ドライブレコーダ10の起動時にドライバを認証する(ステップS201)。
そして、コントローラ14は、認証したドライバについての標識検知に関する履歴を取得する(ステップS202)。また、コントローラ14は、取得した履歴に基づいて認証したドライバへの通知条件を設定する(ステップS203)。
そして、コントローラ14は、カメラ11aによって撮像された走行中の画像を取得し(ステップS204)、画像認識を行う(ステップS205)。そして、コントローラ14は、画像認識結果に基づいて標識を検知する(ステップS206)。
そして、コントローラ14は、検知した標識をステップS203で設定した通知条件に基づいて通知装置30へ通知する(ステップS207)。そして、コントローラ14は走行終了か否かを判定し(ステップS208)、走行終了でない場合(ステップS208,No)、ステップS204からの処理を繰り返す。一方、走行終了の場合(ステップS208,Yes)、コントローラ14は処理を終了する。
(第3の実施形態)
なお、第1の実施形態および第2の実施形態では、ドライブレコーダ10,10Aが上述した標識検知方法を実行する例を挙げたが、サーバ装置100が当該方法を実行してもよい。
なお、第1の実施形態および第2の実施形態では、ドライブレコーダ10,10Aが上述した標識検知方法を実行する例を挙げたが、サーバ装置100が当該方法を実行してもよい。
図8は、サーバ装置100の構成例を示すブロック図である。図8に示すように、サーバ装置100は、通信部101と、記憶部102と、コントローラ103とを有する。
通信部101は、上述した通信部12と同様にネットワークアダプタ等によって実現され、ネットワークNを介して各ドライブレコーダ10,10Aとの間で各種情報の送受信を行う。
記憶部102は、上述した記憶部13と同様に各種の記憶デバイスやディスク装置等によって実現される。記憶部102は、たとえば上述した事前登録情報13aと、履歴情報13bと、設定エリア情報13cと、標識DB13dと、通知条件情報13eと、画像認識AI13fと、記録データ情報13gとを記憶する。
コントローラ103は、上述したコントローラ14と同様に、CPUやMPU等によって、記憶部102に記憶されている図示略の各種プログラムがRAMを作業領域として実行されることにより実現される。また、コントローラ103は、ASICやFPGA等の集積回路により実現することができる。
コントローラ103は、たとえば上述した設定部14aと、取得部14bと、判定部14cと、画像認識部14dと、検知部14eとを有する。コントローラ103は、上述した第1の実施形態または第2の実施形態に係る標識検知方法に関する情報処理の機能や作用の一部あるいは全部を実現または実行する。
つまり、第3の実施形態は、サーバ装置100が上述した第1の実施形態または第2の実施形態に係る標識検知方法の主たる実行主体となる中央集中型のシステム構成であると言える。これに対し、上述した第1の実施形態または第2の実施形態は、ドライブレコーダ10,10Aが標識検知方法の主たる実行主体となり、必要な情報のみサーバ装置100との間で適宜送受信するエッジコンピューティング型のシステム構成であると言える。
上述してきたように、ドライブレコーダ10またはサーバ装置100(「情報処理装置」の一例に相当)は、コントローラ14,103を備える。コントローラ14,103は、カメラ11a(「車載カメラ」の一例に相当)の撮像画像から標識を検知して予め設定された通知条件に基づき、検知した上記標識の内容をドライバへ通知する。また、コントローラ14,103は、車両が予め設定された基準エリアR1(「第1エリア」の一例に相当)の外であるエリアR2,R3(「第2エリア」の一例に相当)を走行する場合に、基準エリアR1での通知対象である標識M1,M2,M3…(「第1標識」の一例に相当)以外の標識M4,M5(「第2標識」の一例に相当)に関する標識情報を取得して、上記車両がエリアR2,R3を走行中は標識M4,M5を検知した場合のみ上記ドライバへ通知する上記通知条件を設定する。
したがって、ドライブレコーダ10またはサーバ装置100によれば、車両が基準エリアR1の外であるエリアR2,R3を走行中は、ドライバが見慣れていない標識M4,M5を通知することで、規制内容の理解不足による交通違反や事故等の低減を図ることができる。また、車両がエリアR2,R3を走行中は、少なくともドライバが基準エリアR1内において見慣れている標識M1,M2,M3…を通知しないことでドライバが感じる煩わしさを軽減することができる。すなわち、検知した標識をより効果的に通知することができる。
また、コントローラ14,103は、エリアR3に特有の上記標識である標識M5の上記標識情報を取得する。
したがって、ドライブレコーダ10またはサーバ装置100によれば、地域に特有のたとえば動物や路面電車等に関する標識の標識内容をドライバへ通知することができ、規制内容の理解不足による交通違反や事故等の低減を図ることができる。
また、コントローラ14,103は、事前に登録された上記ドライバの居住地に関する情報または上記車両の過去の走行履歴に関する履歴情報に基づいて基準となる基準エリアR1を設定する。
したがって、ドライブレコーダ10またはサーバ装置100によれば、ドライバの居住地や走行履歴に基づいてドライバが走り慣れたエリアを基準エリアR1とすることができる。
また、コントローラ14,103は、過去に検知された上記標識の種別および該種別ごとの通知数を含む標識検知に関する履歴を上記ドライバごとに上記履歴情報へ記録し、乗車時に上記ドライバを認証し、認証した上記ドライバについての上記履歴に基づいて当該ドライバが運転中の上記通知条件を設定する。
したがって、ドライブレコーダ10Aまたはサーバ装置100によれば、ドライバごとに標識の通知条件を設定することで、たとえばドライバごとの普段の走行ルートの違いに応じつつドライバが感じる煩わしさを軽減することが可能となる。また、サーバ装置100が上記標識検知に関する履歴を集中管理するシステム構成の場合、車両が社用車やシェアリングカーでドライバが入れ替わる場合でもドライバごとに通知条件を設定することが可能となる。
また、コントローラ14,103は、上記履歴に基づいて上記通知数が閾値を下回る上記標識のみを通知する上記通知条件を設定する。
したがって、ドライブレコーダ10Aまたはサーバ装置100によれば、過去に何度も通知されドライバが見慣れた標識については通知対象外とすることでユーザが感じる煩わしさを軽減することができる。
また、コントローラ14,103は、上記標識の分布および検知頻度の少なくともいずれかに基づいて上記閾値を上記標識の種別ごとに設定する。
したがって、ドライブレコーダ10Aまたはサーバ装置100によれば、標識の分布や検知頻度などに応じて柔軟に標識の種別ごとの通知条件を設定することが可能となる。
また、ドライブレコーダ10,10Aは、車両に搭載される車載装置である。
したがって、ドライブレコーダ10,10Aによれば、標識検知システム1を、ドライブレコーダ10,10Aが標識検知方法の主たる実行主体となり、必要な情報のみサーバ装置100との間で適宜送受信するエッジコンピューティング型のシステム構成とすることができる。
また、サーバ装置100は、各車両に搭載される車載装置と通信可能に設けられるサーバ装置である。
したがって、サーバ装置100によれば、標識検知システム1を、サーバ装置100が標識検知方法の主たる実行主体となりたとえばドライブレコーダ10,10Aの処理負荷を軽減できる中央集中型のシステム構成とすることができる。
また、実施形態に係る標識検知方法は、ドライブレコーダ10またはサーバ装置100が実行する情報処理方法であって、カメラ11aの撮像画像から標識を検知して予め設定された通知条件に基づき、検知した上記標識の内容をドライバへ通知することを含む。また、上記通知することは、車両が予め設定された基準エリアR1の外であるエリアR2,R3を走行する場合に、基準エリアR1での通知対象である標識M1,M2,M3…以外の標識M4,M5に関する標識情報を取得して、上記車両がエリアR2,R3を走行中は標識M4,M5を検知した場合のみ上記ドライバへ通知する上記通知条件を設定する。
したがって、ドライブレコーダ10またはサーバ装置100によれば、車両が基準エリアR1の外であるエリアR2,R3を走行中は、ドライバが見慣れていない標識M4,M5を通知することで、規制内容の理解不足による交通違反や事故等の低減を図ることができる。また、車両がエリアR2,R3を走行中は、少なくともドライバが基準エリアR1内において見慣れている標識M1,M2,M3…を通知しないことでドライバが感じる煩わしさを軽減することができる。すなわち、検知した標識をより効果的に通知することができる。
なお、上述した各実施形態では、ドライブレコーダ10,10Aが、情報処理装置の一例に相当する車載装置である例に挙げたが、ドライブレコーダ10,10A以外の1以上の車載装置が、ドライブレコーダ10,10Aと同等の機能を実現するようにしてもよい。
たとえば、車両にドライブレコーダ10,10Aが搭載されていない場合に、車両に搭載された通信型のナビゲーション装置、および、車載カメラ等を組み合わせることによって、ドライブレコーダ10,10Aと同等の機能を実現するようにしてもよい。
さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。
1 標識検知システム
10,10A ドライブレコーダ
11 センサ部
11a カメラ
11b GPSセンサ
11c 認証センサ
12 通信部
13 記憶部
13a 事前登録情報
13b 履歴情報
13c 設定エリア情報
13d 標識DB
13e 通知条件情報
13f 画像認識AI
13g 記録データ情報
14 コントローラ
14a 設定部
14b 取得部
14c 判定部
14d 画像認識部
14e 検知部
14f 記録部
14g 認証部
30 通知装置
100 サーバ装置
101 通信部
102 記憶部
103 コントローラ
10,10A ドライブレコーダ
11 センサ部
11a カメラ
11b GPSセンサ
11c 認証センサ
12 通信部
13 記憶部
13a 事前登録情報
13b 履歴情報
13c 設定エリア情報
13d 標識DB
13e 通知条件情報
13f 画像認識AI
13g 記録データ情報
14 コントローラ
14a 設定部
14b 取得部
14c 判定部
14d 画像認識部
14e 検知部
14f 記録部
14g 認証部
30 通知装置
100 サーバ装置
101 通信部
102 記憶部
103 コントローラ
Claims (9)
- 車載カメラの撮像画像から標識を検知して予め設定された通知条件に基づき、検知した前記標識の内容をドライバへ通知するコントローラを備え、
前記コントローラは、
車両が予め設定された第1エリアの外である第2エリアを走行する場合に、前記第1エリアでの通知対象である第1標識以外の第2標識に関する標識情報を取得して、前記車両が前記第2エリアを走行中は前記第2標識を検知した場合のみ前記ドライバへ通知する前記通知条件を設定する、
情報処理装置。 - 前記コントローラは、
前記第2エリアに特有の前記標識である前記第2標識の前記標識情報を取得する、
請求項1に記載の情報処理装置。 - 前記コントローラは、
事前に登録された前記ドライバの居住地に関する情報または前記車両の過去の走行履歴に関する履歴情報に基づいて基準となる前記第1エリアを設定する、
請求項1に記載の情報処理装置。 - 前記コントローラは、
過去に検知された前記標識の種別および該種別ごとの通知数を含む標識検知に関する履歴を前記ドライバごとに前記履歴情報へ記録し、
乗車時に前記ドライバを認証し、
認証した前記ドライバについての前記履歴に基づいて当該ドライバが運転中の前記通知条件を設定する、
請求項3に記載の情報処理装置。 - 前記コントローラは、
前記履歴に基づいて前記通知数が閾値を下回る前記標識のみを通知する前記通知条件を設定する、
請求項4に記載の情報処理装置。 - 前記コントローラは、
前記標識の分布および検知頻度の少なくともいずれかに基づいて前記閾値を前記標識の種別ごとに設定する、
請求項5に記載の情報処理装置。 - 車両に搭載される車載装置である、請求項1~6のいずれか一つに記載の情報処理装置。
- 各車両に搭載される車載装置と通信可能に設けられるサーバ装置である、請求項1~6のいずれか一つに記載の情報処理装置。
- 情報処理装置が実行する情報処理方法であって、
車載カメラの撮像画像から標識を検知して予め設定された通知条件に基づき、検知した前記標識の内容をドライバへ通知すること、を含み、
前記通知することは、
車両が予め設定された第1エリアの外である第2エリアを走行する場合に、前記第1エリアでの通知対象である第1標識以外の第2標識に関する標識情報を取得して、前記車両が前記第2エリアを走行中は前記第2標識を検知した場合のみ前記ドライバへ通知する前記通知条件を設定すること、
を含む、情報処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022123830A JP2024021176A (ja) | 2022-08-03 | 2022-08-03 | 情報処理装置および情報処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022123830A JP2024021176A (ja) | 2022-08-03 | 2022-08-03 | 情報処理装置および情報処理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2024021176A true JP2024021176A (ja) | 2024-02-16 |
Family
ID=89854914
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022123830A Pending JP2024021176A (ja) | 2022-08-03 | 2022-08-03 | 情報処理装置および情報処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2024021176A (ja) |
-
2022
- 2022-08-03 JP JP2022123830A patent/JP2024021176A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11959761B1 (en) | Passenger profiles for autonomous vehicles | |
KR102325049B1 (ko) | 보행자의 안전과 연관된 통신 신호를 송신하는 전자 장치 및 그 동작 방법 | |
US20200021961A1 (en) | Vehicle on-board unit for connected and automated vehicle systems | |
EP3994423B1 (en) | Collecting user-contributed data relating to a navigable network | |
CN111179617B (zh) | 一种智能网联车的车载单元 | |
US20180143033A1 (en) | Method and system for lane-based vehicle navigation | |
WO2018116795A1 (ja) | 運転支援システム及び運転支援装置 | |
CN110738749B (zh) | 车载装置、信息处理装置、信息处理方法 | |
CN102951149A (zh) | 一种用于分析车辆将行驶的道路分段的方法及装置 | |
WO2021002368A1 (ja) | 安全性能評価装置、安全性能評価方法、情報処理装置、及び情報処理方法 | |
US20180131767A1 (en) | Autonomous vehicle management | |
Park et al. | Glossary of connected and automated vehicle terms | |
CN111523366B (zh) | 信息处理设备、信息处理方法和存储介质 | |
JP2024021176A (ja) | 情報処理装置および情報処理方法 | |
US20220291648A1 (en) | Control device | |
WO2022113772A1 (ja) | 情報処理装置、情報処理方法、及び、情報処理システム | |
EP3972227B1 (en) | Method for driving control, device and system | |
CN109345855A (zh) | 一种用户管理方法 | |
JP7449206B2 (ja) | 通信制御装置、車両、プログラム、及び通信制御方法 | |
US11333523B2 (en) | Vehicle control device, output device, and input and output device | |
JP4794668B2 (ja) | 電子機器、音声出力方法、音声出力プログラムおよび記録媒体 | |
WO2019117003A1 (ja) | 安全確認評価システム、該安全確認評価システムに用いられる車載装置、処理装置、安全確認評価方法、安全確認評価プログラム、及び記憶媒体 | |
CN111163433B (zh) | 收集基于车辆的预先给定的路段的数据记录的方法和设备 | |
CN118298656A (zh) | 风险预警的方法和装置 | |
CN117075605A (zh) | 车辆控制方法、装置、电子设备及可读存储介质 |