JP6704483B1 - 情報処理装置、情報処理方法および情報処理プログラム - Google Patents

情報処理装置、情報処理方法および情報処理プログラム Download PDF

Info

Publication number
JP6704483B1
JP6704483B1 JP2019041045A JP2019041045A JP6704483B1 JP 6704483 B1 JP6704483 B1 JP 6704483B1 JP 2019041045 A JP2019041045 A JP 2019041045A JP 2019041045 A JP2019041045 A JP 2019041045A JP 6704483 B1 JP6704483 B1 JP 6704483B1
Authority
JP
Japan
Prior art keywords
information processing
parking
data
imaged
full
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019041045A
Other languages
English (en)
Other versions
JP2020144627A (ja
Inventor
安昭 兵藤
安昭 兵藤
一浩 二宮
一浩 二宮
西岡 孝章
孝章 西岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yahoo Japan Corp
Original Assignee
Yahoo Japan Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yahoo Japan Corp filed Critical Yahoo Japan Corp
Priority to JP2019041045A priority Critical patent/JP6704483B1/ja
Application granted granted Critical
Publication of JP6704483B1 publication Critical patent/JP6704483B1/ja
Publication of JP2020144627A publication Critical patent/JP2020144627A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】道路に設置される駐車場所の満空状況であって、走行付近の駐車場所の満空状況を走行中のドライバーに対して的確に通知できる、情報処理装、情報処理方法及び情報処理プログラムを提供する。【解決手段】情報処理装置100は、取得部131と、満空判定部133と、通知部134とを有する。取得部は、撮像データを取得する。満空判定部は、取得部により取得された撮像データに基づいて、撮像データに写される道路に設置される駐車場所の満空状況を判定する。通知部は、満空判定部による判定結果をユーザに通知する。【選択図】図4

Description

本発明の実施形態は、情報処理装置、情報処理方法および情報処理プログラムに関する。
従来、パーキングメーターを集中監視する技術が知られている。例えば、個々のパーキングメーターから無線送信されたパーキングメーター情報を受信することで、各パーキングメーターの状況をリアルタイム監視する技術が知られている。
特開2001−202544号公報
しかしながら、上記の従来技術では、道路に設置される駐車場所の満空状況であって、走行付近の駐車場所の満空状況を走行中のドライバーに対して的確に通知することができるとは限らない。例えば、上記の従来技術では、個々のパーキングメーターから無線送信されたパーキングメーター情報を集約し、集約した情報に基づいてパーキングメータ群毎の満車/空車状況をリアルタイムで地図上に表示可能する。
例えば、パーキングメータ用の駐車場所(道路に設置される駐車場所)は、場所によっては競争率が高く、一旦空車となってもすぐに満車となる場合も少なくない。そうすると、リアルタイムで地図上に表示された現地空車場所に到着した頃には、既に満車となっているという状況が起こり得る。このため、上記の従来技術では、道路に設置される駐車場所であって、走行付近の駐車場所の満空状況を走行中のドライバーに対して的確に通知することができるとは限らない。
本願にかかる情報処理装置は、撮像データを取得する取得部と、前記取得部により取得された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定部と、前記判定部による判定結果をユーザに通知する通知部とを有することを特徴とする。
実施形態の一態様によれば、道路に設置される駐車場所の満空状況であって、走行付近の駐車場所の満空状況を走行中のドライバーに対して的確に通知することができるといった効果を奏する。
図1は、実施形態にかかる情報処理の一例を示す図である。 図2は、満空判定での判定結果を通知する一例を示す図である。 図3は、実施形態にかかる情報処理システムの構成例を示す図である。 図4は、実施形態にかかる情報処理装置の構成例を示す図である。 図5は、実施形態にかかる撮像データ記憶部の一例を示す図である。 図6は、実施形態にかかる駐車場所情報記憶部の一例を示す図である。 図7は、情報通知の他の一例を示す図である。 図8は、実施形態にかかる情報処理手順を示すフローチャートである。 図9は、情報処理装置の機能を実現するコンピュータの一例を示すハードウェア構成図である。
以下に、本願にかかる情報処理装置、情報処理方法および情報処理プログラムを実施するための形態(以下、「実施形態」と呼ぶ)について図面を参照しつつ説明する。なお、この実施形態により本願にかかる情報処理装置、情報処理方法および情報処理プログラムが限定されるものではない。また、以下の実施形態において、同一の部位には同一の符号を付し、重複する説明は省略される。
〔1.情報処理の一例〕
まず、図1を用いて、実施形態にかかる情報処理の一例について説明する。図1は、実施形態にかかる情報処理の一例を示す図である。実施形態にかかる情報処理は、図1に示す情報処理装置100によって行われる。
図1の説明に先立って、図3を用いて、実施形態にかかる情報処理システムについて説明する。図3は、実施形態にかかる情報処理システム1の構成例を示す図である。実施形態にかかる情報処理システム1は、図3に示すように、ドラレコ装置10と、情報処理装置100とを含む。ドラレコ装置10、情報処理装置100は、ネットワークNを介して有線または無線により通信可能に接続される。なお、図3に示す情報処理システム1には、複数台のドラレコ装置10や、複数台の情報処理装置100が含まれてよい。
また、以下に説明する実施形態にかかる情報処理は、ドラレコ装置10と、情報処理装置100とが協働することにより、情報処理装置100側で主に行われるものとして説明するが、実施形態にかかる情報処理は、ドラレコ装置10が独立して行ってもよい。この場合には、実施形態にかかる情報処理システム1には、情報処理装置100は必ずしも含まれなくてよい。また、ドラレコ装置10が独立して実施形態にかかる情報処理を行う場合、ドラレコ装置10が、実施形態にかかる情報処理を行う情報処理装置の一例となる。
ここで、本願で対象とする駐車場所について説明する。本願で対象とする駐車場所は、道路に設置される駐車場所である。すなわち、本願で対象とする駐車場所は、パーキングメーター用の駐車場所である。このため、本願で対象とする駐車場所は、道路上に設置される駐車場所、あるいは、道路に付随する付随型駐車場所等とも言い換えることができるものとする。
また、通常、パーキングメーター用の駐車場所は、パーキングメーター毎に存在する駐車区画であって、車両1台を駐車するための駐車区画(駐車スペース)が一の方向(車道の方向)に連なった集合体として、各地の特定のエリアにおいて構成されている。このため、以下の実施形態において、例えば、道路に設置される駐車場所、もしくは、単に駐車場所と表記する場合、かかる駐車場所は、上記のような1つの集合体、および、1つの駐車区画の双方を示すものとする。また、説明するうえで、区別が必要な場合には、適宜、集合体、駐車区画との表現を用いることにする。
また、パーキングメーター用の駐車場所は、上記のような集合体であるため、施設等に併設される一般的な駐車場(コインパーキングもこれに含まれる)と比較して、地理的な広がりがある。このため、ある1つの集合体であっても、利用する駐車区画によっては目的地から非常に遠くなってしまうといった問題が発生する。
次に、ドラレコ装置10は、ドライブレコーダーに関する端末装置(情報処理装置)であって、車両(移動体の一例)のドライバー(ユーザ)によって利用される情報処理装置である。実施形態にかかるドラレコ装置10は、ドライブレコーダーが内蔵されたカーナビゲーションシステム(カーナビ)用の端末装置であるものとする。言い換えれば、ドラレコ装置10は、ドライブレコーダーとカーナビゲーションシステム用の端末装置とが一体型となった情報処理装置であるものとする。しかしながら、ドラレコ装置10は、ドライブレコーダーと、カーナビゲーションシステム用の端末装置とが別々になっており外部で接続されている状態であってもよいし、ドライブレコーダーだけを指し示してもよい。
また、ドラレコ装置10は、車外を撮像するカメラ(撮像部)と、カメラによる撮像によって得られた撮像データが表示される表示画面とを有する。また、この表示画面には、カーナビゲーションシステムによる道案内情報も表示される。また、この表示画面には、タッチパネルが採用されているものとする。また、ドラレコ装置10は、ドライバーの音声を集音するマイク(集音部)や、音声を出力するスピーカー(出力部)も有する。また、ドラレコ装置10は、車外ではなく車内の所定の対象(例えば、徂徠バーの顔)を撮像するためのインカメラも備えてよい。インカメラは、例えば、ドライバーの居眠り運転防止の一機能として利用される場合がある。
ここで、実施形態にかかる情報処理が行われるにあたっての前提について説明する。例えば、地図上でパーキングメーター用の駐車場所の満空状況が案内されても、取り合いの激しいパーキングメーターも多く存在することから、到着したときには、全ての駐車区画が満車となっている、という状況が起こり得る。このため、例えば、パーキングメーター用の駐車場所付近を通りがかったときに、この駐車場所において、適宜、各駐車区画の満空状況が通知されれば、空車の駐車区画を通り過ぎてしまうことを防止することができる。例えば、一旦、空車の駐車区画を通り過ぎてしまうと、取り合いの激しい駐車場所では、次にこの駐車区画に戻ってきたときには、満車となっていることもあり得る。
このようなことから、道路に設置される駐車場所の満空状況であって、走行付近の駐車場所の満空状況を走行中のドライバーに対して的確に通知することが可能なカーナビやドライブレコーダーがあれば非常に便利であるし、運転の安全性も高まる。
以上のような前提を踏まえて、実施形態にかかる情報処理装置100は、実施形態にかかる情報処理を行う。具体的には、情報処理装置100は、撮像データを取得する。例えば、情報処理装置100は、道路を走行する移動体に搭載されたカメラによって撮像された撮像データを取得する。すなわち、情報処理装置100は、車両のドライブレコーダーによって撮像された撮像データを取得する。そして、情報処理装置100は、取得した撮像データに基づいて、撮像データに写される道路に設置される駐車場所の満空状況を判定する。そして、情報処理装置100は、判定結果をドライバー(ユーザ)に通知する。例えば、情報処理装置100は、カメラが搭載された移動体が現在走行中の道路に設置される駐車場所であって、当該移動体の進行方向に存在する駐車場所の現在の満空状況を判定する。具体的には、情報処理装置100は、駐車場所として、1台の移動体を駐車させるための駐車区画毎に、当該駐車場所の満空状況を判定する。
また、情報処理装置100は、撮像データに基づいて、撮像データに写される所定の撮像物の撮像態様が所定の条件を満たしているか否かに応じて、駐車場所の満空状況を判定する。例えば、情報処理装置100は、所定の撮像物の撮像態様として、道路上に引かれたライン(例えば、駐車区画を示す白線)が移動体との位置関係に応じてどのように撮像されるかを示す撮像態様であって、ラインの撮像態様が所定の条件を満たしているか否かに応じて、駐車場所の満空状況を判定する。例えば、情報処理装置100は、撮像態様が示す形状であって、所定の撮像物の形状が所定の形状であるか否かに応じて、所定の駐車場所の満空状況を判定する。例えば、情報処理装置100は、所定の撮像物の撮像態様と、当該撮像態様が示すように撮像物が撮像された際の駐車場所の満空状況とが対応付けられた情報により学習されたモデルに基づいて、処理対象の駐車場所の満空状況を判定する。以下では、図1を用いて、実施形態にかかる情報処理の一例を手順を追って説明する。また、情報処理装置100が有する記憶部についても適宜説明する。
ステップS13までの説明は、駐車場所の満空状況を判定する満空判定を行うための、前段階の処理であり、学習モデルを生成するための処理である。学習には、各車両がドライブレコーダーで撮影(録画)しながら、各地を走行することにより収集された撮像データサンプルの実績が用いられる。そして、実績としての撮像データサンプルに対して、正解データ(正解ラベル、教師データ)が指定されることにより、情報処理装置100は、例えば、道路に描かれたライン(白線)がどのように写されているときには、そのラインが駐車区画を示すラインであり、その駐車区画が空車であるのか満車であるのかを学習し、学習結果が反映されたモデルを生成する。
図1では、撮像データサンプルを得るための車両として、車両C1、車両C2、車両C3といった3台の車両が例示されているが、車両の台数に制限は無い。また、車両の車種等にも制限は無い。また、図1の例では、車両C1は、ドライバーD1によって道路L1を運転されており、ドラレコ装置10−1が搭載されている。また、図1の例では、車両C2は、ドライバーD2によって道路L2を運転されており、ドラレコ装置10−2が搭載されている。また、図1の例では、車両C3は、ドライバーD3によって道路L3を運転されており、ドラレコ装置10−3が搭載されている。ドラレコ装置10−1、10−2、10−3を特に区別する必要がない場合には、単にドラレコ装置10と表記する。
そして、車両C1、車両C2、車両C3の各ドラレコ装置10は、例えば、撮像中(録画中)となっている場合には、撮像によって得られた撮像データ(動画像データ)サンプルを随時、情報処理装置100に送信する。一方で、各ドラレコ装置10は、ある期間(例えば、1日、または、1週間)毎に、この期間中に得られた撮像データサンプルをまとめて情報処理装置100に送信してもよい。つまり、ドラレコ装置10が、どのようなタイミングで撮像データを送信するかは限定されない。
情報処理装置100は、各ドラレコ装置10から撮像データサンプルが送信されることにより、送信された撮像データサンプルを取得(受信)し、取得した撮像データサンプルを撮像データ記憶部121に格納する(ステップS11)。図1の例では、ドラレコ装置10−1は、撮像データサンプルとして、撮像データVG1を送信している。よって、情報処理装置100は、ドラレコ装置10−1から撮像データVG1を取得し、撮像データ記憶部121に格納する。なお、図1の例では、撮像データVG1は、ある一場面(一コマ)のみを示したデータとなっているが、撮像データVG1は、実際には、動画長さ30分(再生時間30分)といったように時間の概念を有する。また、図1の例では、ドラレコ装置10−2は、撮像データサンプルとして、撮像データVG2を送信している。よって、情報処理装置100は、ドラレコ装置10−2から撮像データVG2を取得し、撮像データ記憶部121に格納する。撮像データVG2も同様に時間の概念を有する。また、図1の例では、ドラレコ装置10−3は、撮像データサンプルとして、撮像データVG3を送信している。よって、情報処理装置100は、ドラレコ装置10−3から撮像データVG3を取得し、撮像データ記憶部121に格納する。撮像データVG3も同様に時間の概念を有する。撮像データ記憶部121の内部構成については後述する。
このような状態において、情報処理装置100は、正解ラベルを取得する(ステップS12)。情報処理装置100は、撮像データサンプルに対して、人手によってタグ付けされた部分を正解ラベルとして撮像データ記憶部121から取得する。このタグ付けの手法には、任意の手法が用いられる。例えば、作業員は、撮像データサンプルに駐車区画を示すラインが含まれる場合には、そのラインに色塗りし、色塗りした部分の意味をタグ付けする。例えば、作業員は、この部分が「どういうラインなのか」、「どういう色か」等の属性をタグ付けする。また、例えば、駐車区画に車両が駐車されている場合、ラインと、駐車されている車両との位置関係に応じて、ラインは様々な撮像態様を示す(ラインは様々な形状で写される)。したがって、作業員は、ラインが駐車されている車両の影響を受けて様々な撮像態様を示す各場合において、「ラインがこの形状のときは空車」、「ラインがこの形状のときは満車」等のタグ付けを行う。
このようなことから、作業員は、所定の撮像物の撮像態様として、道路上に引かれたラインが車両との位置関係に応じてどのように撮像されるかを示す撮像態様に応じて、各撮像態様での満空状況を示すタグ付けを行うことにより、タグ付けした部分を正解ラベルとして指定する。例えば、作業員は、撮像態様が示す形状であって、道路上に引かれたラインの形状が所定の形状であるか否かに応じて、各形状での満空状況を示すタグ付けを行うことにより、タグ付けした部分を正解ラベルとして指定する。この点について図1に示す各サンプルデータの例を用いて説明する。
撮像データVG1において、正解ラベルCL11は、「コの字形の白ラインは駐車区画であり、空車の場合にはコの字形に見える態様で撮像される」といった意味のタグ付けが行われることにより指定された正解データの一例である。また、正解ラベルCL12は、「横断歩道付近の直線白ラインは停止線であり(駐車区画ではない)、この直線白ライン付近は駐停車禁止エリアのため、満空判定の対象外」といった意味のタグ付けが行われることにより指定された正解データの一例である。また、正解ラベルCL13は、「信号機付近の直線白ラインは停止線であり、また、複数ラインは横断歩道であり、これらのライン付近は駐停車禁止エリアのため、満空判定の対象外」といった意味のタグ付けが行われることにより指定された正解データの一例である。
また、撮像データVG2において、正解ラベルCL21は、「コの字形の白ラインは駐車区画であり、空車の場合にはコの字形に見える態様で撮像される」といった意味のタグ付けが行われることにより指定された正解データの一例である。また、正解ラベルCL22は、「鍵形の白ラインは駐車区画の一部であり、満車の場合には駐車されている車両との位置関係に応じて鍵型に見える態様で撮像される」といった意味のタグ付けが行われることにより指定された正解データの一例である。
また、撮像データVG3において、正解ラベルCL31は、「タイヤ後ろにわずかに見える白い対象物は駐車区画を示す白ラインの一部であり、満車の場合には駐車されている車両との位置関係に応じてこのような態様で撮像される」といった意味のタグ付けが行われることにより指定された正解データの一例である。また、正解ラベルCL32は、「鍵形の白ラインは駐車区画の一部であり、満車の場合には駐車されている車両との位置関係に応じて鍵型に見える態様で撮像される」といった意味のタグ付けが行われることにより指定された正解データの一例である。
上記のような正解ラベルは、撮像データ記憶部121に格納される。また、上記例では、作業員が人手によってタグ付けにより正解ラベル指定を行う例を示したが、手作業のため多くの手間と時間を要する。したがって、この手作業は、自動化または効率化されてもよい。この一例として、情報処理装置100は、教師なし学習や半教師付き学習などを組み合わせたり、強化学習のように報酬と罰を決めることによって、後はアルゴリズムでシミュレートしながら学習し、モデルを生成してもよい。このようなことから、情報処理装置100は、必ずしも教師あり学習でモデルを生成する必要はない。以下では、教師あり学習として説明を進める。
さて、次に、情報処理装置100は、撮像物の撮像態様に応じた満空状況を学習することにより、撮像物の撮像態様に応じた満空状況を学習されたモデルを生成する(ステップS13)。具体的には、情報処理装置100は、所定の撮像物の撮像態様と、当該撮像態様が示すように撮像物が撮像された際の所定の駐車場所の満空状況とが対応付けられた情報により、撮像物の撮像態様に応じた満空状況を学習しモデルを生成する。例えば、情報処理装置100は、撮像物の撮像態様のうち、駐車場所の満空状況に応じた撮像態様を正解データとして学習されたモデルを生成する。
例えば、情報処理装置100は、ステップS12で説明したように、撮像物の撮像態様として、道路上に引かれたラインが車両との位置関係に応じてどのような形状で撮像されるかを示す撮像態様と、各撮像態様での満空状況との組合せを正解データとして用いることにより、ラインがどのようなパターンのときは空車であるのかや、ラインがどのようなパターンのときは空車であるのかを学習しモデルを生成する。
また、例えば、情報処理装置100は、ステップS12で説明したように、撮像物の撮像態様として、道路上に引かれたラインが車両との位置関係に応じてどのような形状で撮像されるかを示す撮像態様と、各撮像態様での満空状況との組合せを正解データとして用いることにより、ラインがどのようなパターンのときは空車であるのか、また、ラインがどのようなパターンのときは満車であるのかを学習しモデルを生成する。
また、例えば、情報処理装置100は、時間帯、天候、周辺の照度等がさらに要素として組み合わされた正解データを用いて、ラインがどのようなパターンや色のときは空車であるか、また、ラインがどのようなパターンや色のときは満車であるのかを学習しモデルを生成する。また、例えば、情報処理装置100は、車両の駐停車が禁止とされる禁止エリアに関する情報も学習することにより、そもそもどのような形状(パターン)のラインが駐車区画のラインであるのかも学習しモデルを生成する。
さらに、情報処理装置100は、上記のような学習により、満空判定の判定結果が通知される処理対象の車両からの撮像データが入力された場合に、この撮像データに写される対象物(例えば、道路上に引かれたライン)の形状(パターン)と、正解データとしての撮像態様が示すラインの形状(パターン)との一致度に基づくスコアであって、駐車場所の満空状況に関する確度を示すスコアを出力するモデルを生成する。生成されたモデルは、情報処理装置100内の所定の記憶部に格納される。なお、情報処理装置100は、道路がメッシュ状に仮想的に分割された各エリアのうち、どのエリアに駐車場所が存在するかを示す位置情報を記憶部内に有している場合がある。かかる場合、情報処理装置100は、駐車場所が存在するエリア毎に、そのエリアの撮像データサンプルに基づき学習されたモデルを生成してもよい。
また、モデルの学習手法については、任意の公知技術が適用可能である。例えば、モデルの生成は、機械学習に関する種々の従来技術を適宜用いて行われてもよい。例えば、モデルの生成は、SVM(Support Vector Machine)等の教師あり学習の機械学習に関する技術を用いて行われてもよい。また、例えば、モデルの生成は、教師なし学習の機械学習に関する技術を用いて行われてもよい。例えば、モデルの生成は、深層学習(ディープラーニング)の技術を用いて行われてもよい。例えば、モデルの生成は、RNN(Recurrent Neural Network)やCNN(Convolutional Neural Network)等の種々のディープラーニングの技術を適宜用いて行われてもよい。なお、上記モデルの生成に関する記載は例示であり、モデルの生成は、取得可能な情報等に応じて適宜選択された学習手法により行われてもよい。
次に、情報処理装置100は、処理対象の車両について、駐車場所の満空状況を判定する判定処理を行い、その判定結果を通知するタイミングであるか否かを判定する(ステップS14)。処理対象の車両は、ドラレコ装置10を有する車両であればどのような車両であってもよい。ここでは、処理対象の車両として、道路L5を走行中の車両C5(ドライバーD5が運転)を例に挙げる。例えば、情報処理装置100は、車両C5の運転態様が所定の条件を満たした場合(例えば、速度が所定速度より遅くなった場合)や、ドライバーD5の身体的挙動が所定の条件を満たした場合(例えば、首を振る等の左右を見渡す挙動が取られた場合)には、上記タイミングであると判定する。情報処理装置100は、かかるタイミングでないと判定した場合には(ステップS14;No)、条件が満たされるまで待機する。一方、情報処理装置100は、かかるタイミングであると判定した場合には(ステップS14;Yes)、ステップS15の処理を行う。
具体的には、情報処理装置100は、処理対象の車両から撮像データ(対象撮像データ)を取得する(ステップS15)。図1の例では、情報処理装置100は、処理対象の車両C5のドラレコ装置10−5から、撮像によって得られた対象撮像データを取得する。より具体的には、情報処理装置100は、車両C5が走行中にリアルタイム撮像された対象撮像データを逐一取得する。かかる撮像データも当然ながら時間的概念を有する。例えば、対象撮像データは、車両C5の走行および走行中の時間経過に応じて撮像物や、撮像物の態様が変化するデータである。
次に、情報処理装置100は、ステップS15で取得した対象撮像データに基づいて、例えば、道路L5に存在するパーキングメーター用の駐車場所の満空状況を判定する満空判定を実行する(ステップS16)。そして、情報処理装置100は、満空判定の判定結果を処理対象の車両C5のドライバーD5に通知する(ステップS17)。
例えば、情報処理装置100は、道路L5に存在するパーキングメーター用の駐車区画毎に、当該駐車区画の満空状況を判定する満空判定を実行する。例えば、情報処理装置100は、道路L5に存在するパーキングメーター用の駐車区画毎に、当該駐車区画の満空状況を判定する満空判定を実行する。例えば、情報処理装置100は、ステップS13で生成されたモデルを用いて、車両C5が走行中のリアルタイム状況下で、道路L5に存在するパーキングメーター用の駐車区画毎に、当該駐車区画の満空状況を判定する満空判定を実行する。
ここで、実施形態にかかる撮像データは、動画であるため、例えば、1秒間において数十枚もの画像データにおいて構成される。したがって、情報処理装置100が、リアルタイムに撮像データを遂次取得するというのは、車両の走行および走行中の時間経過に応じて変化する画像データを連続的に取得してゆくことを意味する。このため、例えば、ドラレコ装置10−5から遂次取得された対象撮像データとして、画像データGP5−1、画像データGP5−2、画像データGP5−3を例に挙げる。言い換えれば、ドラレコ装置10−5から遂次取得される動画としての対象撮像データは、画像データGP5−1、画像データGP5−2、画像データGP5−3によって構成されるものとする。
また、画像データGP5−1は、車両C5が道路L5を走行しているときの、ある所定の時刻t1において撮像されたデータであるものとする。また、画像データGP5−2は、車両C5が道路L5を走行しているときの、ある所定の時刻t2において撮像されたデータであるものとする。また、画像データGP5−3は、車両C5が道路L5を走行しているときの、ある所定の時刻t3において撮像されたデータであるものとする。
まず、画像データGP5−1の例について説明する。情報処理装置100は、画像データGP5−1を取得した時点で、画像データGP5−1をモデルに入力することにより、画像データGP5−1に写されている駐車区画が空車である確率(空車率)を算出する。情報処理装置100は、正解データに基づきどのような形状のラインが駐車区画のラインであるかや、このラインが駐車区画のラインである場合、近傍の車両との位置関係に応じてどのような態様で撮像されているときに空車あるいは満車であるかを学習している。したがって、情報処理装置100は、画像データGP5−1に一切ラインが映されてない場合には満空判定を行わない。一方、情報処理装置100は、画像データGP5−1に駐車区画のラインが映されている場合には、このラインに対応する駐車区画について、モデルを用いて空車である確率を算出する。空車である確率を算出するは、満車である確率(満車率)を算出するとも言い換えることができる。
例えば、情報処理装置100は、画像データGP5−1に写されている駐車区画について、所定値(例えば、90%)以上の確率を算出した場合にはその駐車場所は空車であると判定し、所定値(例えば、3%)以下の確率を算出した場合にはその駐車場所は満車であると判定する。この後、図2を用いて詳しく説明するが、画像データGP5−1に写されている駐車区画には、車両C100が駐車されているため満車である。したがって、かかる例では、情報処理装置100は、車両C100が駐車されている駐車区画について、空車率3%以下の確率を算出することになる。そうすると、情報処理装置100は、車両C100が駐車されているこの駐車区画は満車と判定する。
かかる場合、情報処理装置100は、ステップS17において、車両C100が駐車されている駐車区画は満車であることを示す情報を、ドラレコ装置10−5を介してドライバーD5に通知する。例えば、情報処理装置100は、ドラレコ装置10−5の表示画面に現在表示されている画像データGP5−1に対して、車両C100が駐車されている駐車区画は満車であることを示す満車情報を重ねて表示させる。このあと図2で説明するが、一例を示すと、情報処理装置100は、「満」という文字が対応付けられた矩形の枠線としての満車情報IF100を、車両C100が駐車されている駐車区画を囲むようにして表示させる。
次に、画像データGP5−2の例について説明する。同様に、情報処理装置100は、画像データGP5−2を取得した時点で、画像データGP5−2をモデルに入力することにより、画像データGP5−2に写されている駐車区画が空車である確率(空車率)を算出する。例えば、情報処理装置100は、画像データGP5−2に駐車区画のラインが映されている場合には、このラインに対応する駐車区画について、モデルを用いて空車である確率を算出する。
例えば、情報処理装置100は、画像データGP5−2に写されている駐車区画について、所定値(例えば、90%)以上の確率を算出した場合にはその駐車場所は空車であると判定し、所定値(例えば、3%)以下の確率を算出した場合にはその駐車場所は満車であると判定する。次の図2の例では、画像データGP5−2に写されている手前の駐車区画には、車両C110が駐車されているため満車である。したがって、情報処理装置100は、車両C110が駐車されている駐車区画について、空車率3%以下の確率を算出することになる。そうすると、情報処理装置100は、車両C110が駐車されているこの駐車区画は満車と判定する。
また、図2の例によると、画像データGP5−2では、車両C110と車両C120との間には車両一台分の駐車区画が存在し、かかる駐車区画には車両が駐車されていない。したがって、情報処理装置100は、車両C110と車両C120との間に存在するこの駐車区画について、空車率90%以上の確率を算出することになる。そうすると、情報処理装置100は、車両C110と車両C120との間に存在するこの駐車区画は空車と判定する。
以上のような場合、情報処理装置100は、ステップS17において、車両C110が駐車されている駐車区画は満車であることを示す情報、および、車両C110と車両C120との間に存在する駐車区画は空車であることを示す情報をドラレコ装置10−5を介して、ドライバーD5に通知する。例えば、情報処理装置100は、ドラレコ装置10−5の表示画面に現在表示されている画像データGP5−2に対して、満車情報および空車情報を重ねて表示させる。このあと図2で説明するが、一例を示すと、情報処理装置100は、「満」という文字が対応付けられた矩形の枠線としての満車情報IF110を、車両C110が駐車されている駐車区画を囲むようにして表示させる。また、情報処理装置100は、「空」という文字が対応付けられた矩形の枠線としての空車情報IF115を、車両C110と車両C120との間に存在する駐車区画を囲むようにして表示させる。
次に、画像データGP5−3の例について説明する。同様に、情報処理装置100は、画像データGP5−3を取得した時点で、画像データGP5−3をモデルに入力することにより、画像データGP5−3に写されている駐車区画が空車である確率(空車率)を算出する。例えば、情報処理装置100は、画像データGP5−3に駐車区画のラインが映されている場合には、このラインに対応する駐車区画について、モデルを用いて空車である確率を算出する。
例えば、情報処理装置100は、画像データGP5−3に写されている駐車区画について、所定値(例えば、90%)以上の確率を算出した場合にはその駐車場所は空車であると判定し、所定値(例えば、3%)以下の確率を算出した場合にはその駐車場所は満車であると判定する。次の図2の例では、画像データGP5−3に写されている駐車区画には、車両C120が駐車されているため満車である。したがって、情報処理装置100は、車両C120が駐車されている駐車区画について、空車率3%以下の確率を算出することになる。そうすると、情報処理装置100は、車両C120が駐車されているこの駐車区画は満車と判定する。
また、図2の例によると、画像データGP5−2では、車両C110と車両C120との間には車両一台分の駐車区画が存在し、かかる駐車区画には車両が駐車されていない。したがって、情報処理装置100は、車両C110と車両C120との間に存在するこの駐車区画について、空車率90%以上の確率を算出することになる。そうすると、情報処理装置100は、車両C110と車両C120との間に存在するこの駐車区画は空車と判定する。
かかる場合、情報処理装置100は、ステップS17において、車両C120が駐車されている駐車区画は満車であることを示す情報をドラレコ装置10−5を介して、ドライバーD5に通知する。例えば、情報処理装置100は、ドラレコ装置10−5の表示画面に現在表示されている画像データGP5−3に対して、満車情報を重ねて表示させる。このあと図2で説明するが、一例を示すと、情報処理装置100は、「満」という文字が対応付けられた矩形の枠線としての満車情報IF120を、車両C120が駐車されている駐車区画を囲むようにして表示させる。
ここからは、図2を用いて、画像データGP5−1、画像データGP5−2、画像データGP5−3それぞれで説明した通知例についてあらためて説明する。図2は、満空判定での判定結果を通知する一例を示す図である。図2に示すように、処理対象の車両C5のドラレコ装置10−5は、ステップS17での判定結果の通知を受けて、満空状況を示す情報を表示画面に表示する。例えば、ドラレコ装置10−5は、時間経過に応じて逐次変化する撮像データに応じて、そのときの撮像データに対する判定結果を重ねて表示する(ステップS18)。
図2(a)に示す画像データGP5−1は、時間経過に応じて変化する動画データのうち、車両C5が道路L5を走行しているときの、ある所定の時刻t1において撮像されたデータである。例えば、ドラレコ装置10−5は、情報処理装置100からの通知(表示指示)を受けて、自装置の表示画面に現在時刻(時刻t1)に表示されている画像データGP5−1に対して、車両C100が駐車されている駐車区画は満車であることを示す満車情報を重ねて表示させる。図2(a)に示すように、ドラレコ装置10−5は、例えば、「満」という文字が対応付けられた矩形の枠線としての満車情報IF100を、車両C100が駐車されている駐車区画を囲むようにして表示させる。例えば、ドラレコ装置10−5は、車両C5の走行によりこの駐車区画が撮像範囲から完全に外に出るまで、満車情報IF100を表示し続ける。
図2(b)に示す画像データGP5−2は、時間経過に応じて変化する動画データのうち、車両C5が道路L5を走行しているときの、ある所定の時刻t2において撮像されたデータである。例えば、ドラレコ装置10−5は、情報処理装置100からの通知(表示指示)を受けて、自装置の表示画面に現在時刻(時刻t2)に表示されている画像データGP5−2に対して、車両C110が駐車されている駐車区画は満車であることを示す情報、および、車両C110と車両C120との間に存在する駐車区画は空車であることを示す情報を重ねて表示させる。図2(b)に示すように、ドラレコ装置10−5は、例えば、「満」という文字が対応付けられた矩形の枠線としての満車情報IF110を、車両C110が駐車されている駐車区画を囲むようにして表示させる。また、ドラレコ装置10−5は、「空」という文字が対応付けられた矩形の枠線としての空車情報IF115を、車両C110と車両C120との間に存在する駐車区画を囲むようにして表示させる。例えば、ドラレコ装置10−5は、車両C5の走行によりこれらの駐車区画が撮像範囲から完全に外に出るまで、満車情報IF110および空車情報IF115を表示し続ける。
図2(c)に示す画像データGP5−3は、時間経過に応じて変化する動画データのうち、車両C5が道路L5を走行しているときの、ある所定の時刻t3において撮像されたデータである。例えば、ドラレコ装置10−5は、情報処理装置100からの通知(表示指示)を受けて、自装置の表示画面に現在時刻(時刻t3)に表示されている画像データGP5−3に対して、車両C120が駐車されている駐車区画は満車であることを示す満車情報を重ねて表示させる。図2(c)に示すように、ドラレコ装置10−5は、例えば、「満」という文字が対応付けられた矩形の枠線としての満車情報IF120を、車両C120が駐車されている駐車区画を囲むようにして表示させる。例えば、ドラレコ装置10−5は、車両C5の走行によりこの駐車区画が撮像範囲から完全に外に出るまで、満車情報IF120を表示し続ける。
なお、情報処理装置100は、例えば、正解データと対象撮像データとのマッチング、あるいは、対象撮像データに対する動画解析により駐車区画のラインを検出できた時点で、検出した駐車区画について満空判定を開始することができる。これにより、情報処理装置100は、例えば、車両C5と駐車区画とが離れすぎておりドライバーD5が駐車区画の存在を視認不可能な位置を車両C5が走行している段階で、判定結果を通知することができる。また、情報処理装置100は、車両C110と車両C120との間に存在する駐車区画のように、他の車両に邪魔されて目視ではその存在を視認不可能な位置を車両C5が走行している段階で、判定結果を通知することができる。このように、情報処理装置100は、例えば、ドライバーが駐車区画の存在を完全に視認できるような位置まで近づかなくともかなり早い段階で判定結果を通知することができるため、駐車区画に駐車するか否かの判断を余裕をもって行わせることができる。
さて、図1および図2を用いて説明してきたように、実施形態にかかる情報処理装置100は、車両のドライブレコーダーによって撮像された撮像データを取得する。そして、情報処理装置100は、取得した撮像データに基づいて、撮像データに写される道路に設置される駐車場所の満空状況をリアルタイム判定する。そして、情報処理装置100は、判定結果をドライバー(ユーザ)にリアルタイム通知する。
これにより、実施形態にかかる情報処理装置100は、道路に設置される駐車場所の満空状況であって、走行付近の駐車場所の満空状況を走行中のドライバーに対して、リアルタイムかつ的確に通知することができる。
また、情報処理装置100は、車両の駐停車が禁止とされる禁止エリアに関する情報も学習しているため、例えば、信号前の停止線、横断歩道を駐車区画として認識し、満空判定してしまうといった状況を回避することができる。また、情報処理装置100は、特定の施設(例えば、店舗、消防署、警察所)前のエリアも駐停車禁止エリアとして学習することもできる。このため、情報処理装置100は、例えば、これらの施設前にライン等の特定の撮像物が存在するような場合、これを駐車区画として認識し、満空判定してしまうといった状況を回避することができる。
また、ドライブレコーダーのカメラは、例えば、暗闇や悪天候時等、視認によって得られる情報が不確かな環境下や、その他の希少環境下においても、その環境下におかれた対象物を高精度に認識することができる場合がある。このようなことからも、本実施形態では、撮像データを用いることに優位性を見出している。すなわち、情報処理装置100は、車両の周辺環境がどのような環境であってもそれに左右されずに、的確に精度よく満空状況を通知することができる。
また、先に、ドラレコ装置10が、実施形態にかかる情報処理を行う情報処理装置の一例として単独で動作してもよいことを示したが、かかる場合には、ドラレコ装置10は、例えば、自装置が設置される車両を処理対象の車両として、図1および図2で説明した各ステップでの処理を行う。また、ドラレコ装置10は、学習によるモデル生成は行わず、例えば、所定期間毎にそれまでに収集された撮像データサンプルを用いて更新されるモデルを外部装置(例えば、図1の情報処理装置100)から取得してもよい。
また、情報処理装置100は、ドラレコ装置10とパーキングメータ間での近距通信による決済や、例えば、ドライバーがスマートフォン等の端末装置に表示されたバーコードをパーキングメーターにかざすことによるバーコード決済に関する決済処理を行う機能を有してもよい。また、ドラレコ装置10が単独で動作する場合には、例えば、ドラレコ装置10が、パーキングメーターとの近距通信で取得した決済情報を所定の決済サーバ等に送信することにより決済処理を行ってもよい。
また、上記例では、情報処理装置100が、撮像データに写される所定の撮像物として、ラインの撮像態様が所定の条件を満たしているか否かに応じて、駐車場所の満空状況を判定する例を示した。しかし、情報処理装置100は、撮像データに写される所定の撮像物のうち、駐車場所が存在することを示す所定の対象物に基づいて、駐車場所の満空状況を判定することもできる。例えば、情報処理装置100は、所定の対象物として、パーキングメーター、または、駐車場所に対応する(駐車場所を示す)標識に基づいて、駐車場所の満空状況を判定する。この場合、例えば、情報処理装置100、駐車区画が満車および空車それぞれの場合においてパーキングメーター、または、標識がどのような撮像態様で撮像されるかが正解データとしてさらに学習されたモデルに基づいて、処理対象の駐車場所の満空状況を判定する。
また、情報処理装置100は、判定結果が通知される処理対象の車両から取得した撮像データにパーキングメータ、または、標識が写されている場合に、処理対象の車両はパーキングメーター用の駐車場所が存在するエリアに進入したと判断し、このエリア内に存在する駐車場所の満空状況を判定することもできる。
〔2.情報処理装置の構成〕
次に、図4を用いて、実施形態にかかる情報処理装置100について説明する。図4は、実施形態にかかる情報処理装置100の構成例を示す図である。図4に示すように、情報処理装置100は、通信部110と、記憶部120と、制御部130とを有する。例えば、情報処理装置100は、図1および図2で説明した情報処理を行うサーバ装置である。一方で、実施形態にかかる情報処理を行うのは、端末装置としてのドラレコ装置10であってもよい。
(記憶部120について)
記憶部120は、例えば、RAM(Random Access Memory)、フラッシュメモリ等の半導体メモリ素子またはハードディスク、光ディスク等の記憶装置によって実現される。記憶部120は、撮像データ記憶部121と、駐車場所情報記憶部122と、モデル記憶部123とを有する。
(撮像データ記憶部121について)
撮像データ記憶部121は、ドラレコ装置10のカメラ(撮像部)による撮像で得られた撮像データに関する情報を記憶する。ここで、図5に実施形態にかかる撮像データ記憶部121の一例を示す。図5の例では、撮像データ記憶部121は、「ドライバーID」、「端末ID」、「日時」、「撮像データ」、「正解ラベル」といった項目を有する。
「ドライバーID」は、ドラレコ装置10が設置される車両のドライバーを識別する識別情報を示す。なお、ドライバーは、ドラレコ装置10の所有者であるため、「ユーザ」と言い換えることができる。「端末ID」は、ドラレコ装置10を識別する識別情報を示す。「日時」は、「撮像データ」が得られた日時を示す。図5の例では、日時に「DT1」といった概念的な記号を用いているが、実際には、例えば、年月日、日付、時刻情報が入力される。「撮像データ」は、ドラレコ装置10のカメラ(撮像部)による撮像で得られた撮像データを示す。「撮像データ」は、例えば、情報処理装置100の学習のために正解データ用のサンプルとして用いられることから、図1で示した撮像データサンプルに相当する。また、「撮像データ」は、動画であり、動画長「10分」といったように時間の概念を有する。「正解ラベル」は、対応する「撮像データ」に対するタグ付けによって指定された機械学習用の正解データ(教師データ)である。
すなわち、図5の例では、ドライバーID「D1」によって識別されるドライバー(ドライバーD1)のドラレコ装置であって、端末ID「10−1」によって識別されるドラレコ装置(ドラレコ装置10−1)が、日時「DT1」での撮像によって取得した撮像データ(撮像データサンプル)である「撮像データVG1」を情報処理装置100に送信することにより、情報処理装置100がこれを格納している例を示す。かかる例は、図1での説明に対応する。また、図5の例では、図1で説明したように、撮像データVG1に対して、正解ラベルCL11、正解ラベルCL12、正解ラベルCL13が指定されている例を示す。
なお、例えば、ドラレコ装置10−1が独立して実施形態にかかる情報処理を実行する場合、ドラレコ装置10−1は、図5に示すような撮像データ記憶部121を有することができる。
(駐車場所情報記憶部122について)
駐車場所情報記憶部122は、道路に設置される駐車場所(例えば、パーキングメーター用の駐車場所)の位置(所在地)に関する情報を記憶する。ここで、図6に実施形態にかかる駐車場所情報記憶部122の一例を示す。図6の例では、駐車場所情報記憶部122は、「都道府県」、「市区町村」、「道路ID」、「エリア」、「位置情報」といった項目を有する。
「都道府県」、および、「市区町村」は、対応する「位置情報」が示す位置が含まれる都道府県および市区町村を示す。「道路ID」は、道路を識別する識別情報を示す。「エリア」は、「道路ID」が示す道路がメッシュ状に仮想的に分割された各エリアのうち、駐車場所が存在するエリアを識別する識別情報を示す。「位置情報」は、対応する「エリア」の位置を示す位置情報である。このようなことから、「位置情報」は、駐車場所の位置を示す位置情報とも言い換えることができる。図1の例では、「位置情報」に概念的な記号を用いているが、実際に例えば、住所あるいは経緯度等によって示される。
すなわち、図6の例では、東京都M区を通る道路であって、道路ID「RT11」によって識別される道路(道路RT11)が仮想的に分割された各エリアのうち、「PTm1」の位置にあるエリア「ARm1」、「PTm2」の位置にあるエリア「ARm2」、「PTm3」の位置にあるエリア「ARm3」に駐車場所が存在する例を示す。つまり、図6の例では、道路RT11上の位置である位置「PTm1」、位置「PTm2」、位置「PTm3」には、駐車場所が存在する例を示す。
(モデル記憶部123について)
モデル記憶部123は、情報処理装置100により生成されたモデルを記憶する記憶部である。モデル記憶部123は、例えば、各モデルを識別する「モデルID」と、当該モデルを示すモデル情報とを対応付けて記憶する。
(制御部130について)
図4に戻り、制御部130は、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等によって、情報処理装置100内部の記憶装置に記憶されている各種プログラムがRAMを作業領域として実行されることにより実現される。また、制御部130は、例えば、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路により実現される。
図4に示すように、制御部130は、取得部131と、生成部132と、満空判定部133と、通知部134と、提供部135と、挙動判定部136と、開始制御部137とを有し、以下に説明する情報処理の機能や作用を実現または実行する。なお、制御部130の内部構成は、図4に示した構成に限られず、後述する情報処理を行う構成であれば他の構成であってもよい。また、制御部130が有する各処理部の接続関係は、図4に示した接続関係に限られず、他の接続関係であってもよい。
(取得部131について)
取得部131は、撮像データを取得する。例えば、取得部131は、道路を走行する移動体に搭載されたカメラ(ドラレコ装置10のカメラ)によって撮像された撮像データを取得する。例えば、ドラレコ装置10から撮像データが送信される場合、取得部131は、ドラレコ装置10から撮像データを取得(受信)する。また、取得部131は、取得した撮像データを撮像データ記憶部121に格納する。
なお、取得部131は、必ずしもドラレコ装置10のカメラによる撮像データだけを取得する必要はなく、例えば、各地の施設(例えば、信号機、電柱、マンション、店舗等)に備え付けられるカメラ(例えば、防犯カメラ)と通信可能なのであれば、このようなカメラよる撮像データも取得することができる。
また、取得部131は、撮像データを利用して処理が行われる場合、撮像データ記憶部121から必要な撮像データを取得し、対応する処理部に出力するといった処理も行うことができる。例えば、後述する生成部132が学習を行う際には、取得部131は、撮像データ記憶部121から撮像データを取得し、生成部132に出力する。このようなことから、取得部131は、処理の一つとして、例えば、図1で説明したステップS11やS15の処理を行う。
(生成部132について)
生成部132は、学習によりモデルを生成する。生成部132は、所定の撮像物の撮像態様と、当該撮像態様が示すようにこの撮像物が撮像された際の駐車場所の満空状況とが対応付けられた情報により学習されたモデルを生成する。例えば、生成部132は、撮像物の撮像態様のうち、駐車場所の満空状況に応じた撮像態様を正解データとして学習されたモデルを生成する。例えば、生成部132は、判定結果が通知される処理対象の移動体に搭載されたカメラによって撮像された撮像データが入力された場合に、撮像データに写される対象物である道路上に引かれたラインの形状と、正解データとしての撮像態様が示すラインの形状との一致度に基づくスコアであって、駐車場所の満空状況に関する確度を示すスコアを出力するモデルを生成する。
また、生成部132は、移動体の駐停車が禁止とされる禁止エリアに関する情報がさらに学習されたモデルを生成することもできる。例えば、生成部132は、移動体の駐停車が禁止とされる禁止エリアに関する情報を、満空判定を行わないための正解データとして学習することによりモデルを生成する。このようなことから、生成部132は、処理の一つとして、例えば、図1で説明したステップS12およびS13の処理を行う。
(満空判定部133について)
満空判定部133は、取得部131により取得された撮像データに基づいて、撮像データに写される道路に設置される駐車場所の満空状況を判定する。例えば、満空判定部133は、ドラレコ装置10を有する移動体が現在走行中の道路に設置される駐車場所であって、当該移動体の進行方向に存在する駐車場所の現在の満空状況を判定する。例えば、満空判定部133は、駐車場所として、1台の移動体を駐車させるための駐車区画毎に、当該駐車区画の満空状況を判定する。
また、満空判定部133は、撮像データに基づいて、撮像データに写される所定の撮像物の撮像態様が所定の条件を満たしているか否かに応じて、駐車場所の満空状況を判定する。例えば、満空判定部133は、所定の撮像物の撮像態様として、道路上に引かれたラインが移動体との位置関係に応じてどのように撮像されるかを示す撮像態様であって、ラインの撮像態様が所定の条件を満たしているか否かに応じて、駐車場所の満空状況を判定する。例えば、満空判定部133は、撮像態様が示す形状であって、所定の撮像物の形状が所定の形状であるか否かに応じて、駐車場所の満空状況を判定する。
一例として、満空判定部133は、所定の撮像物の撮像態様と、当該撮像態様が示すように撮像物が撮像された際の駐車場所の満空状況とが対応付けられた情報により学習されたモデルに基づいて、処理対象の駐車場所の満空状況を判定する。例えば、満空判定部133は、撮像物の撮像態様のうち、駐車場所の満空状況に応じた撮像態様を正解データとして学習されたモデルに基づいて、処理対象の駐車場所の満空状況を判定する。例えば、満空判定部133は、判定結果が通知される処理対象の移動体に搭載されたカメラによって撮像された撮像データが入力された場合に、撮像データに写される対象物である道路上に引かれたラインの形状と、正解データとしての撮像態様が示すラインの形状との一致度に基づくスコアであって、駐車場所の満空状況に関する確度を示すスコアを出力するモデルに基づいて、駐車場所の満空状況を判定する。また、満空判定部133は、移動体の駐停車が禁止とされる禁止エリアに関する情報が学習された前記モデルに基づいて、禁止エリアを除く領域における駐車場所の満空状況を判定する。このようなことから、満空判定部133は、処理の一つとして、例えば、図1で説明したステップS16の処理を行う。
また、図6で説明したように、情報処理装置100は、駐車場所情報記憶部122において、駐車場所が存在するエリアを示す位置情報を有している。したがって、満空判定部133は、例えば、処理対象の移動体が、駐車場所が存在するエリアに近付いた場合に、満空判定を行ってもよい。具体的には、満空判定部133は、駐車場所が存在するエリアを示す位置情報に基づいて、駐車場所の満空状況を判定する。例えば、満空判定部133は、判定結果が通知される処理対象の移動体がこのエリア内に進入した場合に、エリア内に存在する駐車場所の満空状況を判定する。
(通知部134について)
通知部134は、満空判定部133による判定結果をドライバーに通知する。例えば、通知部134は、判定結果が通知される処理対象の移動体に搭載されたカメラによって撮像された撮像データであって、表示画面においてリアルタイムに表示される撮像データに写される駐車場所毎に、現在の満空状況を表示させる。例えば、通知部134は、図2で説明したように、「満」という文字が対応付けられた矩形の枠線としての満車情報を、車両が駐車されている駐車区画を囲むようにして表示させる。また、例えば、通知部134は、図2で説明したように、「空」という文字が対応付けられた矩形の枠線としての空車情報を、車両が駐車されていない駐車区画を囲むようにして表示させる。
さて、ここからは、通知部134による他の通知について説明する。例えば、情報処理装置100は、情報通知される通知対象の移動体(判定結果が通知される処理対象の移動体)以外の他の移動体を基準とする満空情報であって、駐車場所の満空状況を示す満空情報(判定結果)を取得し、取得した満空情報を情報通知される通知対象の移動体に通知する。よりわかり易く説明する。図1および図2の例では、情報処理装置100が、処理対象の車両C5のドラレコ装置10から現在の撮像データを取得し、この撮像データについて満空判定し、表示画面の撮像データに重ねる形で判定結果(すなわち、満空情報)を通知する例を示した。しかしながら、このような一連の実施形態にかかる情報処理は、当然ながら車両C5だけでなく、多くの各車両に対して行われる。例えば、車両C5から見て他の車両である車両C6についても同様の情報処理が行われる。したがって、ここで説明する通知は、車両C5から見て他の車両である車両C6からの撮像データに基づき、車両C6を基準として満空判定された際の判定結果を、車両C5のドラレコ装置10−5が有する表示画面に現在写される撮像データに対して反映させる、という通知手法である。
このような通知を行う前提について説明する。例えば、図2の例によると、情報処理装置100は、車両C5の走行車線側に存在する駐車区画を対象に満空判定している。しかし、車両C5の走行車線に対する反対車線側にも駐車区画があり、この駐車区画が撮像データに写されていれば、情報処理装置100は、当然、この駐車区画についても満空判定することができる。要は、情報処理装置100は、判定結果が通知される処理対象の車両の走行車線、反対車線に拘わらず撮像データに駐車区画が写されていればそれに対して満空判定を行うことができる。しかしながら、ドラレコ装置10は、基本的には走行車線側の情報を中心に撮像してしまう傾向にあるため、撮像データからは、反対車線側の情報(例えば、駐車区画が存在するか否か)を高精度に認識することができない場合がある。そうすると、車両C5の撮像データに基づき反対車線側の駐車区画について満空判定された判定結果より、反対車線を走行する車両C6の撮像データについて満空判定された判定結果の方が精度が高い場合がある。このため、車両C5のドライバーD5に対して、車両C6を基準とする判定結果も通知することができれば、より正確な満空状況をドライバーD5に通知することができるようになる。
以上の前提を踏まえて、車両C5および車両C6を例に用いると、情報処理装置100は、情報通知される通知対象の車両C5以外の他の移動体である車両C6であって、反対車線を走行する車両C6を基準とする満空情報であって、駐車区画の満空状況を示す満空情報を取得する。そして、情報処理装置100(通知部134)は、取得された満空情報を車両C5のドライバーD5に通知する。この点について、図7を用いて説明する。図7は、情報通知の他の一例を示す図である。
図7の例では、車両C6は、車両C5とは反対車線を車両C5に向かって走行してきている。このようなことから、車両C6は、この先、車両C5が通過し得る地点を既に走行してきているため、同時刻において、車両C5から見るよりもその地点の情報を正確に知ることができる。例えば、図7において丸印で囲まれる2つの駐車区画の満空状況がどうであるかは、時刻t4の時点では、車両C6の方が車両C5よりも早く知ることができる。言い換えれば、情報処理装置100は、時刻t4の時点では、車両C5の撮像データよりも車両C6の撮像データからの方が精度よく、上記2つの車区画の満空状況を判定することができる。
例えば、情報処理装置100は、通知対象の車両C5以外の他の車両のうち、例えば、車両C5が将来通過し得る地点を走行してきた車両を特定する、図7の例では、情報処理装置100は、このような車両として車両C6を特定したとする。なお、図4では不図示であるが、情報処理装置100は、かかる特定処理を行う処理部(例えば、特定部)をさらに有してよい。そしてこのように特定された時点である時刻t4では、例えば、車両C5および車両C6は、図7のような位置関係で走行している。
このような状態において、取得部131は、車両C5のドラレコ装置10−5から時刻t4時点での撮像データ(画像データGP5−4)を取得する(ステップS21)。また、取得部131は、ステップS21において、車両C6のドラレコ装置10−6からも時刻t4時点での撮像データ(画像データ)を取得する。次に、満空判定部133は、画像データGP5−4をモデルに適用することにより、画像データGP5−4について満空判定を行う(ステップS22)。満空判定の詳細については、図1で説明したとおりであるため省略する。また、満空判定部133は、ステップS21において、ドラレコ装置10−6からの画像データについても満空判定を行う。例えば、ドラレコ装置10−6からの画像データについての満空判定で得られた判定結果は、車両C6を基準とする判定結果である。
例えば、満空判定部133は、ドラレコ装置10−6からの画像データに基づいて、丸印で囲まれる2つの駐車区画のうち、車両C5から見て手前の駐車区画は車両C200が駐車されており満車で、後方の駐車区画は空車と判定したとする。このような判定結果は、車両C6を基準とする判定結果である。
また、かかる場合、通知部134は、車両C6を基準とする判定結果を、例えば、満空判定部133から取得する。そして、通知部134は、車両C6を基準とする判定結果と、車両C5側での判定結果とを合わせて通知する(ステップS23)。例えば、通知部134は、車両C6を基準とする判定結果として、車両C200が駐車されている手前の駐車区画は満車であることを示す情報と、その後方の駐車区画は空車であること示す情報とを、ドラレコ装置10−5を介して、ドライバーD5に通知する。例えば、通知部134は、ドラレコ装置10−5の表示画面に現在表示されている画像データGP5−4に対して、車両C200が駐車されている駐車区画は満車であることを示す満車情報を重ねて表示させる。一例を示すと、通知部134は、「満」という文字が対応付けられた矩形の枠線としての満車情報IF200を、車両C200が駐車されている駐車区画を囲むようにして表示させる。
また、通知部134は、ドラレコ装置10−5の表示画面に現在表示されている画像データGP5−4に対して、後方の駐車区画は空車であることを示す空車情報を重ねて表示させる。一例を示すと、通知部134は、「空」という文字が対応付けられた矩形の枠線としての空車情報IF210を、この駐車区画を囲むようにして表示させる。
図7(a)は、上述した状況が反映されている図である。図7(a)に示す画像データGP5−4は、時間経過に応じて変化する動画データのうち、車両C5が道路L5を走行しているときの時刻t4において撮像されたデータである。例えば、ドラレコ装置10−5は、通知部134からの通知(表示指示)を受けて、自装置の表示画面に現在時刻(時刻t4)に表示されている画像データGP5−4に対して、車両C200が駐車されている駐車区画は満車であることを示す満車情報を重ねて表示させる。図7(a)に示すように、ドラレコ装置10−5は、例えば、「満」という文字が対応付けられた矩形の枠線としての満車情報IF200を、車両C200が駐車されている駐車区画を囲むようにして表示させる。例えば、ドラレコ装置10−5は、車両C5の走行によりこの駐車区画が撮像範囲から完全に外に出るまで、満車情報IF200を表示し続ける。
また、例えば、ドラレコ装置10−5は、通知部134からの通知(表示指示)を受けて、自装置の表示画面に現在時刻(時刻t4)に表示されている画像データGP5−4に対して、後方の駐車区画は空車であることを示す空車情報を重ねて表示させる。図7(a)に示すように、ドラレコ装置10−5は、例えば、「空」という文字が対応付けられた矩形の枠線としての空車情報IF210を、後方の駐車区画を囲むようにして表示させる。例えば、ドラレコ装置10−5は、車両C5の走行によりこの駐車区画が撮像範囲から完全に外に出るまで、空車情報IF210を表示し続ける。
図7を用いて説明したように、情報処理装置100は、情報通知される通知対象の移動体(判定結果が通知される処理対象の移動体)以外の他の移動体を基準とする満空情報であって、駐車場所の満空状況を示す満空情報(判定結果)を取得し、取得した満空情報を情報通知される通知対象の移動体に通知する。これにより、情報処理装置100は、より正確な満空状況を通知することができる。
(提供部135について)
提供部135は、空車のため車両を駐車可能となっている駐車場所の位置を指し示す情報をドライバーに提供する。かかる駐車場所をこれまで説明してきた駐車区画とすると、例えば、この駐車区画の前後に車両が駐車されている場合を想定すると、ドライバーはこの駐車区画を見落としてしまうかもしれない。したがって、提供部135は、この上記のような処理を行う。具体的には、提供部135は、撮像データに基づいて、撮像データに写される駐車場所であって、空車であるため車両を駐車可能となっている駐車場所の近傍に駐車されている駐車車両の位置を基準として、駐車場所の位置を指し示す情報をドライバーに提供する。また、提供部135は、撮像データに基づき駐車車両の特徴が認識された場合には、認識された特徴をさらに用いて、駐車場所の位置を指し示す情報をドライバーに提供する。この点について、図2(b)の例を用いて説明する。
図2(b)の例によると、車両C5が時刻t2において道路L5を走行している際には、前方に車両C110および車両S120が駐車されており、これら車両の間には、空車の駐車区画が存在する。ここでは、かかる駐車区画を駐車区画SP1とする。そうすると、ドライバーD5は、時刻t2の時点では、前後の車両C110および車両S120に邪魔されて駐車区画SP1の位置をはっきりと把握できない場合がある。このため、提供部135は、例えば、駐車区画SP1の前に駐車されている車両C120の位置を基準として、また、車両C120の特徴を用いて、駐車区画SP1の位置を指し示す情報をドライバーにD5に提供(通知)する。なお、かかる例では、説明を簡単にするために、車両C120のみを用いた提供例を示すが、車両C110および車両C120の双方、または、車両C110のみが用いられる情報提供であってもよい。
説明を戻すと、例えば、情報処理装置100の所定の処理部(例えば、認識部)が、画像データGP5−2に基づいて、駐車区画SP1の前には、車両C120が駐車されていることを認識するとともに、車両C120は白(色の特徴)のワンボックスカー(車種の特徴)であることを認識したとする。かかる場合、提供部135は、例えば、ドラレコ装置10−5に対して、「前方に見える白色のワンボックスカーの後ろが空いています」といった文字情報あるいは音声を出力させる。
なお、これは一例であり、提供部135は、例えば、駐車区画SP1に特徴的な対象物(例えば、植木、信号、店舗等の各種施設)が認識された場合には、これらの特徴をさらに用いて駐車区画SP1の位置を指し示す情報を提供することができる。また、提供部135は、その時(例えば、時刻t2)の時間帯、または、天候に応じて、認識された特徴のうちドライバーD5の視認率がより高くなるような特徴を選択し、選択した特徴を用いて、駐車区画SP1の位置を指し示す情報を提供することもできる。
(挙動判定部136、開始制御部137について)
ここで、例えば、情報処理装置100による満空判定や満空判定での判定結果の通知が常時行われると、ドラレコ装置10の表示画面には、矩形の枠線としての満車情報や空車情報が高頻度で表示される場合がある。この場合、駐車区画に駐車予定の無いドライバーにとっては、かかる表示を煩わしく思うかもしれない。したがって、情報処理装置100は、ドライバーが駐車区画に駐車しようとしているか否かを判定し、車区画に駐車しようとしている状況下でのみ、駐車区画の通知に関する処理(満空判定や満空判定での判定結果を通知する処理)を介する。
具体的には、挙動判定部136は、車両の運転に関する挙動が所定の条件を満たしたか否かを判定する。そして、開始制御部137は、挙動判定部136により所定の条件を満たしたと判定された場合には、駐車区画の通知に関する処理(満空判定や満空判定での判定結果を通知する処理)を開始させる。例えば、開始制御部137は、挙動判定部136により所定の条件を満たしたと判定された場合には、満空判定部133に対して満空判定を開始するよう指示する。
処理対象の車両C5を例に説明すると、例えば、挙動判定部136は、車両C5の運転に関する挙動として、車両C5の速度が、所定の速度より遅くなったか否かを判定し、開始制御部137は、挙動判定部136により、車両C5の速度が所定の速度より遅くなったと判定された場合には、満空判定部133に対して満空判定を開始させる。
また、挙動判定部136は、車両C5の運転に関する挙動として、ドライバーD5が車両C5を運転している際の運転態様が、所定の運転態様となったか否かを判定し、開始制御部137は、挙動判定部136により、運転態様が所定の運転態様(例えば、車両C5を道路脇に寄せる運転、あるいは、同一エリアを周回する運転)となったと判定された場合には、満空判定部133に対して満空判定を開始させる。
また、挙動判定部136は、車両C5の運転に関する挙動として、ドライバーD5が車両C5を運転している際の身体的挙動が、所定の挙動となったか否かを判定し、開始制御部137は、挙動判定部136により、ドライバーD5の身体的挙動が所定の挙動(例えば、顔を左右に動かして辺りを見渡す挙動、「どこか空いてないかな」といった発話)となったと判定された場合には、満空判定部133に対して満空判定を開始させる。
なお、例えば、図1のステップS14で示した判定処理が、挙動判定部136によって行われる判定処理に相当する。
〔3.処理手順〕
次に、図8を用いて、実施形態にかかる情報処理の手順について説明する。図8は、実施形態にかかる情報処理手順を示すフローチャートである。なお、図8の例では、情報処理装置100は、各地を走行する車両のドラレコ装置10から、学習のためのサンプルとなる撮像データ(撮像データサンプル)を収集し、収集した撮像データサンプルを用いてモデルを生成済みであるものとする。なお、情報処理装置100は、撮像データサンプルを随時取得(収集)している場合には、所定のタイミング毎に(例えば、1週間経過する毎に)、当該所定のタイミングまでに取得した撮像データサンプルを用いてこれまでに生成したモデルを更新することができる。
まず、挙動判定部136は、処理対象の車両について、駐車場所の満空状況を判定する判定処理を行い、その判定結果を通知するタイミングであるか否かを判定する(ステップS14)。例えば、挙動判定部136は、処理対象の車両の運転に関する挙動が所定の条件を満たしたか否かを判定する。挙動判定部136は、処理対象の車両の運転に関する挙動が所定の条件を満たしていないと判定した場合には(ステップS101;No)、処理を行うタイミングではないと判断し、所定の条件が満たされるまで待機する。一方、挙動判定部136は、処理対象の車両の運転に関する挙動が所定の条件を満たしたと判定した場合には(ステップS101;Yes)、処理を行うタイミングであると判断し、この判定結果を開始制御部137に出力する。また、開始制御部137は、挙動判定部136により所定の条件を満たしたと判定された場合には(ステップS101;Yes)、満空判定や満空判定での判定結果を処理対象の車両に通知する処理を開始させる制御を行う。
このような制御を受けて、取得部131は、処理対象の車両から撮像データ(対象撮像データ)を取得する(ステップS102)。例えば、取得部131は、処理対象の車両のドラレコ装置10から、撮像によって得られた対象撮像データを取得する。より具体的には、取得部131は、処理対象の車両が走行中においてリアルタイム撮像された対象撮像データを逐一取得する。
次に、満空判定部133は、ステップS102で取得した対象撮像データに基づいて、例えば、対象撮像データに写される駐車場所の満空状況を判定する満空判定を実行する(ステップS103)。例えば、満空判定部133は、駐車区画毎に、当該駐車区画の満空状況を判定する満空判定を実行する。例えば、満空判定部133は、対象撮像データをモデルに入力することにより出力された確度であって、対象撮像データに写される駐車区画が空車である確率、または、対象撮像データに写される駐車区画が満車である確率に基づいて、駐車区画の満空状況を判定する。
次に、通知部134は、満空判定の判定結果を処理対象の車両のドライバーに通知する(ステップS104)。例えば、通知部134は、処理対象の車両のドラレコ装置10を制御することにより、現在の撮像データに写される駐車区画毎に満車情報や空車情報を表示させる。
〔4.ハードウェア構成〕
また、上記実施形態にかかる情報処理装置100は、例えば図9に示すような構成のコンピュータ1000によって実現される。図9は、情報処理装置100の機能を実現するコンピュータ1000の一例を示すハードウェア構成図である。コンピュータ1000は、CPU1100、RAM1200、ROM1300、HDD1400、通信インターフェイス(I/F)1500、入出力インターフェイス(I/F)1600、及びメディアインターフェイス(I/F)1700を有する。
CPU1100は、ROM1300又はHDD1400に格納されたプログラムに基づいて動作し、各部の制御を行う。ROM1300は、コンピュータ1000の起動時にCPU1100によって実行されるブートプログラムや、コンピュータ1000のハードウェアに依存するプログラム等を格納する。
HDD1400は、CPU1100によって実行されるプログラム、および、かかるプログラムによって使用されるデータ等を格納する。通信インターフェイス1500は、通信網50を介して他の機器からデータを受信してCPU1100へ送り、CPU1100が生成したデータを、通信網50を介して他の機器へ送信する。
CPU1100は、入出力インターフェイス1600を介して、ディスプレイやプリンタ等の出力装置、及び、キーボードやマウス等の入力装置を制御する。CPU1100は、入出力インターフェイス1600を介して、入力装置からデータを取得する。また、CPU1100は、生成したデータを、入出力インターフェイス1600を介して出力装置へ出力する。
メディアインターフェイス1700は、記録媒体1800に格納されたプログラム又はデータを読み取り、RAM1200を介してCPU1100に提供する。CPU1100は、かかるプログラムを、メディアインターフェイス1700を介して記録媒体1800からRAM1200上にロードし、ロードしたプログラムを実行する。記録媒体1800は、例えばDVD(Digital Versatile Disc)、PD(Phase change rewritable Disk)等の光学記録媒体、MO(Magneto-Optical disk)等の光磁気記録媒体、テープ媒体、磁気記録媒体、または半導体メモリ等である。
例えば、コンピュータ1000が実施形態にかかる情報処理装置100として機能する場合、コンピュータ1000のCPU1100は、RAM1200上にロードされたプログラムを実行することにより、制御部130の機能を実現する。また、HDD1400には、記憶部120内のデータが格納される。コンピュータ1000のCPU1100は、これらのプログラムを、記録媒体1800から読み取って実行するが、他の例として、他の装置から、通信網50を介してこれらのプログラムを取得してもよい。
〔5.その他〕
また、図示した各装置の各構成要素は機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しない。すなわち、各装置の分散・統合の具体的形態は図示のものに限られず、その全部または一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的または物理的に分散・統合して構成することができる。
以上、本願の実施形態をいくつかの図面に基づいて詳細に説明したが、これらは例示であり、発明の開示の欄に記載の態様を始めとして、当業者の知識に基づいて種々の変形、改良を施した他の形態で本発明を実施することが可能である。
また、上述してきた「部(section、module、unit)」は、「手段」や「回路」などに読み替えることができる。例えば、取得部は、取得手段や取得回路に読み替えることができる。
1 情報処理システム
10 ドラレコ装置
100 情報処理装置
120 記憶部
121 撮像データ記憶部
122 駐車場所情報記憶部
123 モデル記憶部
130 制御部
131 取得部
132 生成部
133 満空判定部
134 通知部
135 提供部
136 挙動判定部
137 開始制御部

Claims (28)

  1. 撮像データを取得する取得部と、
    前記取得部により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定部と、
    前記判定部による判定結果をユーザに通知する通知部と
    を有し、
    前記判定部は、前記撮像データに写される前記駐車場所を示すラインが所定の形状で撮像されているか否かに応じて、当該駐車場所の満空状況を判定する
    ことを特徴とする情報処理装置。
  2. 前記判定部は、前記撮像データに写される前記駐車場所を示すラインが当該駐車場所周辺の物体との位置関係に応じて所定の形状で撮像されているか否かに応じて、当該駐車場所の満空状況を判定する
    ことを特徴とする請求項1に記載の情報処理装置。
  3. 撮像データを取得する取得部と、
    前記取得部により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定部と、
    前記判定部による判定結果をユーザに通知する通知部と
    を有し、
    前記判定部は、前記駐車場所の満空状況に応じて前記駐車場所を示すラインがどのような形状で撮像されるかを学習したモデルに対して前記撮像データを適用することにより、前記撮像データに写される前記駐車場所の満空状況を判定する
    ことを特徴とする情報処理装置。
  4. 前記判定部は、前記駐車場所の満空状況に応じた撮像態様であって、前記ラインがどのような形状で撮像されるかを示す撮像態様を正解データとして学習された前記モデルに基づいて、処理対象の前記駐車場所の満空状況を判定する
    ことを特徴とする請求項3に記載の情報処理装置。
  5. 前記判定部は、前記判定結果が通知される処理対象の移動体に搭載されたカメラによって撮像された撮像データが入力された場合に、前記撮像データに写されるラインの形状と、前記正解データとしての撮像態様が示すラインの形状との一致度に基づくスコアであって、入力された撮像データに写される駐車場所の満空状況に関する確度を示すスコアを出力する前記モデルに基づいて、入力された撮像データに写される駐車場所の満空状況を判定する
    ことを特徴とする請求項4に記載の情報処理装置。
  6. 前記判定部は、移動体の駐停車が禁止とされる禁止エリアに関する情報が学習された前記モデルに基づいて、前記禁止エリアを除く領域における前記駐車場所の満空状況を判定する
    ことを特徴とする請求項3〜5のいずれか1つに記載の情報処理装置。
  7. 撮像データを取得する取得部と、
    前記取得部により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所であって、前記移動体の走行に応じて前記撮像データに映り込む全ての駐車場所について、駐車場所毎に満空状況を判定する判定部と、
    前記判定部による判定結果であって、前記駐車場所毎の判定結果を前記移動体の走行に応じてリアルタイムでユーザに通知する通知部と
    を有することを特徴とする情報処理装置。
  8. 前記判定部は、前記撮像データに基づいて、前記撮像データに写される所定の撮像物の撮像態様が所定の条件を満たしているか否かに応じて、前記駐車場所の満空状況を判定する
    ことを特徴とする請求項に記載の情報処理装置。
  9. 前記判定部は、前記所定の撮像物の撮像態様として、道路上に引かれたラインが移動体との位置関係に応じてどのように撮像されるかを示す撮像態様であって、前記ラインの撮像態様が所定の条件を満たしているか否かに応じて、前記駐車場所の満空状況を判定する
    ことを特徴とする請求項に記載の情報処理装置。
  10. 前記判定部は、前記撮像態様が示す形状であって、前記所定の撮像物の形状が所定の形状であるか否かに応じて、前記駐車場所の満空状況を判定する
    ことを特徴とする請求項またはに記載の情報処理装置。
  11. 前記判定部は、前記所定の撮像物の撮像態様と、当該撮像態様が示すように前記撮像物が撮像された際の前記駐車場所の満空状況とが対応付けられた情報により学習されたモデルに基づいて、処理対象の前記駐車場所の満空状況を判定する
    ことを特徴とする請求項10のいずれか1つに記載の情報処理装置。
  12. 前記判定部は、前記撮像物の撮像態様のうち、前記駐車場所の満空状況に応じた撮像態様を正解データとして学習された前記モデルに基づいて、処理対象の前記駐車場所の満空状況を判定する
    ことを特徴とする請求項11に記載の情報処理装置。
  13. 前記判定部は、前記判定結果が通知される処理対象の移動体に搭載されたカメラによって撮像された撮像データが入力された場合に、前記撮像データに写される前記撮像物である道路上に引かれたラインの形状と、前記正解データとしての撮像態様が示すラインの形状との一致度に基づくスコアであって、入力された撮像データに写される駐車場所の満空状況に関する確度を示すスコアを出力する前記モデルに基づいて、入力された撮像データに写される駐車場所の満空状況を判定する
    ことを特徴とする請求項12に記載の情報処理装置。
  14. 前記判定部は、移動体の駐停車が禁止とされる禁止エリアに関する情報が学習された前記モデルに基づいて、前記禁止エリアを除く領域における前記駐車場所の満空状況を判定する
    ことを特徴とする請求項1113のいずれか1つに記載の情報処理装置。
  15. 前記取得部は、前記道路を走行する移動体に搭載されたカメラによって撮像された撮像データを取得する
    ことを特徴とする請求項1〜14のいずれか1つに記載の情報処理装置。
  16. 前記判定部は、前記カメラが搭載された移動体が現在走行中の道路に設置される駐車場所であって、当該移動体の進行方向に存在する駐車場所の現在の満空状況を判定し、
    前記通知部は、前記移動体の運転車に対して、前記現在の満空状況を示す判定結果を通知する
    ことを特徴とする請求項15に記載の情報処理装置。
  17. 前記判定部は、前記駐車場所として、1台の移動体を駐車させるための駐車区画毎に、当該駐車区画の満空状況を判定する
    ことを特徴とする請求項1〜16のいずれか1つに記載の情報処理装置。
  18. 前記判定部は、前記駐車場所が存在するエリアを示す位置情報に基づいて、前記駐車場所の満空状況を判定する
    ことを特徴とする請求項1〜17のいずれか1つに記載の情報処理装置。
  19. 前記判定部は、前記判定結果が通知される処理対象の移動体が前記エリア内に進入した場合に、前記エリア内に存在する駐車場所の満空状況を判定する
    ことを特徴とする請求項18に記載の情報処理装置。
  20. 前記判定部は、前記撮像データに写される所定の撮像物のうち、前記駐車場所が存在することを示す所定の対象物に基づいて、前記駐車場所の満空状況を判定する
    ことを特徴とする請求項19のいずれか1つに記載の情報処理装置。
  21. 前記判定部は、前記所定の対象物として、パーキングメーター、または、前記駐車場所に対応する標識に基づいて、前記駐車場所の満空状況を判定する
    ことを特徴とする請求項20に記載の情報処理装置。
  22. 前記通知部は、前記判定結果が通知される処理対象の移動体に搭載されたカメラによって撮像された撮像データであって、所定の表示画面においてリアルタイムに表示される当該撮像データに写される前記駐車場所毎に、現在の満空状況を表示させる
    ことを特徴とする請求項1〜21のいずれか1つに記載の情報処理装置。
  23. 情報処理装置が実行する情報処理方法であって、
    撮像データを取得する取得工程と、
    前記取得工程により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定工程と、
    前記判定工程による判定結果をユーザに通知する通知工程と
    を含み、
    前記判定工程は、前記撮像データに写される前記駐車場所を示すラインが所定の形状で撮像されているか否かに応じて、当該駐車場所の満空状況を判定する
    ことを特徴とする情報処理方法。
  24. 情報処理装置が実行する情報処理方法であって、
    撮像データを取得する取得工程と、
    前記取得工程により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定工程と、
    前記判定工程による判定結果をユーザに通知する通知工程と
    を含み、
    前記判定工程は、前記駐車場所の満空状況に応じて前記駐車場所を示すラインがどのような形状で撮像されるかを学習したモデルに対して前記撮像データを適用することにより、前記撮像データに写される前記駐車場所の満空状況を判定する
    ことを特徴とする情報処理方法。
  25. 情報処理装置が実行する情報処理方法であって、
    撮像データを取得する取得工程と、
    前記取得工程により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所であって、前記移動体の走行に応じて前記撮像データに映り込む全ての駐車場所について、駐車場所毎に満空状況を判定する判定工程と、
    前記判定工程による判定結果であって、前記駐車場所毎の判定結果を前記移動体の走行に応じてリアルタイムでユーザに通知する通知工程と
    を含むことを特徴とする情報処理方法。
  26. 撮像データを取得する取得手順と、
    前記取得手順により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定手順と、
    前記判定手順による判定結果をユーザに通知する通知手順と
    をコンピュータに実行させ、
    前記判定手順は、前記撮像データに写される前記駐車場所を示すラインが所定の形状で撮像されているか否かに応じて、当該駐車場所の満空状況を判定する
    ことを特徴とする情報処理プログラム。
  27. 撮像データを取得する取得手順と、
    前記取得手順により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所の満空状況を判定する判定手順と、
    前記判定手順による判定結果をユーザに通知する通知手順と
    をコンピュータに実行させ、
    前記判定手順は、前記駐車場所の満空状況に応じて前記駐車場所を示すラインがどのような形状で撮像されるかを学習したモデルに対して前記撮像データを適用することにより、前記撮像データに写される前記駐車場所の満空状況を判定する
    ことを特徴とする情報処理プログラム。
  28. 撮像データを取得する取得手順と、
    前記取得手順により取得された撮像データであって、道路を走行中の移動体の進行方向が撮像された撮像データに基づいて、前記撮像データに写される道路に設置される駐車場所であって、前記移動体の走行に応じて前記撮像データに映り込む全ての駐車場所について、駐車場所毎に満空状況を判定する判定手順と、
    前記判定手順による判定結果であって、前記駐車場所毎の判定結果を前記移動体の走行に応じてリアルタイムでユーザに通知する通知手順と
    をコンピュータに実行させることを特徴とする情報処理プログラム。
JP2019041045A 2019-03-06 2019-03-06 情報処理装置、情報処理方法および情報処理プログラム Active JP6704483B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019041045A JP6704483B1 (ja) 2019-03-06 2019-03-06 情報処理装置、情報処理方法および情報処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019041045A JP6704483B1 (ja) 2019-03-06 2019-03-06 情報処理装置、情報処理方法および情報処理プログラム

Publications (2)

Publication Number Publication Date
JP6704483B1 true JP6704483B1 (ja) 2020-06-03
JP2020144627A JP2020144627A (ja) 2020-09-10

Family

ID=70858140

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019041045A Active JP6704483B1 (ja) 2019-03-06 2019-03-06 情報処理装置、情報処理方法および情報処理プログラム

Country Status (1)

Country Link
JP (1) JP6704483B1 (ja)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014212843A1 (de) * 2014-07-02 2016-01-07 Robert Bosch Gmbh Verfahren zur Parkplatzvermittlung und Freier-Parkplatz-Assistenzsystem
KR101832466B1 (ko) * 2016-06-14 2018-04-13 엘지전자 주식회사 자동주차 보조장치 및 이를 포함하는 차량
KR102001916B1 (ko) * 2017-05-30 2019-07-19 엘지전자 주식회사 주차 보조 시스템
JP6897377B2 (ja) * 2017-07-11 2021-06-30 トヨタ自動車株式会社 情報提供装置

Also Published As

Publication number Publication date
JP2020144627A (ja) 2020-09-10

Similar Documents

Publication Publication Date Title
US10198942B2 (en) Traffic routing display system with multiple signal lookahead
US11257377B1 (en) System for identifying high risk parking lots
US11656094B1 (en) System for driver's education
JP6503218B2 (ja) 運転支援システム、運転支援装置及び運転支援方法
US9429943B2 (en) Artificial intelligence valet systems and methods
US11181918B2 (en) Moving traffic obstacle detection and avoidance
US20210191394A1 (en) Systems and methods for presenting curated autonomy-system information of a vehicle
CN109937343A (zh) 用于自动驾驶车辆交通预测中的预测轨迹的评估框架
CN109429518A (zh) 基于地图图像的自动驾驶交通预测
CN106154834A (zh) 用于控制无人驾驶车辆的方法和装置
JP7420734B2 (ja) データ配信システム、センサデバイス及びサーバ
JP2012108586A (ja) 交通情報システム、交通情報取得装置および交通情報提供装置
US20220351529A1 (en) System and method to detect driver intent and employ safe driving actions
US11904854B2 (en) Systems and methods for modeling pedestrian activity
CA3170561A1 (en) Artificial intelligence methods and systems for remote monitoring and control of autonomous vehicles
JP7160732B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2023171455A (ja) 経路予測装置、それを備えた車載装置、経路予測システム、経路予測方法、及びコンピュータプログラム
JP7043447B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP6704483B1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP7058241B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
US11346685B2 (en) Parking exit coordination systems and methods
US11755008B2 (en) Using plays for human-AI decision-making in remote autonomous vehicle support
Agarwal et al. Intelligent transportation system: A complete insight
JP2017117367A (ja) 運転支援装置
JP2021021995A (ja) 情報提供システム、情報提供装置、情報提供方法及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190415

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20190415

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190620

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190625

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190822

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20191101

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20191108

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200421

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200512

R150 Certificate of patent or registration of utility model

Ref document number: 6704483

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350