JP2021060271A - タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム - Google Patents

タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム Download PDF

Info

Publication number
JP2021060271A
JP2021060271A JP2019184453A JP2019184453A JP2021060271A JP 2021060271 A JP2021060271 A JP 2021060271A JP 2019184453 A JP2019184453 A JP 2019184453A JP 2019184453 A JP2019184453 A JP 2019184453A JP 2021060271 A JP2021060271 A JP 2021060271A
Authority
JP
Japan
Prior art keywords
image
tire
learning
target
machine learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019184453A
Other languages
English (en)
Other versions
JP7335503B2 (ja
Inventor
拡太郎 多田
Kakutaro Tada
拡太郎 多田
隆嗣 小島
Takashi Kojima
隆嗣 小島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokohama Rubber Co Ltd
Original Assignee
Yokohama Rubber Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokohama Rubber Co Ltd filed Critical Yokohama Rubber Co Ltd
Priority to JP2019184453A priority Critical patent/JP7335503B2/ja
Publication of JP2021060271A publication Critical patent/JP2021060271A/ja
Application granted granted Critical
Publication of JP7335503B2 publication Critical patent/JP7335503B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Vehicle Cleaning, Maintenance, Repair, Refitting, And Outriggers (AREA)
  • Image Analysis (AREA)

Abstract

【課題】タイヤの空気圧の低下度を容易に推定できるタイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラムを提供する。【解決手段】ターゲットオリジナル画像取得部42は、タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得する。ターゲット接地領域抽出部44は、ターゲットオリジナル画像からタイヤの接地部分の領域を抽出する。ターゲット入力画像生成部46は、抽出される領域の画像に基づいて、所定画素数のターゲット入力画像を生成する。推定部48は、ターゲット入力画像を学習済の機械学習モデル30に入力した際の出力に基づいて、タイヤの空気圧の低下度を推定する。【選択図】図2

Description

本発明は、タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラムに関する。
特許文献1、及び、特許文献2には、タイヤの回転速度情報から当該回転速度情報の周波数特性を推定し、推定された周波数特定に基づいて当該タイヤの空気圧の低下を判定する技術が記載されている。
特開2010−30378号公報 特開2010−120621号公報
特許文献1、及び、特許文献2に記載の技術では、タイヤの空気圧の低下を判定するために車輪速センサや角速度センサなどといったセンサをわざわざタイヤに設ける必要がある。
本発明は上記実情に鑑みてなされたものであって、その目的の一つは、タイヤの空気圧の低下度を容易に推定できるタイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラムを提供することにある。
上記課題を解決するために、本発明に係るタイヤ空気圧低下度推定装置は、タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得する取得手段と、前記ターゲットオリジナル画像から前記タイヤの接地部分の領域を抽出する抽出手段と、抽出される前記領域の画像に基づいて、所定画素数のターゲット入力画像を生成する生成手段と、前記ターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、前記タイヤの空気圧の低下度を推定する推定手段と、を含む。
本発明の一態様では、前記推定手段は、前記タイヤの空気圧が正常であるか異常であるかを推定する。
また、本発明の一態様では、前記取得手段は、所定時間以上停止している車両のタイヤの側面が写る前記ターゲットオリジナル画像を取得する。
あるいは、前記タイヤを備えた車両が停止したと判定されるタイミングから所定時間が経過したタイミングに撮影された前記ターゲットオリジナル画像を取得する。
また、本発明に係るタイヤ空気圧低下度学習装置は、タイヤの空気圧の低下度の推定に用いられる機械学習モデルの学習を実行するタイヤ空気圧低下度学習装置であって、接地部分を含むタイヤの側面が写る奥行き画像又は三次元画像である所定画素数の学習入力画像を前記機械学習モデルに入力する入力手段と、前記学習入力画像を前記機械学習モデルに入力した際の出力を用いて、前記機械学習モデルの学習を実行する学習手段と、を含む。
本発明の一態様では、タイヤの側面が写る奥行き画像又は三次元画像である学習オリジナル画像から前記タイヤの接地部分の領域を抽出する抽出手段と、抽出される前記領域の画像に基づいて、前記所定画素数の前記学習入力画像を生成する生成手段と、をさらに含み、前記入力手段は、前記生成手段により生成される前記学習入力画像を前記機械学習モデルに入力する。
また、本発明に係るタイヤ空気圧低下度推定方法は、タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得するステップと、前記ターゲットオリジナル画像から前記タイヤの接地部分の領域を抽出するステップと、抽出される前記領域の画像に基づいて、所定画素数のターゲット入力画像を生成するステップと、前記ターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、前記タイヤの空気圧の低下度を推定するステップと、を含む。
また、本発明に係る学習済モデルの生成方法は、タイヤの空気圧の低下度の推定に用いられる機械学習モデルの学習を実行する学習済モデルの生成方法であって、接地部分を含むタイヤの側面が写る奥行き画像又は三次元画像である所定画素数の学習入力画像を前記機械学習モデルに入力するステップと、前記学習入力画像を前記機械学習モデルに入力した際の出力を用いて、前記機械学習モデルの学習を実行するステップと、を含む。
また、本発明に係るプログラムは、タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得する手順、前記ターゲットオリジナル画像から前記タイヤの接地部分の領域を抽出する手順、抽出される前記領域の画像に基づいて、所定画素数のターゲット入力画像を生成する手順、前記ターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、前記タイヤの空気圧の低下度を推定する手順、をコンピュータに実行させる。
また、本発明に係る別のプログラムは、タイヤの空気圧の低下度の推定に用いられる機械学習モデルの学習を実行するコンピュータに、接地部分を含むタイヤの側面が写る奥行き画像又は三次元画像である所定画素数の学習入力画像を前記機械学習モデルに入力する手順、前記学習入力画像を前記機械学習モデルに入力した際の出力を用いて、前記機械学習モデルの学習を実行する手順、を実行させる。
本発明の一実施形態に係る情報処理装置の構成の一例を示す図である。 本発明の一実施形態に係る情報処理装置の機能の一例を示す機能ブロック図である。 学習オリジナル画像の一例を示す図である。 学習接地領域画像の一例を示す図である。 撮影部の配置の一例を示す図である。 本発明の一実施形態に係る情報処理装置で行われる学習処理の流れの一例を示すフロー図である。 本発明の一実施形態に係る情報処理装置で行われる推定処理の流れの一例を示すフロー図である。
以下、本発明の一実施形態について、図面を参照しながら説明する。
図1は、本発明の一実施形態に係る情報処理装置10の構成の一例を示す図である。本実施形態に係る情報処理装置10は、パーソナルコンピュータなどのコンピュータである。図1に示すように情報処理装置10は、例えば、プロセッサ12、記憶部14、通信部16、表示部18、操作部20、撮影部22、を含んでいる。
プロセッサ12は、例えば情報処理装置10にインストールされるプログラムに従って動作するCPU等のプログラム制御デバイスである。
記憶部14は、ROMやRAM等の記憶素子やハードディスクドライブなどである。記憶部14には、プロセッサ12によって実行されるプログラムなどが記憶される。
通信部16は、例えばネットワークボードなどの通信インタフェースである。
表示部18は、液晶ディスプレイ等の表示デバイスであって、プロセッサ12の指示に従って各種の画像を表示する。
操作部20は、キーボードやマウスなどといったユーザインタフェースであって、ユーザの操作入力を受け付けて、その内容を示す信号をプロセッサ12に出力する。
撮影部22は、三次元画像が撮影可能なステレオカメラや、奥行き画像が撮影可能なデプスカメラなどの撮影デバイスであり、撮影によって生成される三次元画像や奥行き画像をプロセッサ12に出力する。本実施形態に係る情報処理装置10が複数の撮影部22を備えていてもよい。また、撮影部22が、一連の三次元画像を含む三次元動画像や、一連の奥行き画像を含む奥行き動画像を撮影可能なビデオカメラであってもよい。
なお、情報処理装置10は、DVD−ROMやBlu−ray(登録商標)ディスクなどの光ディスクを読み取る光ディスクドライブ、USB(Universal Serial Bus)ポートなどを含んでいてもよい。
本実施形態では、機械学習モデルを用いて、撮影部22により撮影される画像に写るタイヤの空気圧の低下度が推定される。
以下、情報処理装置10に実装されている機械学習モデルの学習、及び、情報処理装置10によるタイヤの種類の推定についてさらに説明する。
図2は、本実施形態に係る情報処理装置10で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係る情報処理装置10で、図2に示す機能のすべてが実装される必要はなく、また、図2に示す機能以外の機能が実装されていても構わない。
図2に示すように、情報処理装置10には、機能的には例えば、機械学習モデル30、学習データ記憶部32、学習データ取得部34、学習接地領域抽出部36、学習入力画像生成部38、学習部40、ターゲットオリジナル画像取得部42、ターゲット接地領域抽出部44、ターゲット入力画像生成部46、推定部48、が含まれる。
機械学習モデル30は、プロセッサ12及び記憶部14を主として実装される。学習データ記憶部32は、記憶部14を主として実装される。学習データ取得部34、学習接地領域抽出部36、学習入力画像生成部38、学習部40、ターゲット接地領域抽出部44、ターゲット入力画像生成部46、推定部48は、プロセッサ12を主として実装される。ターゲットオリジナル画像取得部42は、プロセッサ12、通信部16、撮影部22を主として実装される。
以上の機能は、コンピュータである情報処理装置10にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ12で実行することにより実装されてもよい。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介して情報処理装置10に供給されてもよい。
情報処理装置10における、機械学習モデル30、学習データ記憶部32、学習データ取得部34、学習接地領域抽出部36、学習入力画像生成部38、学習部40の機能は、タイヤの空気圧の低下度の推定に用いられる機械学習モデル30の学習を実行するタイヤ空気圧低下度学習装置としての機能に相当する。
また情報処理装置10における、機械学習モデル30、ターゲットオリジナル画像取得部42、ターゲット接地領域抽出部44、ターゲット入力画像生成部46、推定部48の機能は、タイヤの空気圧の低下度を推定するタイヤ空気圧低下度推定装置としての機能に相当する。
機械学習モデル30は、本実施形態では例えば、アダブースト、ランダムフォレスト、ニューラルネットワーク、サポートベクタマシン(SVM)、最近傍識別器、などの機械学習が実装された機械学習モデルである。
本実施形態に係る機械学習モデル30は、例えば、タイヤの空気圧が正常であるか異常であるかを推定する判定モデルであってもよい。そしてこの場合に、当該機械学習モデル30が、入力に応じて、例えばタイヤの空気圧が正常であるか異常であるかを示す1ビットのデータを出力してもよい。
また当該機械学習モデル30は、タイヤの空気圧の低下度を示すデータを出力する回帰モデルであってもよい。ここで例えば、タイヤの空気圧の低下度とは、タイヤの空気圧が低いほど値が大きくなる、空気圧が低下している程度を示す指標であってもよい。また、タイヤの空気圧の低下度を示すデータが、タイヤの空気圧そのものを示すデータであっても構わない。そしてこの場合に、当該機械学習モデル30が、入力に応じて、例えばタイヤの空気圧の低下度の推定値を出力してもよい。
学習データ記憶部32は、本実施形態では例えば、機械学習モデル30の学習に用いられる学習データを記憶する。学習データには、例えば、図3に例示する学習オリジナル画像50と、学習オリジナル画像50に写るタイヤの空気圧の低下度を示す所与の教師データと、が含まれている。
学習オリジナル画像50は、例えば、タイヤの側面が写る三次元画像である。なお、学習オリジナル画像50は、奥行き画像であってもよい。
学習データ取得部34は、本実施形態では例えば、学習データ記憶部32に記憶されている学習データを取得する。
学習接地領域抽出部36は、本実施形態では例えば、公知のテンプレートマッチング技術等を用いることで、学習オリジナル画像50からタイヤの接地部分の領域を抽出する。以下、このようにして抽出される領域を学習接地領域52と呼ぶこととする。また、学習接地領域抽出部36は、抽出される学習接地領域52の画像である、図4に例示する学習接地領域画像54を生成してもよい。
学習入力画像生成部38は、本実施形態では例えば、抽出される学習接地領域52の画像に基づいて、所定画素数の学習入力画像を生成する。学習入力画像生成部38は、例えば、縦横比を保ったまま学習接地領域画像54を拡大又は縮小することにより、所定画素数の学習入力画像を生成してもよい。
学習部40は、本実施形態では例えば、学習入力画像を機械学習モデル30に入力する。そして、学習部40は、本実施形態では例えば、学習入力画像を機械学習モデル30に入力した際の出力を用いて、機械学習モデル30の学習を実行する。ここで例えば、学習データに含まれる学習オリジナル画像50に基づいて生成される学習入力画像を機械学習モデル30に入力した際の出力と、当該学習データに含まれる教師データと、の差が特定されてもよい。そして特定される差に基づいて機械学習モデル30のパラメータの値が更新される教師あり学習が実行されてもよい。
本実施形態では複数の学習入力画像による機械学習モデル30の学習が実行される。そして学習済の機械学習モデル30(学習済モデル)を用いて、撮影部22により撮影される三次元画像又は奥行き画像に写るタイヤの空気圧の低下度が推定される。
ターゲットオリジナル画像取得部42は、本実施形態では例えば、撮影部22により撮影される、ターゲットオリジナル画像を取得する。ターゲットオリジナル画像は、学習オリジナル画像50と同様の、タイヤの側面が写る奥行き画像又は三次元画像である。
車両が走行後に停止した直後においては、当該車両が備えるタイヤは高温になっており、そのため、当該タイヤの空気圧は通常より高い状態となっている。そのため、タイヤの空気圧の低下度の推定は、当該タイヤを備える車両が停止している状態がしばらく継続した後に行われることが望ましい。
このことを踏まえ、例えば、ターゲットオリジナル画像取得部42が、所定時間以上停止している車両のタイヤの側面が写るターゲットオリジナル画像を取得してもよい。
例えば、撮影部22が、奥行き動画像又は三次元動画像である動画像を撮影してもよい。そして、ターゲットオリジナル画像取得部42が、当該動画像を監視して、撮影されている車両が所定時間にわたって停止していることを検出してもよい。そして、ターゲットオリジナル画像取得部42が、撮影されている車両が所定時間にわたって停止していることが検出されたタイミングに撮影されたフレーム画像をターゲットオリジナル画像として取得してもよい。
より具体的には例えば、ターゲットオリジナル画像取得部42が、フレーム画像が撮影される度に、当該フレーム画像と直前のフレーム画像との比較結果に基づいて、撮影されているタイヤを備えた車両が停止しているか否かを判定してもよい。例えば、当該フレーム画像と直前のフレーム画像とに同じロゴマークが写っている場合は、撮影されているタイヤを備えた車両が停止していると判定されるようにしてもよい。そして、ターゲットオリジナル画像取得部42は、撮影されている車両が停止していると所定時間にわたって判定された際に、当該判定のタイミングに撮影部22によって撮影されたフレーム画像をターゲットオリジナル画像として取得してもよい。例えば、撮影されている車両が停止していると所定時間にわたって判定された際に、最後に撮影されたフレーム画像がターゲットオリジナル画像として取得されてもよい。
また、ターゲットオリジナル画像取得部42は、タイヤを備えた車両が停止したと判定されるタイミングから所定時間が経過したタイミングに撮影されたターゲットオリジナル画像を取得してもよい。
例えば、コインパーキングサービスのロック式駐車場に駐車される車両が備えたタイヤの空気圧の低下度を推定するとする。この場合、ロック板の上昇に応じてコインパーキングサービスの管理システムから停止検出信号が情報処理装置10に送信されるようにしてもよい。また例えば、カーシェアリングサービスの駐車場に返却される車両が備えたタイヤの空気圧の低下度を推定するとする。この場合、ドライバによるカーシェアリングサービスにおける返却操作に応じて、カーシェアリングサービスの管理システムから停止検出信号が情報処理装置10に送信されるようにしてもよい。
そして、ターゲットオリジナル画像取得部42が、上述の停止検出信号を受信してもよい。この場合、ターゲットオリジナル画像取得部42は、停止検出信号の受信タイミングをタイヤが備えた車両が停止したタイミングと判定してもよい。
そして、ターゲットオリジナル画像取得部42は、停止検出信号の受信から所定時間が経過したタイミングに、撮影部22に撮影指示を出力してもよい。そして、撮影部22は、当該撮影指示の受付に応じて、上述の車両が備えたタイヤの側面を撮影してもよい。そして、ターゲットオリジナル画像取得部42は、このようにして撮影部22によって撮影されるターゲットオリジナル画像を取得してもよい。
ターゲット接地領域抽出部44は、本実施形態では例えば、公知のテンプレートマッチング技術等を用いることで、ターゲットオリジナル画像からタイヤの接地部分の領域を抽出する。以下、このようにして抽出される領域をターゲット接地領域と呼ぶこととする。ターゲットオリジナル画像内におけるターゲット接地領域は、例えば、学習オリジナル画像50内における学習接地領域52に相当する領域である。また、ターゲット接地領域抽出部44は、抽出されるターゲット接地領域の画像である、ターゲット接地領域画像を生成してもよい。
ターゲット入力画像生成部46は、本実施形態では例えば、抽出されるターゲット接地領域の画像に基づいて、所定画素数のターゲット入力画像を生成する。学習入力画像生成部38は、例えば、縦横比を保ったままターゲット接地領域画像を拡大又は縮小することにより、所定画素数のターゲット入力画像を生成してもよい。
推定部48は、本実施形態では例えば、ターゲット入力画像を学習済の機械学習モデル30(学習済モデル)に入力した際の出力に基づいて、ターゲット入力画像に写るタイヤの空気圧の低下度を推定する。
ここで機械学習モデル30が判定モデルである場合に、機械学習モデル30が、入力に
応じて、タイヤの空気圧が正常であるか異常であるかを示す1ビットのデータを出力してもよい。また機械学習モデル30が回帰モデルである場合に、機械学習モデル30が、入力に応じて、空気圧が低下している程度を示す空気圧の低下度の推定値を出力してもよい。
図5に示すように、ロック式駐車場やカーシェアリングサービスの駐車場において、車両56が駐車された際の後輪58(後輪58a及び後輪58b)を側面から撮影可能な位置に、撮影部22(撮影部22a及び撮影部22b)が配置されるようにしてもよい。例えば、車止めの横の位置に撮影部22a及び撮影部22bが配置されるようにしてもよい。
そして、撮影部22aによって撮影されるターゲットオリジナル画像に基づいて、後輪58aの空気圧の低下度が推定されるようにしてもよい。また、撮影部22bによって撮影されるターゲットオリジナル画像に基づいて、後輪58bの空気圧の低下度が推定されるようにしてもよい。なお、同様にして、前輪60(前輪60a及び前輪60b)についても、前輪60の側面を撮影した三次元画像又は奥行き画像に基づいて、空気圧の低下度が推定されるようにしてもよい。
ここで、本実施形態に係る情報処理装置10で行われる学習処理の流れの一例を、図6に例示するフロー図を参照しながら説明する。ここでは例えば複数の学習データが学習データ記憶部32に記憶されていることとする。
まず、学習データ取得部34が、学習データ記憶部32に記憶されている複数の学習データのうち、S102〜S104に示す処理が実行されていないものを1つ取得する(S101)。
そして、学習接地領域抽出部36が、S101に示す処理で取得された学習データに含まれる学習オリジナル画像50から、学習接地領域52を抽出することで、学習接地領域画像54を生成する(S102)。
そして、学習入力画像生成部38が、S102に示す処理で生成された学習接地領域画像54に基づいて、所定画素数の学習入力画像を生成する(S103)。
そして、学習部40が、S103に示す処理で生成された学習入力画像を機械学習モデル30に入力した際の出力を用いた、機械学習モデル30の学習を実行する(S104)。ここで例えば、当該出力と、S101に示す処理で取得された学習データに含まれる教師データと、の差に基づいて、機械学習モデル30のパラメータの値が更新されてもよい。
そして学習部40が、学習データ記憶部32に記憶されている複数の学習データのすべてについてS102〜S104に示す処理が実行されたか否かを確認する(S105)。
学習データ記憶部32に記憶されている複数の学習データのすべてについてS102〜S104に示す処理が実行されていないことが確認された場合は(S105:N)、S101に示す処理に戻る。
学習データ記憶部32に記憶されている複数の学習データのすべてについてS102〜S104に示す処理が実行されたことが確認された場合は(S105:Y)、本処理例に示す処理は終了される。
次に、本実施形態に係る情報処理装置10で行われる推定処理の流れの一例を、図7に例示するフロー図を参照しながら説明する。
まず、ターゲットオリジナル画像取得部42が、タイヤの側面の画像の撮影タイミングが到来するまで待機する(S201)。当該撮影タイミングは、例えば、上述の停止検出信号の受信から所定時間が経過したタイミングに相当する。
撮影タイミングが到来すると、撮影部22がタイヤの側面を撮影する。そして、ターゲットオリジナル画像取得部42が、撮影部22により撮影されたタイヤの側面の画像であるターゲットオリジナル画像を取得する(S202)。
そして、ターゲット接地領域抽出部44が、S202に示す処理で取得されたターゲットオリジナル画像から、ターゲット接地領域を抽出することで、ターゲット接地領域画像を生成する(S203)。
そして、ターゲット入力画像生成部46が、S203に示す処理で生成されたターゲット接地領域画像に基づいて、所定画素数のターゲット入力画像を生成する(S204)。
そして、推定部48が、S204に示す処理で生成されたターゲット入力画像を学習済の機械学習モデル30(学習済モデル)に入力した際の出力に基づいて、当該ターゲット入力画像に写るタイヤの空気圧の低下度を推定する(S205)。そして、本処理例に示す処理は終了される。
なお、上述のように、上述のS201に示す処理の代わりに、ターゲットオリジナル画像取得部42が、撮影部22によって撮影される動画像を監視する処理を実行してもよい。
そして、撮影されている車両が所定時間にわたって停止していることが検出された際に、上述のS202に示す処理の代わりに、当該検出のタイミングに撮影部22により撮影された画像をターゲット入力画像として取得する処理が実行されてもよい。
タイヤの空気圧が低下すると、タイヤの接地面付近のふくらみが正常時より大きくなる。そのため、タイヤの接地面付近の位置におけるデプスと接地面付近以外の位置におけるデプスとの差が正常時より大きくなる。そして、タイヤの側面が写る三次元画像や奥行き画像には、タイヤの接地面付近の位置におけるデプスと接地面付近以外の位置におけるデプスとの差が広い領域にわたって顕著に表れる。そのため本実施形態のようにタイヤの側面が写る三次元画像や奥行き画像に基づいてタイヤの空気圧の低下度を推定することで、タイヤの空気圧の低下度を容易に推定できることとなる。
また、本実施形態では三次元画像又は奥行き画像を撮影することでタイヤの空気圧の低下度の推定が可能であり、タイヤの空気圧の低下度の推定のために車輪速センサや角速度センサなどといったセンサをわざわざタイヤに設ける必要がない。そのため、本実施形態によれば、タイヤの空気圧の低下度を容易に推定できることとなる。
また、本実施形態において、様々な種類のタイヤの学習入力画像を用いて、機械学習モデル30の学習が実行されるようにしてもよい。そうすれば、タイヤの種類の情報が加味された、タイヤの空気圧の低下度の推定を行うことができる。
なお、本発明は上述の実施形態に限定されるものではない。
例えば、実際にタイヤの側面を撮影した画像ではなく、シミュレーションによって生成されたタイヤの側面を表す画像を、学習オリジナル画像50や学習入力画像に用いてもよい。
また、例えば、空気圧の低下度が推定されるタイヤは、コインパーキングサービスのロック式駐車場やカーシェアリングサービスの駐車場に駐車される車両には限定されない。
また、上記の具体的な数値や文字列、並びに、図面中の具体的な数値や文字列は例示であり、これらの数値や文字列には限定されない。
10 情報処理装置、12 プロセッサ、14 記憶部、16 通信部、18 表示部、20 操作部、22,22a,22b 撮影部、30 機械学習モデル、32 学習データ記憶部、34 学習データ取得部、36 学習接地領域抽出部、38 学習入力画像生成部、40 学習部、42 ターゲットオリジナル画像取得部、44 ターゲット接地領域抽出部、46 ターゲット入力画像生成部、48 推定部、50 学習オリジナル画像、52 学習接地領域、54 学習接地領域画像、56 車両、58,58a,58b 後輪、60,60a,60b 前輪。

Claims (10)

  1. タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得する取得手段と、
    前記ターゲットオリジナル画像から前記タイヤの接地部分の領域を抽出する抽出手段と、
    抽出される前記領域の画像に基づいて、所定画素数のターゲット入力画像を生成する生成手段と、
    前記ターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、前記タイヤの空気圧の低下度を推定する推定手段と、
    を含むことを特徴とするタイヤ空気圧低下度推定装置。
  2. 前記推定手段は、前記タイヤの空気圧が正常であるか異常であるかを推定する、
    ことを特徴とする請求項1に記載のタイヤ空気圧低下度推定装置。
  3. 前記取得手段は、所定時間以上停止している車両のタイヤの側面が写る前記ターゲットオリジナル画像を取得する、
    ことを特徴とする請求項1又は2に記載のタイヤ空気圧低下度推定装置。
  4. 前記取得手段は、前記タイヤを備えた車両が停止したと判定されるタイミングから所定時間が経過したタイミングに撮影された前記ターゲットオリジナル画像を取得する、
    ことを特徴とする請求項1又は2に記載のタイヤ空気圧低下度推定装置。
  5. タイヤの空気圧の低下度の推定に用いられる機械学習モデルの学習を実行するタイヤ空気圧低下度学習装置であって、
    接地部分を含むタイヤの側面が写る奥行き画像又は三次元画像である所定画素数の学習入力画像を前記機械学習モデルに入力する入力手段と、
    前記学習入力画像を前記機械学習モデルに入力した際の出力を用いて、前記機械学習モデルの学習を実行する学習手段と、
    を含むことを特徴とするタイヤ空気圧低下度学習装置。
  6. タイヤの側面が写る奥行き画像又は三次元画像である学習オリジナル画像から前記タイヤの接地部分の領域を抽出する抽出手段と、
    抽出される前記領域の画像に基づいて、前記所定画素数の前記学習入力画像を生成する生成手段と、をさらに含み、
    前記入力手段は、前記生成手段により生成される前記学習入力画像を前記機械学習モデルに入力する、
    ことを特徴とする請求項5に記載のタイヤ空気圧低下度学習装置。
  7. タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得するステップと、
    前記ターゲットオリジナル画像から前記タイヤの接地部分の領域を抽出するステップと、
    抽出される前記領域の画像に基づいて、所定画素数のターゲット入力画像を生成するステップと、
    前記ターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、前記タイヤの空気圧の低下度を推定するステップと、
    を含むことを特徴とするタイヤ空気圧低下度推定方法。
  8. タイヤの空気圧の低下度の推定に用いられる機械学習モデルの学習を実行する学習済モデルの生成方法であって、
    接地部分を含むタイヤの側面が写る奥行き画像又は三次元画像である所定画素数の学習入力画像を前記機械学習モデルに入力するステップと、
    前記学習入力画像を前記機械学習モデルに入力した際の出力を用いて、前記機械学習モデルの学習を実行するステップと、
    を含むことを特徴とする学習済モデルの生成方法。
  9. タイヤの側面が写る奥行き画像又は三次元画像であるターゲットオリジナル画像を取得する手順、
    前記ターゲットオリジナル画像から前記タイヤの接地部分の領域を抽出する手順、
    抽出される前記領域の画像に基づいて、所定画素数のターゲット入力画像を生成する手順、
    前記ターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、前記タイヤの空気圧の低下度を推定する手順、
    をコンピュータに実行させることを特徴とするプログラム。
  10. タイヤの空気圧の低下度の推定に用いられる機械学習モデルの学習を実行するコンピュータに、
    接地部分を含むタイヤの側面が写る奥行き画像又は三次元画像である所定画素数の学習入力画像を前記機械学習モデルに入力する手順、
    前記学習入力画像を前記機械学習モデルに入力した際の出力を用いて、前記機械学習モデルの学習を実行する手順、
    を実行させることを特徴とするプログラム。
JP2019184453A 2019-10-07 2019-10-07 タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム Active JP7335503B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019184453A JP7335503B2 (ja) 2019-10-07 2019-10-07 タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019184453A JP7335503B2 (ja) 2019-10-07 2019-10-07 タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム

Publications (2)

Publication Number Publication Date
JP2021060271A true JP2021060271A (ja) 2021-04-15
JP7335503B2 JP7335503B2 (ja) 2023-08-30

Family

ID=75380026

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019184453A Active JP7335503B2 (ja) 2019-10-07 2019-10-07 タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム

Country Status (1)

Country Link
JP (1) JP7335503B2 (ja)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5753810A (en) * 1997-01-29 1998-05-19 Shell Oil Company Method and apparatus for determining tire inflation status
JP2005096554A (ja) * 2003-09-24 2005-04-14 Sumitomo Electric Ind Ltd タイヤ空気圧監視システム
WO2013065049A1 (en) * 2011-11-03 2013-05-10 Neomatix Ltd. System and method for estimating pneumatic pressure state of vehicle tires
US20160029006A1 (en) * 2013-07-25 2016-01-28 Jack Marshall Zoken System and Method for Analysis of Surface Features
US20160101734A1 (en) * 2014-10-13 2016-04-14 Lg Electronics Inc. Under vehicle image provision apparatus and vehicle including the same
US20170124784A1 (en) * 2014-06-19 2017-05-04 Neomatix Ltd. System and method for multiple feature detection and analysis of a rotating tire
JP2019035626A (ja) * 2017-08-10 2019-03-07 株式会社ブリヂストン タイヤ画像の認識方法及びタイヤ画像の認識装置
CN109649091A (zh) * 2018-12-28 2019-04-19 泉州装备制造研究所 基于计算机视觉的汽车轮胎监测系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5753810A (en) * 1997-01-29 1998-05-19 Shell Oil Company Method and apparatus for determining tire inflation status
JP2005096554A (ja) * 2003-09-24 2005-04-14 Sumitomo Electric Ind Ltd タイヤ空気圧監視システム
WO2013065049A1 (en) * 2011-11-03 2013-05-10 Neomatix Ltd. System and method for estimating pneumatic pressure state of vehicle tires
US20160029006A1 (en) * 2013-07-25 2016-01-28 Jack Marshall Zoken System and Method for Analysis of Surface Features
US20170124784A1 (en) * 2014-06-19 2017-05-04 Neomatix Ltd. System and method for multiple feature detection and analysis of a rotating tire
US20160101734A1 (en) * 2014-10-13 2016-04-14 Lg Electronics Inc. Under vehicle image provision apparatus and vehicle including the same
JP2019035626A (ja) * 2017-08-10 2019-03-07 株式会社ブリヂストン タイヤ画像の認識方法及びタイヤ画像の認識装置
CN109649091A (zh) * 2018-12-28 2019-04-19 泉州装备制造研究所 基于计算机视觉的汽车轮胎监测系统

Also Published As

Publication number Publication date
JP7335503B2 (ja) 2023-08-30

Similar Documents

Publication Publication Date Title
US11816991B2 (en) Vehicle environment modeling with a camera
US10650681B2 (en) Parking position identification method, parking position learning method, parking position identification system, parking position learning device, and non-transitory recording medium for recording program
US8411145B2 (en) Vehicle periphery monitoring device, vehicle periphery monitoring program and vehicle periphery monitoring method
CN111209770B (zh) 一种车道线识别方法及装置
US20140071240A1 (en) Free space detection system and method for a vehicle using stereo vision
CN110069976A (zh) 用于确定拖车存在的基于视觉的方法和系统
JP2015007953A (ja) 車両乗車人数の監視装置及び車両乗車人数の監視方法並びにコンピュータ可読記憶媒体
JP6188592B2 (ja) 物体検出装置、物体検出方法、および物体検出プログラム
JP2007188417A (ja) 画像認識装置、画像認識方法および画像認識プログラム
JP7185419B2 (ja) 車両のための、対象物を分類するための方法および装置
CN111627001A (zh) 图像检测方法及装置
Liu et al. Vehicle detection and ranging using two different focal length cameras
WO2021095455A1 (ja) 物体識別装置
CN111950504A (zh) 车辆检测方法、装置以及电子设备
EP3441941B1 (en) Camera motion estimation device, camera motion estimation method, and computer-readable medium
US11373327B2 (en) Image processing device and method that determine a stop position in a parking frame using images from two cameras
JP7335503B2 (ja) タイヤ空気圧低下度推定装置、タイヤ空気圧低下度学習装置、タイヤ空気圧低下度推定方法、学習済モデルの生成方法及びプログラム
JP2021105559A (ja) タイヤ摩耗度判定装置、タイヤ摩耗度判定方法及びプログラム
JP7119493B2 (ja) 認識装置、認識方法およびプログラム
JP7428870B2 (ja) タイヤ摩耗度推定装置、タイヤ摩耗度学習装置、タイヤ摩耗度推定方法、学習済モデルの生成方法及びプログラム
CN112241660A (zh) 一种基于视觉的防盗监测方法和装置
Onkarappa et al. On-board monocular vision system pose estimation through a dense optical flow
CN112347896A (zh) 基于多任务神经网络的头部数据处理方法及装置
JP2021051348A (ja) 物体距離推定装置及び物体距離推定方法
JP2008257399A (ja) 画像処理装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220909

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230524

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230718

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230731

R150 Certificate of patent or registration of utility model

Ref document number: 7335503

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150