JP7495596B2 - Exchange support system, exchange support method and program - Google Patents
Exchange support system, exchange support method and program Download PDFInfo
- Publication number
- JP7495596B2 JP7495596B2 JP2020024483A JP2020024483A JP7495596B2 JP 7495596 B2 JP7495596 B2 JP 7495596B2 JP 2020024483 A JP2020024483 A JP 2020024483A JP 2020024483 A JP2020024483 A JP 2020024483A JP 7495596 B2 JP7495596 B2 JP 7495596B2
- Authority
- JP
- Japan
- Prior art keywords
- product
- type
- image
- determined
- replacement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 20
- 238000004519 manufacturing process Methods 0.000 claims description 12
- 238000005096 rolling process Methods 0.000 claims description 7
- 238000003384 imaging method Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 16
- 230000010365 information processing Effects 0.000 description 15
- 238000010801 machine learning Methods 0.000 description 13
- 238000003860 storage Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 239000007789 gas Substances 0.000 description 3
- IJGRMHOSHXDMSA-UHFFFAOYSA-N Atomic nitrogen Chemical compound N#N IJGRMHOSHXDMSA-UHFFFAOYSA-N 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 239000011261 inert gas Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910052757 nitrogen Inorganic materials 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Images
Landscapes
- Tires In General (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、交換支援システム、交換支援方法およびプログラムに関する。 The present invention relates to an exchange assistance system, an exchange assistance method, and a program.
例えばタイヤのように、使用により状態が変化し、最終的に寿命を迎える製品がある。この寿命を非接触で判定する技術が開発されている。 For example, there are products such as tires whose condition changes with use and eventually reach the end of their life. Technology has been developed to determine this end of life without contact.
特許文献1には、畳み込みニューラルネットワークを用いてタイヤの画像からタイヤ種や摩耗状態などを認識できる認識方法および認識装置が記載されている。 Patent document 1 describes a recognition method and device that can recognize tire type and wear condition from tire images using a convolutional neural network.
また、特許文献2には、車止めに配置されたレーザ変位計を用いてタイヤの溝の深さを測定することが開示されている。特許文献3には、超音波を用いてタイヤの溝の深さを計測する測定装置が記載されている。 Patent Document 2 also discloses measuring the depth of tire grooves using a laser displacement meter placed at a car stop. Patent Document 3 describes a measuring device that uses ultrasound to measure the depth of tire grooves.
例えばタイヤのような製品は、その交換のタイミングを適切に認識することが容易でない。しかも、例えばその製品のサイズや性能が多様であるため、寿命を判定しただけでは適切に交換を行うことが難しい。 For example, it is not easy to properly determine when to replace a product such as a tire. Moreover, because the size and performance of the product vary widely, it is difficult to properly replace the product just by determining its lifespan.
本発明は上記課題を鑑みてなされたものであって、その目的は、使用により消耗する製品の適切な交換を支援する技術を提供することにある。 The present invention was made in consideration of the above problems, and its purpose is to provide a technology that supports the appropriate replacement of products that wear out through use.
上記課題を解決するために、本発明にかかる交換支援システムは、使用されている製品の画像を取得する画像取得手段と、前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段と、前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段と、前記判定された種類、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段と、前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段と、を含む。 To solve the above problems, the replacement assistance system of the present invention includes an image acquisition means for acquiring an image of a product in use, an replacement determination means for determining the need to replace the product based on the acquired image, a type determination means for determining which of a plurality of types the product is based on the acquired image, a determination means for determining a type that is a candidate for replacement from the plurality of types based on the determined type and data indicating the characteristics of each of the plurality of types, and a notification means for notifying a notification destination of the determined type based on the determined need for replacement.
本発明の一態様では、前記種類は、前記製品のブランド、型番、およびメーカーのうち少なくとも1つであってよい。 In one aspect of the present invention, the type may be at least one of the brand, model number, and manufacturer of the product.
また、本発明の一態様では、前記交換判定手段は、製品の画像と当該製品の消耗の程度を示す教師データとを用いて学習された判定器を含んでよい。 In one aspect of the present invention, the replacement determination means may include a determiner that is trained using an image of the product and training data indicating the degree of wear of the product.
また、本発明の一態様では、前記製品はタイヤであってよい。 In one aspect of the present invention, the product may be a tire.
また、本発明の一態様では、前記画像取得手段は、前記使用されている製品のトレッドおよびサイドウォールの画像を取得してよい。 In one aspect of the present invention, the image acquisition means may acquire images of the tread and sidewalls of the product in use.
また、本発明の一態様では、前記取得されたサイドウォールの画像に含まれる製造時期に基づいて、前記製品の交換の必要性を判定してよい。 In one aspect of the present invention, the need to replace the product may be determined based on the manufacturing date contained in the acquired image of the sidewall.
また、本発明の一態様では、前記種類判定手段は、前記取得された画像に基づいて、前記製品のサイズと前記種類とを判定し、前記決定手段は、前記判定されたサイズ、前記判定された種類、複数の種類のそれぞれに存在するサイズ、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定してよい。 In one aspect of the present invention, the type determination means may determine the size and type of the product based on the acquired image, and the determination means may determine a type that is a candidate for replacement from the multiple types based on the determined size, the determined type, the sizes present in each of the multiple types, and data indicating the characteristics of each of the multiple types.
また、本発明の一態様では、前記特性は、価格、ブレーキ性能、転がり抵抗、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一部を含んでよい。 In one aspect of the present invention, the characteristics may include at least some of the following: price, braking performance, rolling resistance, comfort, wear resistance, quietness, and snow and ice performance.
また、本発明の一態様では、前記通知手段は、前記判定された種類の特性と、前記決定された種類の特性との違いに応じた態様により、前記決定された種類を前記通知先に通知してよい。 In one aspect of the present invention, the notification means may notify the notification destination of the determined type in a manner corresponding to the difference between the characteristics of the determined type and the characteristics of the determined type.
また、本発明の一態様では、前記画像取得手段は、前記製品を装着する車両が停車する場所において前記製品を撮影する撮像手段から前記製品の画像を取得してよい。 In one aspect of the present invention, the image acquisition means may acquire an image of the product from an imaging means that captures an image of the product at a location where a vehicle equipped with the product is parked.
また、本発明にかかる交換支援方法は、使用されている製品の画像を取得するステップと、前記取得された画像に基づいて、前記製品の交換の必要性を判定するステップと、前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定するステップと、前記判定された種類、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定するステップと、前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知するステップと、を含む。 The replacement assistance method according to the present invention also includes the steps of acquiring an image of a product in use, determining the need to replace the product based on the acquired image, determining which of a plurality of types the product is based on the acquired image, determining a type that is a candidate for replacement from the plurality of types based on the determined type and data indicating the characteristics of each of the plurality of types, and notifying a notification destination of the determined type based on the determined need for replacement.
また、本発明にかかるプログラムは、使用されている製品の画像を取得する画像取得手段、前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段、前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段、前記判定された種類、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段、および、前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段、としてコンピュータを機能させる。 The program of the present invention causes a computer to function as an image acquisition means for acquiring an image of a product in use, an exchange determination means for determining the need to exchange the product based on the acquired image, a type determination means for determining which of a plurality of types the product is based on the acquired image, a determination means for determining a type that is a candidate for exchange from the plurality of types based on the determined type and data indicating the characteristics of each of the plurality of types, and a notification means for notifying a notification destination of the determined type based on the determined need for exchange.
以下、本発明の実施形態について、図面を参照しながら説明する。同じ符号を付された構成に対しては、重複する説明を省略する。 Embodiments of the present invention will be described below with reference to the drawings. Duplicate descriptions of components with the same reference numerals will be omitted.
図1は、本発明の実施形態にかかる情報処理システムの構成の一例を示す図である。本実施形態にかかる情報処理システムは、情報処理装置1と、通知装置21と、撮影装置22a,22bとを含む。情報処理装置1は、パーソナルコンピュータなどのコンピュータである。図1に示すように情報処理装置1は、例えば、プロセッサ11、記憶部12、通信部13、入出力部14を含む。
FIG. 1 is a diagram showing an example of the configuration of an information processing system according to an embodiment of the present invention. The information processing system according to this embodiment includes an information processing device 1, a
プロセッサ11は、例えばCPUのように、記憶部12に記憶されたプログラムやデータに従って処理を実行する。またプロセッサ11は通信部13、入出力部14、を制御する。
The
記憶部12は、RAMなどの揮発性メモリと、フラッシュメモリなどの不揮発性メモリと、ハードディスクなどの記憶装置と、を含む。記憶部12は、上記プログラムを格納する。また、記憶部12は、プロセッサ11、通信部13、入出力部14から入力される情報や演算結果を格納する。上記プログラムは、インターネット等を介して提供されてもよいし、フラッシュメモリや光ディスク等のコンピュータで読み取り可能な記憶媒体に格納されて提供されてもよい。
The
通信部13は、無線通信用の通信インタフェースを実現する集積回路等を含む。通信部13は、プロセッサ11の制御に基づいて、他の装置から受信した情報をプロセッサ11や記憶部12に入力し、他の装置に情報を送信する。
The
入出力部14は、表示出力デバイス、音声出力デバイスおよび入力デバイスへのインタフェースにより構成される。表示出力デバイスは例えば液晶ディスプレイであり、音声出力デバイスは例えばスピーカであり、入力デバイスは例えばキーボードやマウスなどのユーザインタフェースである。入出力部14は、表示出力デバイス、音声出力デバイスおよび入力デバイスを含んでもよい。
The input/
通知装置21は、ユーザに情報を提示する装置であり、例えば、表示出力デバイス、音声出力デバイス、および、画像を印刷するデバイスのうちいずれかである。通知装置21は、例えばスマートフォンのような、ユーザが所有する携帯デバイスであってもよい。
The
撮影装置22aおよび22bは、カメラなどの撮影デバイスであり、撮影によって生成される画像を情報処理装置1へ出力する。撮影装置22bは、三次元画像が撮影可能なステレオカメラや、奥行き画像が撮影可能なデプスカメラのような、深さ情報を含む画像を撮影するデバイスであってもよい。
The photographing
図2は、タイヤ32を備える車両30の一例を模式的に示す側面図である。図3は、図2に示される車両30を模式的に示す上面図である。撮影装置22a,22bは、タイヤ32を装着する車両30が停車する場所においてタイヤ32を撮影することが可能な場所に設置されている。例えば、撮影装置22a,22bは、駐車場やガソリンスタンドに設置されており、車両30は、例えば、撮影される際にはその駐車場やガソリンスタンドに駐車している。
Fig. 2 is a side view showing a schematic example of a
この場合、通知装置21は、駐車場やガソリンの代金を支払う箇所に設けられたディスプレイやスピーカであってもよいし、通知を含むレシートを印刷するプリンタであってもよい。なお、撮影装置22a,22bがエスカレータに配置され、ユーザが履いている靴の靴底を撮影し、通知装置21としてエスカレータの降り口に広告を表示するモニタが設置されてもよい。
In this case, the
図2および図3に示すように、本実施形態では、撮影装置22aは、車両30の左後輪として装着されるタイヤ32の左側面が撮影可能な位置に配置される。また、撮影装置22bは、車両30の左後輪として装着されるタイヤ32のトレッド面が撮影可能な位置に配置される。図2および図3には左後輪が撮影される例を示しているが、右後輪および左右前輪も撮影されてよい。
As shown in Figures 2 and 3, in this embodiment, the
本実施形態では、撮影装置22aにより撮影されたトレッド画像40(図6参照)と、撮影装置22bにより撮影されたサイドウォール画像34(図7参照)とに基づいて、タイヤ32の交換の必要性を判定し、ユーザに通知するタイヤの種類(特にブランド)を決定する。以下では、この処理について説明する。
In this embodiment, the necessity of replacing the
図4は、情報処理装置1が実現する機能を示すブロック図である。情報処理装置1は、機能的に、画像取得部51、交換判定部52、種類判定部53、提案ブランド決定部55、提案情報出力部56を含む。これらの機能は、記憶部12に格納されるプログラムをプロセッサ11が実行し、さらにプロセッサ11が必要に応じて通信部13および入出力部14を制御することにより実装される。また、図4に示される機能は、複数のコンピュータにより実行されてもよい。
Figure 4 is a block diagram showing functions realized by the information processing device 1. Functionally, the information processing device 1 includes an
画像取得部51は、タイヤ32の画像を取得する。タイヤ32はユーザにより使用されている製品であって消耗により形状が変化する商品である。タイヤ32は空気入りタイヤであってよく、空気入りタイヤには空気、窒素等の不活性ガス及びその他の期待を充填することができる。画像取得部51はタイヤ32の代わりに靴底の画像を取得してもよい。
The
交換判定部52は、取得された画像に基づいて、撮影されたタイヤ32の交換の必要性を判定する。交換判定部52は、タイヤ32の画像とタイヤ32の消耗の程度を示す教師データとを用いて学習された判定器を含む。
The
種類判定部53は、取得された画像に基づいて、撮影されたタイヤ32が予め定められた複数の種類のうちいずれかであるか判定する。タイヤの種類は、製品のブランド、型番、メーカーのうち少なくとも1つを含む。また種類判定部53は、取得された画像に基づいて、撮影されたタイヤ32のサイズを取得する。
The
提案ブランド決定部55は、判定されたタイヤ32の種類、および、あらかじめ定められた複数の種類のそれぞれの特性を示すデータに基づいて、その複数の種類から交換の候補となる種類を決定する。特性は、価格、ブレーキ性能、転がり抵抗、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一部を含む。
The proposed
提案情報出力部56は、判定された交換の必要性に基づいて、決定された種類を含む情報を通知先となるユーザに向けて出力することにより、そのユーザにその決定された種類を通知する。より具体的には、通知装置21へ向けて決定された種類を示す画像または音声の情報を出力し、通知装置21は、ユーザにその画像または音声を出力する。なお、通知先となるユーザはタイヤに応じて定まればよく、タイヤまたは車両を使用するユーザと通知先となるユーザとが異なっていてもよい。例えば、車両およびタイヤの所有者が法人である場合には、通知装置21は、その法人の窓口となるメールアドレス等へその決定された種類を含むメールを出力してもよい。
Based on the determined need for replacement, the proposed
図5は情報処理装置1の処理の概要を示すフロー図である。はじめに、情報処理装置1の画像取得部51は、撮影装置22a,22bからタイヤ32のトレッド画像40およびサイドウォール画像34を取得する(ステップS101)。
Figure 5 is a flow diagram showing an overview of the processing of the information processing device 1. First, the
図6は、撮影装置22bによって撮影されたタイヤ32のトレッド画像40の一例を示す図である。図6の例では、トレッド面のスリップサイン42が写っている。主溝44のそれぞれに数か所のスリップサイン42が設けられている。またトレッド画像40には、トレッドパターンも写っていてよい。なお、図6に示すトレッド画像40では、トレッドパターンの記載は省略されている。トレッド画像40においてスリップサイン42およびトレッド面の表面が写る着目領域46は、タイヤ32の摩耗の判定に用いられる。
Figure 6 is a diagram showing an example of a
図7は、撮影装置22aによって撮影される、タイヤ32の左側面が写るサイドウォール画像34の一例を示す図である。図7に示すように、サイドウォール画像34には、タイヤ32のサイドウォールに刻印された、ブランド記載36a、メーカー記載36b、製造時期記載36c、サイズ記載38が写っている。図7では記載が省略されているが、サイドウォール画像34にタイヤ32のショルダー部に刻印された側面のスリップサインが写っていてもよい。側面のスリップサインは着目領域46の特定に用いられてよい。
Figure 7 is a diagram showing an example of a
トレッド画像40およびサイドウォール画像34が取得されると、種類判定部53はサイドウォール画像34に基づいて、タイヤ32のサイズを判定する(ステップS102)。より具体的には、種類判定部53は、サイドウォール画像34に含まれるサイズ記載38を公知の文字認識技術により認識することによりタイヤ32のサイズを判定する。
Once the
そして種類判定部53は、サイドウォール画像34およびトレッド画像40に基づいて、タイヤ32のブランドを判定する(ステップS103)。より具体的には、種類判定部53は、サイドウォール画像34に含まれるブランド記載36aを公知の文字認識技術により認識し、さらにトレッド画像40に含まれるトレッドパターンと各ブランドのトレッドパターンとの類似度を算出し、認識されたブランド記載36aの文字と算出された類似度とに基づいてタイヤ32のブランドを判定する。なお、種類判定部53はサイドウォール画像34およびトレッド画像40のうち一方のみに基づいてブランドを判定してもよい。また、種類判定部53は、サイドウォール画像34に含まれるメーカー記載36bまたは製造時期記載36cを公知の文字認識技術により認識し、それぞれメーカー名または製造時期を取得してもよい。種類判定部53は、取得されたメーカーが特定のメーカーである場合には、ブランドを判定する処理を実行しなくてもよい。また種類判定部53はブランドの代わりに型番そのものを判定してもよい。
Then, the
ブランドなどが取得されると、交換判定部52は、トレッド画像40および機械学習モデルに基づいて、タイヤ32の交換の必要性を判定する(ステップS104)。より具体的には、交換判定部52は、トレッド画像40の着目領域46を所定画素数の画像となるよう拡大または縮小してターゲット入力画像を生成し、生成されたターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、タイヤ32の摩耗度を判定する。また交換判定部52は、タイヤ32の摩耗度を交換の必要性として出力する。なお、交換判定部52は、スリップサイン42を含まない領域の画像に基づいてタイヤ32の摩耗度を判定してもよい。
Once the brand and other information are acquired, the
機械学習モデルは、本実施形態では例えば、アダブースト、ランダムフォレスト、ニューラルネットワーク、サポートベクタマシン(SVM)、最近傍識別器、などの機械学習が実装された機械学習モデルである。機械学習モデルは、入力に応じて、例えばタイヤ32の摩耗度が正常であるか異常であるかを示す1ビットのデータを出力してもよいし、タイヤ32の摩耗度が予め定められた複数の段階のうちいずれであるかを示すデータを出力してもよい。
In this embodiment, the machine learning model is a machine learning model that implements machine learning such as Adaboost, random forest, neural network, support vector machine (SVM), nearest neighbor classifier, etc. Depending on the input, the machine learning model may output, for example, one bit of data indicating whether the degree of wear of the
機械学習モデルは、予め、学習入力画像と教師データとを含む学習データにより学習されている。この学習データには、タイヤ32のトレッド面が写る所定画素数の画像である学習入力画像と、当該学習入力画像に写るタイヤ32の摩耗度を示す所与の教師データと、が含まれている。
The machine learning model is trained in advance using training data that includes training input images and training data. This training data includes a training input image, which is an image of a predetermined number of pixels that shows the tread surface of the
学習入力画像は、タイヤ32のトレッド面が写る所定画素数の画像である。ここで学習入力画像の画素数は、上述のターゲット入力画像の画像の画素数と同じである。例えば、学習入力画像において、スリップサイン42の位置が定まっていてよい。また学習用入力画像は、予め収集された複数の画像であってトレッド画像40と同様の画像から着目領域46に相当する所定画素数の領域を抽出し、拡大または縮小することで生成されてもよい。
The learning input image is an image of a predetermined number of pixels that shows the tread surface of the
機械学習モデルの教師あり学習においては、例えば、学習入力画像が機械学習モデルに入力する処理、学習入力画像を機械学習モデルに入力した際の出力を用いて、機械学習モデルを学習する処理が行われる。例えば、教師あり学習において、学習データに含まれる学習入力画像を機械学習モデルに入力した際の出力と、当該学習データに含まれる教師データと、の差が特定され、その特定される差に基づいて機械学習モデルのパラメータの値が更新されてよい。 In supervised learning of a machine learning model, for example, a process is performed in which a learning input image is input to the machine learning model, and a process is performed in which the machine learning model is trained using the output when the learning input image is input to the machine learning model. For example, in supervised learning, the difference between the output when the learning input image included in the learning data is input to the machine learning model and the teacher data included in the learning data may be identified, and the parameter values of the machine learning model may be updated based on the identified difference.
そして、タイヤ32の交換の必要性がないと判定された場合は(ステップS105のN)、処理が終了し通常の広告等がユーザに通知される。 If it is determined that there is no need to replace the tire 32 (N in step S105), the process ends and the user is notified of normal advertisements, etc.
一方、タイヤ32の交換の必要性があると判定された場合は(ステップS105のY)、判定されたブランドまたはメーカーに基づいて、提案ブランド決定部55はユーザに提案するブランドを決定する(ステップS106)。そして、提案情報出力部56は決定された提案ブランドを含む提案情報を生成し(ステップS107)、生成された提案情報を通知装置21へ出力することにより、提案情報をユーザに通知する(ステップS108)。
On the other hand, if it is determined that the
以下ではブランドを決定するステップS106の処理についてさらに詳細に説明する。図8は提案ブランド決定部55の処理の一例を示すフロー図である。
The process of step S106 for determining the brand is described in more detail below. Figure 8 is a flow diagram showing an example of the process of the proposed
はじめに、提案ブランド決定部55は、種類判定部53により判定されたブランド(以下では基準ブランドとも記載する)の価格帯および性能(以下ではそれぞれ基準価格帯および基準性能と記載する)を取得する(ステップS201)。より具体的には、提案ブランド決定部55は、判定されたブランドおよびサイズに関連付けられた性能を示す情報と、価格帯を示す値とを特性情報として取得する。
First, the proposed
ここで、予め、記憶部12にはブランドおよびサイズごとに特性情報が格納されているものとする。特定情報のうち性能を示す情報(項目)としては、転がり抵抗の値、ブレーキ性能の値、快適性、耐摩耗性、静粛性、氷雪性能を示す値がある。特性情報にはこれらの一部が含まれていなくてもよいし、他の情報が含まれてもよい。なお、基準ブランドの性能の項目のそれぞれについての値を基準値とよぶ。また記憶部12にはブランドによるタイヤ32のサイズの存在の有無を示す情報が格納されている。単に記憶部12にブランドおよび存在するサイズに特性情報を関連付けることにより、サイズの存在の有無が示されてもよい。また特性情報は、ブランドの代わりとしてのメーカーまたは型番と、サイズとに関連付けて記憶部12に格納されてもよい。
Here, it is assumed that characteristic information is stored in advance in the
図9,10は、ブランドの特性情報の一例を説明する図であり、特定のサイズ(205/55R16)を有するブランドの価格帯および性能をプロットした図であり、例えば「A社製A」「A社製B」は、メーカーがA社であり、そのなかの互いに異なるブランドであることを示す。なお、図9および図10におけるブランドの記載は省略されているため、図9,10においてブランドの記載が同じ(例えば「A社製A」と「B社製A」)であっても実際は互いに異なるブランドであるとする。 Figures 9 and 10 are diagrams explaining an example of brand characteristic information, plotting the price range and performance of brands having a specific size (205/55R16). For example, "A made by company A" and "B made by company A" indicate that the manufacturer is company A and that the brands are different brands within that manufacturer. Note that the brand descriptions in Figures 9 and 10 are omitted, so even if the brand descriptions are the same in Figures 9 and 10 (for example, "A made by company A" and "A made by company B"), they are actually different brands.
判定されたブランドにおける基準価格帯および基準性能が取得されると、提案ブランド決定部55は、判定されたサイズを有する所定の会社のブランドから、価格帯および性能が、判定されたブランドと所定の関係を有する1または複数のブランドを選択する(ステップS202)。より具体的には、提案ブランド決定部55は、判定されたサイズを有する特定の会社のブランドから、基準価格帯より大きい価格帯の値を有し、かつ、基準性能より性能が優れているブランドを選択する。ここで、提案ブランド決定部55は、ブレーキ性能、転がり性能、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一つの項目が、基準ブランドより優れているブランドを、基準性能より性能が優れているブランドとして選択してよい。ある項目が基準ブランドより優れているとは、その項目が、値が大きいほど性能が高いことを示すものである場合には、その項目の値が基準値より大きいことであり、値が小さいほど性能が高いことを示すもの(例えば転がり抵抗、耐摩耗性、静粛性)である場合には、その項目の値が基準値より小さいことである。
When the standard price range and standard performance of the determined brand are acquired, the proposed
また、提案ブランド決定部55は、基準価格帯の値に応じてブランドを選択する条件を切り替えてもよい。例えば、基準価格帯が閾値より小さい(価格が比較的安い)場合には、価格帯が基準価格帯より小さい特定の会社のブランドを選択し、基準価格帯の値が閾値より大きい(価格が比較的高い)場合には、性能の値が基準性能より大きいブランドを選択してもよい。また、提案ブランド決定部55は、基準性能の快適性の値を中心とする一定の範囲内にある快適性の値を有する特定の会社のブランドのうちからブランドを選択してもよい。
The proposed
ブランドが選択されると、提案ブランド決定部55は、選択されたブランドをソートし、ソートされたブランドのリストを記憶部12に格納する(ステップS203)。例えば、提案ブランド決定部55は、基準価格帯および基準性能の値に対する、価格帯および性能の値の距離が小さいものが上位となるようにソートしてよい。
Once the brands are selected, the proposed
次に、提案情報を出力するためのステップS107およびステップS108の処理についてさらに詳細に説明する。図11は提案情報出力部56の処理の一例を示すフロー図である。
Next, the processing of steps S107 and S108 for outputting the proposed information will be described in more detail. FIG. 11 is a flow diagram showing an example of the processing of the proposed
はじめに、提案情報出力部56は、提案ブランド決定部55によって記憶部12に記憶されたブランドのリストから1番目のブランドを取得する(ステップS301)。そして、提案情報出力部56は、撮影されたタイヤ32の判定されたブランドに対する、取得されたブランドの価格帯および性能の差異を算出する(ステップS302)。より具体的には、価格帯、転がり抵抗の値、ブレーキ性能の値、快適性を示す値のそれぞれについて、撮影されたタイヤ32から判定された値と、リストから取得されたブランドにおける値との差を算出する。また提案情報出力部56は算出された各項目の差異をブランドと関連付けて記憶部12に格納する。なお提案情報出力部56は撮影されたタイヤ32から判定された値に対してリストから取得されたブランドにおける値が大きいまたは小さいか否かのみを算出してもよい。
First, the proposed
そして、リストからすべてのブランドが取得されていない場合には(ステップS303のN)、提案情報出力部56はリストから次のブランドを取得し(ステップS304)、ステップS302以降の処理を繰り返す。
If all brands have not been obtained from the list (N in step S303), the proposal
一方、リストからすべてのブランドが取得された場合には(ステップS303のY)、提案情報出力部56は、各ブランドにおいて算出された差異に基づいて、その差異に応じた提案情報を生成する(ステップS305)。例えば、提案情報出力部56は、ブランドのそれぞれについて、撮影されたタイヤ32の判定されたブランドに対する価格帯の差が価格閾値以下の場合には、「コストパフォーマンスで選ぶならこのブランド」という提案文とそのブランドを説明する情報(説明情報)を含む提案情報を作成する。同様に、提案情報出力部56は、転がり抵抗の値の差が抵抗閾値以上の場合には、「低燃費ならこのブランド」という提案文と説明情報を含む提案情報を作成し、快適性の値の差が性能閾値より大きい場合には「走り重視ならこのブランド」という提案文と説明情報とを含む提案情報を作成してよい。また提案文の代わりに、説明文に各ブランドの価格帯および性能を記載し、よりメリットのある価格帯および性能の項目を強調する画像を生成してもよい。また提案情報に各ブランドのタイヤの販売場所や在庫状況が含まれてもよい。提案情報出力部56は、提案情報として画像の情報を生成してもよいし、提案情報として音声情報を生成してもよいし、提案情報としてメッセージのテキストの文面を生成してもよい。
On the other hand, when all brands have been acquired from the list (Y in step S303), the proposed
提案情報が生成されると、提案情報出力部56は、生成された提案情報を通知装置21へ送信し、通知装置21に提案情報を出力させる(ステップS306)。通知装置21は提案情報を受信し、その提案情報が示す画像や音声をユーザへ向けて出力する。
When the proposed information is generated, the proposed
本実施形態では、撮影装置22a,22bの画像によりタイヤ32の交換の必要性が判定され交換の提案がされる。これにより、ユーザがより適切なタイミングで交換の必要性を認識することが可能になる。また、撮影されるタイヤ32のブランドの特性の違いに応じて提案されるタイヤのブランドおよび提案情報が生成されることにより、よりユーザの志向にそった提案が可能になる。これらから、本実施形態により適切なタイヤ32の交換を支援することができる。またこの情報処理システムの導入により、システムの運営側がユーザによるタイヤ32の買い替えを促進し、利益を得ることも可能になる。
In this embodiment, the need for
これまでの説明では、交換判定部52はトレッド画像40に基づいてタイヤ32の交換の必要性を判定していたが、他の手法で交換の必要性を判定してもよい。図12は、交換判定部52の処理の変形例を示す図である。
In the above explanation, the
図12に示される処理では、交換判定部52は、取得されたサイドウォール画像34から認識された製造時期を取得する(ステップS501)。より具体的には、交換判定部52は、サイドウォール画像34に含まれる製造時期記載36cを公知の文字認識技術により認識することによりタイヤ32の製造時期を取得してよい。
In the process shown in FIG. 12, the
また、交換判定部52は、種類判定部53により判定されたブランドに応じた交換判定閾値を取得する(ステップS502)。より具体的には、記憶部12には、予め、複数のブランドのそれぞれに関連付けて交換判定閾値が格納されており、交換判定部52は、判定されたブランドに関連付けられた交換判定閾値を取得する。
The
そして、交換判定部52は、製造時期からの経過期間が交換判定閾値より大きい(または交換判定閾値以上である)場合には(ステップS504のY)、タイヤ32を交換する必要性ありと判定する(ステップS504)。一方、製造時期からの経過期間が交換判定閾値以下である(または交換判定閾値より小さい)場合には(ステップS504のN)、タイヤ32を交換する必要性なしと判定する(ステップS505)。図12に示される処理は、例えばスタッドレスタイヤや一部のスポーティーなタイヤなどの経年劣化に考慮してタイヤ32の交換の必要性を判定するものである。経年劣化のしやすさはブランド等により異なるため、ブランドごとに判定基準を異ならせることでより適切に交換の必要性を判定することができる。もちろん、交換判定部52は、製造時期からの経過期間と、トレッド画像40との両方に基づいて交換の必要性を判定してもよい。
Then, if the time elapsed since the manufacturing date is greater than (or equal to or greater than) the replacement judgment threshold (Y in step S504), the
これまでに本発明の実施形態について説明したが、発明はその記載された範囲のみに限定されるものではない。本実施形態における具体的な数値や文字列、並びに、図面中の具体的な数値や文字列は例示であり、これらの数値や文字列には限定されない。 Although the embodiments of the present invention have been described above, the invention is not limited to the scope described. The specific numerical values and character strings in the present embodiments, as well as the specific numerical values and character strings in the drawings, are merely examples, and the invention is not limited to these numerical values and character strings.
1 情報処理装置、11 プロセッサ、12 記憶部、13 通信部、14 入出力部、21 通知装置、22a,22b 撮影装置、30 車両、32 タイヤ、34 サイドウォール画像、36a ブランド記載、36b メーカー記載、36c 製造時期記載、38 サイズ記載、40 トレッド画像、42 スリップサイン、44 主溝、46 着目領域、51 画像取得部、52 交換判定部、53 種類判定部、55 提案ブランド決定部、56 提案情報出力部。 1 Information processing device, 11 Processor, 12 Storage unit, 13 Communication unit, 14 Input/output unit, 21 Notification device, 22a, 22b Photography device, 30 Vehicle, 32 Tire, 34 Sidewall image, 36a Brand description, 36b Manufacturer description, 36c Manufacturing date description, 38 Size description, 40 Tread image, 42 Slip sign, 44 Main groove, 46 Focus area, 51 Image acquisition unit, 52 Replacement determination unit, 53 Type determination unit, 55 Proposed brand determination unit, 56 Proposed information output unit.
Claims (12)
前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段と、
前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段と、
前記種類判定手段により判定された種類の特性を示す情報を取得し、前記判定された種類の特性を示すデータと、複数の種類のそれぞれの特性を示すデータとに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段と、
前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段と、
を含む交換支援システム。 Image capture means for capturing an image of the product in use;
a replacement determination means for determining the necessity of replacing the product based on the acquired image;
a type determination means for determining which of a plurality of types the product is based on the acquired image;
a determination means for acquiring information indicating characteristics of the type determined by the type determination means , and determining a type to be a candidate for replacement from among the multiple types based on data indicating the characteristics of the determined type and data indicating the characteristics of each of the multiple types;
a notification means for notifying a notification destination of the determined type based on the determined necessity of replacement;
Exchange support system including.
前記種類は、前記製品のブランド、型番、およびメーカーのうち少なくとも1つである、
交換支援システム。 In the exchange assistance system according to claim 1 ,
The type is at least one of the brand, model, and manufacturer of the product;
Exchange support system.
前記交換判定手段は、製品の画像と当該製品の消耗の程度を示す教師データとを用いて学習された判定器を含む、
交換支援システム。 In the exchange assistance system according to claim 1 or 2,
The replacement determination means includes a determiner that is trained using an image of the product and training data indicating a degree of consumption of the product.
Exchange support system.
前記製品はタイヤである、
交換支援システム。 In the exchange assistance system according to any one of claims 1 to 3,
The product is a tire.
Exchange support system.
前記画像取得手段は、前記使用されている製品のトレッドおよびサイドウォールの画像を取得する、
交換支援システム。 In the exchange assistance system according to claim 4,
the image capture means captures images of the tread and sidewall of the product in use;
Exchange support system.
前記取得されたサイドウォールの画像に含まれる製造時期に基づいて、前記製品の交換の必要性を判定する、
交換支援システム。 In the exchange assistance system according to claim 5,
determining whether or not the product needs to be replaced based on a manufacturing date included in the acquired image of the sidewall;
Exchange support system.
前記種類判定手段は、前記取得された画像に基づいて、前記製品のサイズと前記種類とを判定し、
前記決定手段は、前記判定されたサイズ、前記判定された種類、複数の種類のそれぞれに存在するサイズ、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する、
交換支援システム。 In the exchange assistance system according to any one of claims 4 to 6,
The type determination means determines the size and the type of the product based on the acquired image,
the determining means determines a type to be a candidate for replacement from the plurality of types based on the determined size, the determined type, sizes present in each of the plurality of types, and data indicating characteristics of each of the plurality of types;
Exchange support system.
前記特性は、価格、ブレーキ性能、転がり抵抗、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一部を含む、
交換支援システム。 In the exchange assistance system according to any one of claims 4 to 7,
The characteristics include at least some of the following: price, braking performance, rolling resistance, comfort, wear resistance, quietness, and snow and ice performance;
Exchange support system.
前記通知手段は、前記判定された種類の特性と、前記決定された種類の特性との違いに基づいて、前記決定された種類の提案情報を作成し、前記通知先に通知する、
交換支援システム。 In the exchange assistance system according to any one of claims 1 to 8,
the notification means creates proposed information of the determined type based on a difference between the characteristics of the determined type and the characteristics of the determined type, and notifies the notification destination of the proposed information.
Exchange support system.
前記画像取得手段は、前記製品を装着する車両が停車する場所において前記製品を撮影する撮像手段から前記製品の画像を取得する、
交換支援システム。 In the exchange assistance system according to any one of claims 4 to 9,
The image acquisition means acquires an image of the product from an imaging means that captures an image of the product at a location where a vehicle equipped with the product is stopped.
Exchange support system.
使用されている製品の画像を取得するステップと、
前記取得された画像に基づいて、前記製品の交換の必要性を判定するステップと、
前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定するステップと、
前記判定された種類の特性を示す情報を取得し、前記判定された種類の特性を示すデータと、複数の種類のそれぞれの特性を示すデータとに基づいて、前記複数の種類から交換の候補となる種類を決定するステップと、
前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知するステップと、
を含む交換支援方法。 The computer
acquiring an image of the product in use;
determining a need for replacement of the product based on the captured images;
determining which of a plurality of types the product is based on the acquired image;
acquiring information indicating characteristics of the determined type, and determining a type that is a candidate for replacement from the plurality of types based on data indicating the characteristics of the determined type and data indicating the characteristics of each of the plurality of types;
notifying a notification destination of the determined type based on the determined necessity of replacement;
Exchange support methods, including:
前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段、
前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段、
前記種類判定手段により判定された種類の特性を示す情報を取得し、前記判定された種類の特性を示すデータと、複数の種類のそれぞれの特性を示すデータとに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段、および、
前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段、
としてコンピュータを機能させるためのプログラム。 image capture means for capturing an image of the product in use;
a replacement determination means for determining the necessity of replacing the product based on the acquired image;
a type determination means for determining which of a plurality of types the product is based on the acquired image;
a determination means for acquiring information indicating characteristics of the type determined by the type determination means , and determining a type to be a candidate for replacement from among the multiple types based on data indicating the characteristics of the determined type and data indicating the characteristics of each of the multiple types; and
a notification means for notifying a notification destination of the determined type based on the determined necessity of replacement;
A program that makes a computer function as a
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020024483A JP7495596B2 (en) | 2020-02-17 | 2020-02-17 | Exchange support system, exchange support method and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020024483A JP7495596B2 (en) | 2020-02-17 | 2020-02-17 | Exchange support system, exchange support method and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021128696A JP2021128696A (en) | 2021-09-02 |
JP7495596B2 true JP7495596B2 (en) | 2024-06-05 |
Family
ID=77488740
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020024483A Active JP7495596B2 (en) | 2020-02-17 | 2020-02-17 | Exchange support system, exchange support method and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7495596B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2023053569A (en) * | 2021-10-01 | 2023-04-13 | 住友ゴム工業株式会社 | Tire management system, tire management method and program |
JP7427307B1 (en) | 2023-11-24 | 2024-02-05 | あやたかシステム開発株式会社 | Terminal, system, method and program for recognizing tire serial numbers |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003178219A (en) | 2001-12-12 | 2003-06-27 | Yokohama Rubber Co Ltd:The | Tire recommending system and tire recommending server |
JP2003187125A (en) | 2001-12-20 | 2003-07-04 | Ntt Comware Corp | Vehicle part information providing device, vehicle part information providing method, program and storage medium |
JP2018020752A (en) | 2016-07-22 | 2018-02-08 | 横浜ゴム株式会社 | Maintenance timing presentation device, tire sales management system, maintenance timing presentation method, tire sales management method, maintenance timing presentation program and tire sales management program |
JP2018040635A (en) | 2016-09-06 | 2018-03-15 | 西日本高速道路エンジニアリング四国株式会社 | Method of identifying winter tires |
JP2019035626A (en) | 2017-08-10 | 2019-03-07 | 株式会社ブリヂストン | Recognition method of tire image and recognition device of tire image |
JP2019184405A (en) | 2018-04-09 | 2019-10-24 | 株式会社豊田自動織機 | Tire management system and tire management method |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10320527A (en) * | 1997-05-14 | 1998-12-04 | Mitsubishi Heavy Ind Ltd | Type discrimination device and vehicle driver leading and guiding device |
-
2020
- 2020-02-17 JP JP2020024483A patent/JP7495596B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003178219A (en) | 2001-12-12 | 2003-06-27 | Yokohama Rubber Co Ltd:The | Tire recommending system and tire recommending server |
JP2003187125A (en) | 2001-12-20 | 2003-07-04 | Ntt Comware Corp | Vehicle part information providing device, vehicle part information providing method, program and storage medium |
JP2018020752A (en) | 2016-07-22 | 2018-02-08 | 横浜ゴム株式会社 | Maintenance timing presentation device, tire sales management system, maintenance timing presentation method, tire sales management method, maintenance timing presentation program and tire sales management program |
JP2018040635A (en) | 2016-09-06 | 2018-03-15 | 西日本高速道路エンジニアリング四国株式会社 | Method of identifying winter tires |
JP2019035626A (en) | 2017-08-10 | 2019-03-07 | 株式会社ブリヂストン | Recognition method of tire image and recognition device of tire image |
JP2019184405A (en) | 2018-04-09 | 2019-10-24 | 株式会社豊田自動織機 | Tire management system and tire management method |
Also Published As
Publication number | Publication date |
---|---|
JP2021128696A (en) | 2021-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230259977A1 (en) | Systems and Methods for Switching Modes of Providing Content on a Charging Station Display | |
JP7495596B2 (en) | Exchange support system, exchange support method and program | |
JP5742873B2 (en) | Object identification device | |
US11494638B2 (en) | Learning support device and learning support method | |
JP6333975B2 (en) | Vehicle periphery monitoring device | |
US11526699B2 (en) | Detecting device, detecting method, generating method, computer program, and storage medium | |
US11971267B2 (en) | User journey carbon footprint reduction | |
EP3774405B1 (en) | System for tire performance alerts and assisted remediation | |
JP2017207840A (en) | Image processing apparatus, image processing system, image processing method, program, and recording medium | |
JP2016522519A (en) | Gesture based advertising profile for users | |
JP7428870B2 (en) | Tire wear degree estimation device, tire wear degree learning device, tire wear degree estimation method, learned model generation method and program | |
JP2023055602A (en) | Tire state estimation method | |
JP7492120B2 (en) | Consumption state learning device, trained model generation method and program | |
US20230130875A1 (en) | System and method for providing user feedback regarding driving behavior and the effects on gas consumption and vehicle wear | |
JP7469640B2 (en) | Tire abnormality determination device, tire abnormality determination method and program | |
JP2021181286A (en) | Tire abnormality detection device, tire abnormality detection method and program | |
JP2019040244A (en) | Driving support device | |
JP7335503B2 (en) | Tire pressure drop estimation device, tire pressure drop learning device, tire pressure drop estimation method, trained model generation method and program | |
JP2020042489A (en) | License plate identifying device, license plate identifying method and program | |
JP7393458B2 (en) | EV vehicle operating status monitoring system, EV vehicle operating status monitoring program | |
WO2024127852A1 (en) | Tire external-scratch monitoring device, tire external-scratch monitoring method, and program | |
EP4296089A1 (en) | Tire tread wear determination system and method using deep artificial neural network | |
CN112417922A (en) | Target identification method and device | |
KR20230168414A (en) | Tire life prediction method and system using tire life prediction model | |
KR20230168415A (en) | Tire store linkage method and system based on tire life prediction model |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240423 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240506 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7495596 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |