JP7495596B2 - Exchange support system, exchange support method and program - Google Patents

Exchange support system, exchange support method and program Download PDF

Info

Publication number
JP7495596B2
JP7495596B2 JP2020024483A JP2020024483A JP7495596B2 JP 7495596 B2 JP7495596 B2 JP 7495596B2 JP 2020024483 A JP2020024483 A JP 2020024483A JP 2020024483 A JP2020024483 A JP 2020024483A JP 7495596 B2 JP7495596 B2 JP 7495596B2
Authority
JP
Japan
Prior art keywords
product
type
image
determined
replacement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020024483A
Other languages
Japanese (ja)
Other versions
JP2021128696A (en
Inventor
大輔 金成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokohama Rubber Co Ltd
Original Assignee
Yokohama Rubber Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokohama Rubber Co Ltd filed Critical Yokohama Rubber Co Ltd
Priority to JP2020024483A priority Critical patent/JP7495596B2/en
Publication of JP2021128696A publication Critical patent/JP2021128696A/en
Application granted granted Critical
Publication of JP7495596B2 publication Critical patent/JP7495596B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Tires In General (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、交換支援システム、交換支援方法およびプログラムに関する。 The present invention relates to an exchange assistance system, an exchange assistance method, and a program.

例えばタイヤのように、使用により状態が変化し、最終的に寿命を迎える製品がある。この寿命を非接触で判定する技術が開発されている。 For example, there are products such as tires whose condition changes with use and eventually reach the end of their life. Technology has been developed to determine this end of life without contact.

特許文献1には、畳み込みニューラルネットワークを用いてタイヤの画像からタイヤ種や摩耗状態などを認識できる認識方法および認識装置が記載されている。 Patent document 1 describes a recognition method and device that can recognize tire type and wear condition from tire images using a convolutional neural network.

また、特許文献2には、車止めに配置されたレーザ変位計を用いてタイヤの溝の深さを測定することが開示されている。特許文献3には、超音波を用いてタイヤの溝の深さを計測する測定装置が記載されている。 Patent Document 2 also discloses measuring the depth of tire grooves using a laser displacement meter placed at a car stop. Patent Document 3 describes a measuring device that uses ultrasound to measure the depth of tire grooves.

特開2019-35626号公報JP 2019-35626 A 特開2019-86293号公報JP 2019-86293 A 特公平5-62924号公報Japanese Patent Publication No. 5-62924

例えばタイヤのような製品は、その交換のタイミングを適切に認識することが容易でない。しかも、例えばその製品のサイズや性能が多様であるため、寿命を判定しただけでは適切に交換を行うことが難しい。 For example, it is not easy to properly determine when to replace a product such as a tire. Moreover, because the size and performance of the product vary widely, it is difficult to properly replace the product just by determining its lifespan.

本発明は上記課題を鑑みてなされたものであって、その目的は、使用により消耗する製品の適切な交換を支援する技術を提供することにある。 The present invention was made in consideration of the above problems, and its purpose is to provide a technology that supports the appropriate replacement of products that wear out through use.

上記課題を解決するために、本発明にかかる交換支援システムは、使用されている製品の画像を取得する画像取得手段と、前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段と、前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段と、前記判定された種類、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段と、前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段と、を含む。 To solve the above problems, the replacement assistance system of the present invention includes an image acquisition means for acquiring an image of a product in use, an replacement determination means for determining the need to replace the product based on the acquired image, a type determination means for determining which of a plurality of types the product is based on the acquired image, a determination means for determining a type that is a candidate for replacement from the plurality of types based on the determined type and data indicating the characteristics of each of the plurality of types, and a notification means for notifying a notification destination of the determined type based on the determined need for replacement.

本発明の一態様では、前記種類は、前記製品のブランド、型番、およびメーカーのうち少なくとも1つであってよい。 In one aspect of the present invention, the type may be at least one of the brand, model number, and manufacturer of the product.

また、本発明の一態様では、前記交換判定手段は、製品の画像と当該製品の消耗の程度を示す教師データとを用いて学習された判定器を含んでよい。 In one aspect of the present invention, the replacement determination means may include a determiner that is trained using an image of the product and training data indicating the degree of wear of the product.

また、本発明の一態様では、前記製品はタイヤであってよい。 In one aspect of the present invention, the product may be a tire.

また、本発明の一態様では、前記画像取得手段は、前記使用されている製品のトレッドおよびサイドウォールの画像を取得してよい。 In one aspect of the present invention, the image acquisition means may acquire images of the tread and sidewalls of the product in use.

また、本発明の一態様では、前記取得されたサイドウォールの画像に含まれる製造時期に基づいて、前記製品の交換の必要性を判定してよい。 In one aspect of the present invention, the need to replace the product may be determined based on the manufacturing date contained in the acquired image of the sidewall.

また、本発明の一態様では、前記種類判定手段は、前記取得された画像に基づいて、前記製品のサイズと前記種類とを判定し、前記決定手段は、前記判定されたサイズ、前記判定された種類、複数の種類のそれぞれに存在するサイズ、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定してよい。 In one aspect of the present invention, the type determination means may determine the size and type of the product based on the acquired image, and the determination means may determine a type that is a candidate for replacement from the multiple types based on the determined size, the determined type, the sizes present in each of the multiple types, and data indicating the characteristics of each of the multiple types.

また、本発明の一態様では、前記特性は、価格、ブレーキ性能、転がり抵抗、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一部を含んでよい。 In one aspect of the present invention, the characteristics may include at least some of the following: price, braking performance, rolling resistance, comfort, wear resistance, quietness, and snow and ice performance.

また、本発明の一態様では、前記通知手段は、前記判定された種類の特性と、前記決定された種類の特性との違いに応じた態様により、前記決定された種類を前記通知先に通知してよい。 In one aspect of the present invention, the notification means may notify the notification destination of the determined type in a manner corresponding to the difference between the characteristics of the determined type and the characteristics of the determined type.

また、本発明の一態様では、前記画像取得手段は、前記製品を装着する車両が停車する場所において前記製品を撮影する撮像手段から前記製品の画像を取得してよい。 In one aspect of the present invention, the image acquisition means may acquire an image of the product from an imaging means that captures an image of the product at a location where a vehicle equipped with the product is parked.

また、本発明にかかる交換支援方法は、使用されている製品の画像を取得するステップと、前記取得された画像に基づいて、前記製品の交換の必要性を判定するステップと、前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定するステップと、前記判定された種類、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定するステップと、前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知するステップと、を含む。 The replacement assistance method according to the present invention also includes the steps of acquiring an image of a product in use, determining the need to replace the product based on the acquired image, determining which of a plurality of types the product is based on the acquired image, determining a type that is a candidate for replacement from the plurality of types based on the determined type and data indicating the characteristics of each of the plurality of types, and notifying a notification destination of the determined type based on the determined need for replacement.

また、本発明にかかるプログラムは、使用されている製品の画像を取得する画像取得手段、前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段、前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段、前記判定された種類、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段、および、前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段、としてコンピュータを機能させる。 The program of the present invention causes a computer to function as an image acquisition means for acquiring an image of a product in use, an exchange determination means for determining the need to exchange the product based on the acquired image, a type determination means for determining which of a plurality of types the product is based on the acquired image, a determination means for determining a type that is a candidate for exchange from the plurality of types based on the determined type and data indicating the characteristics of each of the plurality of types, and a notification means for notifying a notification destination of the determined type based on the determined need for exchange.

本発明の実施形態にかかる情報処理システムの構成の一例を示す図である。1 is a diagram illustrating an example of a configuration of an information processing system according to an embodiment of the present invention. タイヤを備える車両の一例を模式的に示す側面図である。FIG. 1 is a side view showing a schematic diagram of an example of a vehicle equipped with a tire. 図2に示される車両を模式的に示す上面図である。FIG. 3 is a top view diagrammatically illustrating the vehicle shown in FIG. 2 . 情報処理装置が実現する機能を示すブロック図である。FIG. 2 is a block diagram showing functions realized by the information processing device. 情報処理装置の処理の概要を示すフロー図である。FIG. 2 is a flow chart showing an overview of processing by the information processing device. 撮影されたトレッドの画像の一例を示す図である。FIG. 4 is a diagram showing an example of a photographed image of a tread. 撮影されたサイドウォールの画像の一例を示す図である。FIG. 2 is a diagram showing an example of a photographed image of a sidewall. 提案ブランド決定部の処理の一例を示すフロー図である。FIG. 11 is a flowchart showing an example of a process of a proposed brand determination unit. ブランドの特性情報の一例を説明する図である。FIG. 11 is a diagram illustrating an example of brand characteristic information. ブランドの特性情報の一例を説明する図である。FIG. 11 is a diagram illustrating an example of brand characteristic information. 提案情報生成部の処理の一例を示すフロー図である。FIG. 11 is a flow chart illustrating an example of a process of a proposal information generating unit. 交換判定部の処理の変形例を示す図である。FIG. 13 is a diagram illustrating a modified example of the process of the exchange determination unit.

以下、本発明の実施形態について、図面を参照しながら説明する。同じ符号を付された構成に対しては、重複する説明を省略する。 Embodiments of the present invention will be described below with reference to the drawings. Duplicate descriptions of components with the same reference numerals will be omitted.

図1は、本発明の実施形態にかかる情報処理システムの構成の一例を示す図である。本実施形態にかかる情報処理システムは、情報処理装置1と、通知装置21と、撮影装置22a,22bとを含む。情報処理装置1は、パーソナルコンピュータなどのコンピュータである。図1に示すように情報処理装置1は、例えば、プロセッサ11、記憶部12、通信部13、入出力部14を含む。 FIG. 1 is a diagram showing an example of the configuration of an information processing system according to an embodiment of the present invention. The information processing system according to this embodiment includes an information processing device 1, a notification device 21, and image capture devices 22a and 22b. The information processing device 1 is a computer such as a personal computer. As shown in FIG. 1, the information processing device 1 includes, for example, a processor 11, a memory unit 12, a communication unit 13, and an input/output unit 14.

プロセッサ11は、例えばCPUのように、記憶部12に記憶されたプログラムやデータに従って処理を実行する。またプロセッサ11は通信部13、入出力部14、を制御する。 The processor 11, like a CPU, executes processing according to the programs and data stored in the memory unit 12. The processor 11 also controls the communication unit 13 and the input/output unit 14.

記憶部12は、RAMなどの揮発性メモリと、フラッシュメモリなどの不揮発性メモリと、ハードディスクなどの記憶装置と、を含む。記憶部12は、上記プログラムを格納する。また、記憶部12は、プロセッサ11、通信部13、入出力部14から入力される情報や演算結果を格納する。上記プログラムは、インターネット等を介して提供されてもよいし、フラッシュメモリや光ディスク等のコンピュータで読み取り可能な記憶媒体に格納されて提供されてもよい。 The storage unit 12 includes a volatile memory such as a RAM, a non-volatile memory such as a flash memory, and a storage device such as a hard disk. The storage unit 12 stores the above-mentioned programs. The storage unit 12 also stores information and calculation results input from the processor 11, the communication unit 13, and the input/output unit 14. The above-mentioned programs may be provided via the Internet, etc., or may be provided by being stored in a computer-readable storage medium such as a flash memory or an optical disk.

通信部13は、無線通信用の通信インタフェースを実現する集積回路等を含む。通信部13は、プロセッサ11の制御に基づいて、他の装置から受信した情報をプロセッサ11や記憶部12に入力し、他の装置に情報を送信する。 The communication unit 13 includes an integrated circuit that realizes a communication interface for wireless communication. Based on the control of the processor 11, the communication unit 13 inputs information received from other devices to the processor 11 and the storage unit 12, and transmits information to other devices.

入出力部14は、表示出力デバイス、音声出力デバイスおよび入力デバイスへのインタフェースにより構成される。表示出力デバイスは例えば液晶ディスプレイであり、音声出力デバイスは例えばスピーカであり、入力デバイスは例えばキーボードやマウスなどのユーザインタフェースである。入出力部14は、表示出力デバイス、音声出力デバイスおよび入力デバイスを含んでもよい。 The input/output unit 14 is composed of a display output device, an audio output device, and an interface to an input device. The display output device is, for example, a liquid crystal display, the audio output device is, for example, a speaker, and the input device is, for example, a user interface such as a keyboard or a mouse. The input/output unit 14 may include a display output device, an audio output device, and an input device.

通知装置21は、ユーザに情報を提示する装置であり、例えば、表示出力デバイス、音声出力デバイス、および、画像を印刷するデバイスのうちいずれかである。通知装置21は、例えばスマートフォンのような、ユーザが所有する携帯デバイスであってもよい。 The notification device 21 is a device that presents information to a user, and is, for example, any one of a display output device, an audio output device, and a device that prints images. The notification device 21 may also be a portable device owned by the user, such as a smartphone.

撮影装置22aおよび22bは、カメラなどの撮影デバイスであり、撮影によって生成される画像を情報処理装置1へ出力する。撮影装置22bは、三次元画像が撮影可能なステレオカメラや、奥行き画像が撮影可能なデプスカメラのような、深さ情報を含む画像を撮影するデバイスであってもよい。 The photographing devices 22a and 22b are photographing devices such as cameras, and output images generated by photographing to the information processing device 1. The photographing device 22b may be a device that photographs images including depth information, such as a stereo camera capable of photographing three-dimensional images or a depth camera capable of photographing depth images.

図2は、タイヤ32を備える車両30の一例を模式的に示す側面図である。図3は、図2に示される車両30を模式的に示す上面図である。撮影装置22a,22bは、タイヤ32を装着する車両30が停車する場所においてタイヤ32を撮影することが可能な場所に設置されている。例えば、撮影装置22a,22bは、駐車場やガソリンスタンドに設置されており、車両30は、例えば、撮影される際にはその駐車場やガソリンスタンドに駐車している。 Fig. 2 is a side view showing a schematic example of a vehicle 30 equipped with a tire 32. Fig. 3 is a top view showing a schematic example of the vehicle 30 shown in Fig. 2. The photographing devices 22a and 22b are installed at a location where the vehicle 30 equipped with the tire 32 can be photographed at the location where the vehicle 30 is stopped. For example, the photographing devices 22a and 22b are installed in a parking lot or a gas station, and the vehicle 30 is parked in the parking lot or gas station when it is photographed.

この場合、通知装置21は、駐車場やガソリンの代金を支払う箇所に設けられたディスプレイやスピーカであってもよいし、通知を含むレシートを印刷するプリンタであってもよい。なお、撮影装置22a,22bがエスカレータに配置され、ユーザが履いている靴の靴底を撮影し、通知装置21としてエスカレータの降り口に広告を表示するモニタが設置されてもよい。 In this case, the notification device 21 may be a display or speaker installed at the parking lot or gasoline payment location, or a printer that prints out a receipt including the notification. The photographing devices 22a and 22b may be placed on the escalator to photograph the soles of the shoes worn by the user, and a monitor that displays advertisements may be installed at the foot of the escalator as the notification device 21.

図2および図3に示すように、本実施形態では、撮影装置22aは、車両30の左後輪として装着されるタイヤ32の左側面が撮影可能な位置に配置される。また、撮影装置22bは、車両30の左後輪として装着されるタイヤ32のトレッド面が撮影可能な位置に配置される。図2および図3には左後輪が撮影される例を示しているが、右後輪および左右前輪も撮影されてよい。 As shown in Figures 2 and 3, in this embodiment, the image capturing device 22a is disposed in a position where it can capture an image of the left side of the tire 32 mounted as the left rear wheel of the vehicle 30. The image capturing device 22b is disposed in a position where it can capture an image of the tread surface of the tire 32 mounted as the left rear wheel of the vehicle 30. Although Figures 2 and 3 show an example in which the left rear wheel is captured, the right rear wheel and the left and right front wheels may also be captured.

本実施形態では、撮影装置22aにより撮影されたトレッド画像40(図6参照)と、撮影装置22bにより撮影されたサイドウォール画像34(図7参照)とに基づいて、タイヤ32の交換の必要性を判定し、ユーザに通知するタイヤの種類(特にブランド)を決定する。以下では、この処理について説明する。 In this embodiment, the necessity of replacing the tire 32 is determined based on the tread image 40 (see FIG. 6) captured by the image capture device 22a and the sidewall image 34 (see FIG. 7) captured by the image capture device 22b, and the type of tire (particularly the brand) to be notified to the user is determined. This process is described below.

図4は、情報処理装置1が実現する機能を示すブロック図である。情報処理装置1は、機能的に、画像取得部51、交換判定部52、種類判定部53、提案ブランド決定部55、提案情報出力部56を含む。これらの機能は、記憶部12に格納されるプログラムをプロセッサ11が実行し、さらにプロセッサ11が必要に応じて通信部13および入出力部14を制御することにより実装される。また、図4に示される機能は、複数のコンピュータにより実行されてもよい。 Figure 4 is a block diagram showing functions realized by the information processing device 1. Functionally, the information processing device 1 includes an image acquisition unit 51, an exchange determination unit 52, a type determination unit 53, a suggested brand determination unit 55, and a suggested information output unit 56. These functions are implemented by the processor 11 executing a program stored in the memory unit 12, and the processor 11 further controlling the communication unit 13 and the input/output unit 14 as necessary. In addition, the functions shown in Figure 4 may be executed by multiple computers.

画像取得部51は、タイヤ32の画像を取得する。タイヤ32はユーザにより使用されている製品であって消耗により形状が変化する商品である。タイヤ32は空気入りタイヤであってよく、空気入りタイヤには空気、窒素等の不活性ガス及びその他の期待を充填することができる。画像取得部51はタイヤ32の代わりに靴底の画像を取得してもよい。 The image acquisition unit 51 acquires an image of the tire 32. The tire 32 is a product used by a user and changes shape as it wears out. The tire 32 may be a pneumatic tire, which may be filled with air, an inert gas such as nitrogen, or other gases. The image acquisition unit 51 may acquire an image of a shoe sole instead of the tire 32.

交換判定部52は、取得された画像に基づいて、撮影されたタイヤ32の交換の必要性を判定する。交換判定部52は、タイヤ32の画像とタイヤ32の消耗の程度を示す教師データとを用いて学習された判定器を含む。 The replacement determination unit 52 determines the need to replace the captured tire 32 based on the acquired image. The replacement determination unit 52 includes a determiner that has been trained using the image of the tire 32 and training data that indicates the degree of wear of the tire 32.

種類判定部53は、取得された画像に基づいて、撮影されたタイヤ32が予め定められた複数の種類のうちいずれかであるか判定する。タイヤの種類は、製品のブランド、型番、メーカーのうち少なくとも1つを含む。また種類判定部53は、取得された画像に基づいて、撮影されたタイヤ32のサイズを取得する。 The type determination unit 53 determines whether the photographed tire 32 is one of a number of predetermined types based on the acquired image. The type of tire includes at least one of the product brand, model number, and manufacturer. The type determination unit 53 also obtains the size of the photographed tire 32 based on the acquired image.

提案ブランド決定部55は、判定されたタイヤ32の種類、および、あらかじめ定められた複数の種類のそれぞれの特性を示すデータに基づいて、その複数の種類から交換の候補となる種類を決定する。特性は、価格、ブレーキ性能、転がり抵抗、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一部を含む。 The proposed brand determination unit 55 determines a type that is a candidate for replacement from among a plurality of predetermined types based on the determined type of tire 32 and data indicating the characteristics of each of the plurality of predetermined types. The characteristics include at least some of the following: price, braking performance, rolling resistance, comfort, wear resistance, quietness, and snow and ice performance.

提案情報出力部56は、判定された交換の必要性に基づいて、決定された種類を含む情報を通知先となるユーザに向けて出力することにより、そのユーザにその決定された種類を通知する。より具体的には、通知装置21へ向けて決定された種類を示す画像または音声の情報を出力し、通知装置21は、ユーザにその画像または音声を出力する。なお、通知先となるユーザはタイヤに応じて定まればよく、タイヤまたは車両を使用するユーザと通知先となるユーザとが異なっていてもよい。例えば、車両およびタイヤの所有者が法人である場合には、通知装置21は、その法人の窓口となるメールアドレス等へその決定された種類を含むメールを出力してもよい。 Based on the determined need for replacement, the proposed information output unit 56 outputs information including the determined type to the user to be notified, thereby notifying the user of the determined type. More specifically, image or audio information indicating the determined type is output to the notification device 21, and the notification device 21 outputs the image or audio to the user. The user to be notified may be determined according to the tire, and the user who uses the tire or vehicle may be different from the user to be notified. For example, if the owner of the vehicle and tire is a corporation, the notification device 21 may output an email including the determined type to an email address or the like that serves as the corporation's contact point.

図5は情報処理装置1の処理の概要を示すフロー図である。はじめに、情報処理装置1の画像取得部51は、撮影装置22a,22bからタイヤ32のトレッド画像40およびサイドウォール画像34を取得する(ステップS101)。 Figure 5 is a flow diagram showing an overview of the processing of the information processing device 1. First, the image acquisition unit 51 of the information processing device 1 acquires the tread image 40 and the sidewall image 34 of the tire 32 from the photographing devices 22a and 22b (step S101).

図6は、撮影装置22bによって撮影されたタイヤ32のトレッド画像40の一例を示す図である。図6の例では、トレッド面のスリップサイン42が写っている。主溝44のそれぞれに数か所のスリップサイン42が設けられている。またトレッド画像40には、トレッドパターンも写っていてよい。なお、図6に示すトレッド画像40では、トレッドパターンの記載は省略されている。トレッド画像40においてスリップサイン42およびトレッド面の表面が写る着目領域46は、タイヤ32の摩耗の判定に用いられる。 Figure 6 is a diagram showing an example of a tread image 40 of a tire 32 captured by the image capture device 22b. In the example of Figure 6, slip signs 42 on the tread surface are captured. Several slip signs 42 are provided in each of the main grooves 44. The tread pattern may also be captured in the tread image 40. Note that the tread pattern is omitted from the tread image 40 shown in Figure 6. A region of interest 46 in the tread image 40, in which the slip signs 42 and the surface of the tread surface are captured, is used to determine the wear of the tire 32.

図7は、撮影装置22aによって撮影される、タイヤ32の左側面が写るサイドウォール画像34の一例を示す図である。図7に示すように、サイドウォール画像34には、タイヤ32のサイドウォールに刻印された、ブランド記載36a、メーカー記載36b、製造時期記載36c、サイズ記載38が写っている。図7では記載が省略されているが、サイドウォール画像34にタイヤ32のショルダー部に刻印された側面のスリップサインが写っていてもよい。側面のスリップサインは着目領域46の特定に用いられてよい。 Figure 7 is a diagram showing an example of a sidewall image 34 showing the left side of a tire 32 captured by the image capture device 22a. As shown in Figure 7, the sidewall image 34 shows a brand description 36a, a manufacturer description 36b, a production date description 36c, and a size description 38 that are stamped on the sidewall of the tire 32. Although not shown in Figure 7, the sidewall image 34 may also show a slip sign on the side that is stamped on the shoulder portion of the tire 32. The slip sign on the side may be used to identify the region of interest 46.

トレッド画像40およびサイドウォール画像34が取得されると、種類判定部53はサイドウォール画像34に基づいて、タイヤ32のサイズを判定する(ステップS102)。より具体的には、種類判定部53は、サイドウォール画像34に含まれるサイズ記載38を公知の文字認識技術により認識することによりタイヤ32のサイズを判定する。 Once the tread image 40 and the sidewall image 34 are acquired, the type determination unit 53 determines the size of the tire 32 based on the sidewall image 34 (step S102). More specifically, the type determination unit 53 determines the size of the tire 32 by recognizing the size description 38 included in the sidewall image 34 using a known character recognition technique.

そして種類判定部53は、サイドウォール画像34およびトレッド画像40に基づいて、タイヤ32のブランドを判定する(ステップS103)。より具体的には、種類判定部53は、サイドウォール画像34に含まれるブランド記載36aを公知の文字認識技術により認識し、さらにトレッド画像40に含まれるトレッドパターンと各ブランドのトレッドパターンとの類似度を算出し、認識されたブランド記載36aの文字と算出された類似度とに基づいてタイヤ32のブランドを判定する。なお、種類判定部53はサイドウォール画像34およびトレッド画像40のうち一方のみに基づいてブランドを判定してもよい。また、種類判定部53は、サイドウォール画像34に含まれるメーカー記載36bまたは製造時期記載36cを公知の文字認識技術により認識し、それぞれメーカー名または製造時期を取得してもよい。種類判定部53は、取得されたメーカーが特定のメーカーである場合には、ブランドを判定する処理を実行しなくてもよい。また種類判定部53はブランドの代わりに型番そのものを判定してもよい。 Then, the type determination unit 53 determines the brand of the tire 32 based on the sidewall image 34 and the tread image 40 (step S103). More specifically, the type determination unit 53 recognizes the brand description 36a included in the sidewall image 34 by a known character recognition technology, calculates the similarity between the tread pattern included in the tread image 40 and the tread pattern of each brand, and determines the brand of the tire 32 based on the characters of the recognized brand description 36a and the calculated similarity. The type determination unit 53 may determine the brand based on only one of the sidewall image 34 and the tread image 40. The type determination unit 53 may also recognize the manufacturer description 36b or the manufacturing date description 36c included in the sidewall image 34 by a known character recognition technology, and obtain the manufacturer name or the manufacturing date, respectively. If the obtained manufacturer is a specific manufacturer, the type determination unit 53 may not execute the process of determining the brand. The type determination unit 53 may also determine the model number itself instead of the brand.

ブランドなどが取得されると、交換判定部52は、トレッド画像40および機械学習モデルに基づいて、タイヤ32の交換の必要性を判定する(ステップS104)。より具体的には、交換判定部52は、トレッド画像40の着目領域46を所定画素数の画像となるよう拡大または縮小してターゲット入力画像を生成し、生成されたターゲット入力画像を学習済の機械学習モデルに入力した際の出力に基づいて、タイヤ32の摩耗度を判定する。また交換判定部52は、タイヤ32の摩耗度を交換の必要性として出力する。なお、交換判定部52は、スリップサイン42を含まない領域の画像に基づいてタイヤ32の摩耗度を判定してもよい。 Once the brand and other information are acquired, the replacement determination unit 52 determines the need to replace the tire 32 based on the tread image 40 and the machine learning model (step S104). More specifically, the replacement determination unit 52 generates a target input image by enlarging or reducing the focus area 46 of the tread image 40 to an image of a predetermined number of pixels, and determines the degree of wear of the tire 32 based on the output when the generated target input image is input to the trained machine learning model. The replacement determination unit 52 also outputs the degree of wear of the tire 32 as the need for replacement. The replacement determination unit 52 may determine the degree of wear of the tire 32 based on an image of an area that does not include the slip sign 42.

機械学習モデルは、本実施形態では例えば、アダブースト、ランダムフォレスト、ニューラルネットワーク、サポートベクタマシン(SVM)、最近傍識別器、などの機械学習が実装された機械学習モデルである。機械学習モデルは、入力に応じて、例えばタイヤ32の摩耗度が正常であるか異常であるかを示す1ビットのデータを出力してもよいし、タイヤ32の摩耗度が予め定められた複数の段階のうちいずれであるかを示すデータを出力してもよい。 In this embodiment, the machine learning model is a machine learning model that implements machine learning such as Adaboost, random forest, neural network, support vector machine (SVM), nearest neighbor classifier, etc. Depending on the input, the machine learning model may output, for example, one bit of data indicating whether the degree of wear of the tire 32 is normal or abnormal, or may output data indicating which of multiple predetermined stages the degree of wear of the tire 32 is in.

機械学習モデルは、予め、学習入力画像と教師データとを含む学習データにより学習されている。この学習データには、タイヤ32のトレッド面が写る所定画素数の画像である学習入力画像と、当該学習入力画像に写るタイヤ32の摩耗度を示す所与の教師データと、が含まれている。 The machine learning model is trained in advance using training data that includes training input images and training data. This training data includes a training input image, which is an image of a predetermined number of pixels that shows the tread surface of the tire 32, and given training data that indicates the degree of wear of the tire 32 shown in the training input image.

学習入力画像は、タイヤ32のトレッド面が写る所定画素数の画像である。ここで学習入力画像の画素数は、上述のターゲット入力画像の画像の画素数と同じである。例えば、学習入力画像において、スリップサイン42の位置が定まっていてよい。また学習用入力画像は、予め収集された複数の画像であってトレッド画像40と同様の画像から着目領域46に相当する所定画素数の領域を抽出し、拡大または縮小することで生成されてもよい。 The learning input image is an image of a predetermined number of pixels that shows the tread surface of the tire 32. Here, the number of pixels of the learning input image is the same as the number of pixels of the target input image described above. For example, the position of the slip sign 42 may be fixed in the learning input image. The learning input image may also be generated by extracting an area of a predetermined number of pixels corresponding to the region of interest 46 from a plurality of images collected in advance that are similar to the tread image 40, and enlarging or reducing it.

機械学習モデルの教師あり学習においては、例えば、学習入力画像が機械学習モデルに入力する処理、学習入力画像を機械学習モデルに入力した際の出力を用いて、機械学習モデルを学習する処理が行われる。例えば、教師あり学習において、学習データに含まれる学習入力画像を機械学習モデルに入力した際の出力と、当該学習データに含まれる教師データと、の差が特定され、その特定される差に基づいて機械学習モデルのパラメータの値が更新されてよい。 In supervised learning of a machine learning model, for example, a process is performed in which a learning input image is input to the machine learning model, and a process is performed in which the machine learning model is trained using the output when the learning input image is input to the machine learning model. For example, in supervised learning, the difference between the output when the learning input image included in the learning data is input to the machine learning model and the teacher data included in the learning data may be identified, and the parameter values of the machine learning model may be updated based on the identified difference.

そして、タイヤ32の交換の必要性がないと判定された場合は(ステップS105のN)、処理が終了し通常の広告等がユーザに通知される。 If it is determined that there is no need to replace the tire 32 (N in step S105), the process ends and the user is notified of normal advertisements, etc.

一方、タイヤ32の交換の必要性があると判定された場合は(ステップS105のY)、判定されたブランドまたはメーカーに基づいて、提案ブランド決定部55はユーザに提案するブランドを決定する(ステップS106)。そして、提案情報出力部56は決定された提案ブランドを含む提案情報を生成し(ステップS107)、生成された提案情報を通知装置21へ出力することにより、提案情報をユーザに通知する(ステップS108)。 On the other hand, if it is determined that the tire 32 needs to be replaced (Y in step S105), the proposed brand determination unit 55 determines the brand to be proposed to the user based on the determined brand or manufacturer (step S106). Then, the proposed information output unit 56 generates proposed information including the determined proposed brand (step S107), and notifies the user of the proposed information by outputting the generated proposed information to the notification device 21 (step S108).

以下ではブランドを決定するステップS106の処理についてさらに詳細に説明する。図8は提案ブランド決定部55の処理の一例を示すフロー図である。 The process of step S106 for determining the brand is described in more detail below. Figure 8 is a flow diagram showing an example of the process of the proposed brand determination unit 55.

はじめに、提案ブランド決定部55は、種類判定部53により判定されたブランド(以下では基準ブランドとも記載する)の価格帯および性能(以下ではそれぞれ基準価格帯および基準性能と記載する)を取得する(ステップS201)。より具体的には、提案ブランド決定部55は、判定されたブランドおよびサイズに関連付けられた性能を示す情報と、価格帯を示す値とを特性情報として取得する。 First, the proposed brand determination unit 55 acquires the price range and performance (hereinafter referred to as the reference price range and reference performance, respectively) of the brand (hereinafter referred to as the reference brand) determined by the type determination unit 53 (step S201). More specifically, the proposed brand determination unit 55 acquires, as characteristic information, information indicating the performance associated with the determined brand and size, and a value indicating the price range.

ここで、予め、記憶部12にはブランドおよびサイズごとに特性情報が格納されているものとする。特定情報のうち性能を示す情報(項目)としては、転がり抵抗の値、ブレーキ性能の値、快適性、耐摩耗性、静粛性、氷雪性能を示す値がある。特性情報にはこれらの一部が含まれていなくてもよいし、他の情報が含まれてもよい。なお、基準ブランドの性能の項目のそれぞれについての値を基準値とよぶ。また記憶部12にはブランドによるタイヤ32のサイズの存在の有無を示す情報が格納されている。単に記憶部12にブランドおよび存在するサイズに特性情報を関連付けることにより、サイズの存在の有無が示されてもよい。また特性情報は、ブランドの代わりとしてのメーカーまたは型番と、サイズとに関連付けて記憶部12に格納されてもよい。 Here, it is assumed that characteristic information is stored in advance in the memory unit 12 for each brand and size. Among the specific information, information (items) indicating performance include values of rolling resistance, values of braking performance, and values indicating comfort, wear resistance, quietness, and performance on ice and snow. The characteristic information may not include some of these, or may include other information. Values for each performance item of a reference brand are called reference values. The memory unit 12 also stores information indicating the presence or absence of tire 32 sizes by brand. The presence or absence of a size may be indicated by simply associating characteristic information with a brand and an existing size in the memory unit 12. The characteristic information may also be stored in the memory unit 12 in association with a manufacturer or model number as a substitute for a brand, and a size.

図9,10は、ブランドの特性情報の一例を説明する図であり、特定のサイズ(205/55R16)を有するブランドの価格帯および性能をプロットした図であり、例えば「A社製A」「A社製B」は、メーカーがA社であり、そのなかの互いに異なるブランドであることを示す。なお、図9および図10におけるブランドの記載は省略されているため、図9,10においてブランドの記載が同じ(例えば「A社製A」と「B社製A」)であっても実際は互いに異なるブランドであるとする。 Figures 9 and 10 are diagrams explaining an example of brand characteristic information, plotting the price range and performance of brands having a specific size (205/55R16). For example, "A made by company A" and "B made by company A" indicate that the manufacturer is company A and that the brands are different brands within that manufacturer. Note that the brand descriptions in Figures 9 and 10 are omitted, so even if the brand descriptions are the same in Figures 9 and 10 (for example, "A made by company A" and "A made by company B"), they are actually different brands.

判定されたブランドにおける基準価格帯および基準性能が取得されると、提案ブランド決定部55は、判定されたサイズを有する所定の会社のブランドから、価格帯および性能が、判定されたブランドと所定の関係を有する1または複数のブランドを選択する(ステップS202)。より具体的には、提案ブランド決定部55は、判定されたサイズを有する特定の会社のブランドから、基準価格帯より大きい価格帯の値を有し、かつ、基準性能より性能が優れているブランドを選択する。ここで、提案ブランド決定部55は、ブレーキ性能、転がり性能、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一つの項目が、基準ブランドより優れているブランドを、基準性能より性能が優れているブランドとして選択してよい。ある項目が基準ブランドより優れているとは、その項目が、値が大きいほど性能が高いことを示すものである場合には、その項目の値が基準値より大きいことであり、値が小さいほど性能が高いことを示すもの(例えば転がり抵抗、耐摩耗性、静粛性)である場合には、その項目の値が基準値より小さいことである。 When the standard price range and standard performance of the determined brand are acquired, the proposed brand determination unit 55 selects one or more brands whose price range and performance have a predetermined relationship with the determined brand from the brands of a specific company having the determined size (step S202). More specifically, the proposed brand determination unit 55 selects a brand that has a price range value greater than the standard price range and has better performance than the standard performance from the brands of a specific company having the determined size. Here, the proposed brand determination unit 55 may select a brand that is superior to the standard brand in at least one of braking performance, rolling performance, comfort, wear resistance, quietness, and snow and ice performance as a brand that is superior to the standard performance. When a certain item is one in which the larger the value of the item, the higher the performance, the greater the value of the item, and when a smaller value of the item, the smaller the performance, the greater the value of the item, the smaller the value of the item, the smaller the value of the item,

また、提案ブランド決定部55は、基準価格帯の値に応じてブランドを選択する条件を切り替えてもよい。例えば、基準価格帯が閾値より小さい(価格が比較的安い)場合には、価格帯が基準価格帯より小さい特定の会社のブランドを選択し、基準価格帯の値が閾値より大きい(価格が比較的高い)場合には、性能の値が基準性能より大きいブランドを選択してもよい。また、提案ブランド決定部55は、基準性能の快適性の値を中心とする一定の範囲内にある快適性の値を有する特定の会社のブランドのうちからブランドを選択してもよい。 The proposed brand determination unit 55 may also switch the conditions for selecting a brand depending on the value of the reference price range. For example, if the reference price range is smaller than a threshold (the price is relatively low), a brand of a specific company whose price range is smaller than the reference price range may be selected, and if the value of the reference price range is larger than the threshold (the price is relatively high), a brand whose performance value is larger than the reference performance may be selected. The proposed brand determination unit 55 may also select a brand from among brands of a specific company whose comfort value is within a certain range centered on the comfort value of the reference performance.

ブランドが選択されると、提案ブランド決定部55は、選択されたブランドをソートし、ソートされたブランドのリストを記憶部12に格納する(ステップS203)。例えば、提案ブランド決定部55は、基準価格帯および基準性能の値に対する、価格帯および性能の値の距離が小さいものが上位となるようにソートしてよい。 Once the brands are selected, the proposed brand determination unit 55 sorts the selected brands and stores the sorted list of brands in the memory unit 12 (step S203). For example, the proposed brand determination unit 55 may sort the brands so that those with a small distance between the reference price range and reference performance values and the price range and performance values are ranked higher.

次に、提案情報を出力するためのステップS107およびステップS108の処理についてさらに詳細に説明する。図11は提案情報出力部56の処理の一例を示すフロー図である。 Next, the processing of steps S107 and S108 for outputting the proposed information will be described in more detail. FIG. 11 is a flow diagram showing an example of the processing of the proposed information output unit 56.

はじめに、提案情報出力部56は、提案ブランド決定部55によって記憶部12に記憶されたブランドのリストから1番目のブランドを取得する(ステップS301)。そして、提案情報出力部56は、撮影されたタイヤ32の判定されたブランドに対する、取得されたブランドの価格帯および性能の差異を算出する(ステップS302)。より具体的には、価格帯、転がり抵抗の値、ブレーキ性能の値、快適性を示す値のそれぞれについて、撮影されたタイヤ32から判定された値と、リストから取得されたブランドにおける値との差を算出する。また提案情報出力部56は算出された各項目の差異をブランドと関連付けて記憶部12に格納する。なお提案情報出力部56は撮影されたタイヤ32から判定された値に対してリストから取得されたブランドにおける値が大きいまたは小さいか否かのみを算出してもよい。 First, the proposed information output unit 56 acquires the first brand from the list of brands stored in the storage unit 12 by the proposed brand determination unit 55 (step S301). Then, the proposed information output unit 56 calculates the difference in price range and performance of the acquired brand with respect to the determined brand of the photographed tire 32 (step S302). More specifically, for each of the price range, rolling resistance value, braking performance value, and comfort value, the difference between the value determined from the photographed tire 32 and the value for the brand acquired from the list is calculated. The proposed information output unit 56 also associates the calculated difference in each item with the brand and stores it in the storage unit 12. Note that the proposed information output unit 56 may only calculate whether the value for the brand acquired from the list is larger or smaller than the value determined from the photographed tire 32.

そして、リストからすべてのブランドが取得されていない場合には(ステップS303のN)、提案情報出力部56はリストから次のブランドを取得し(ステップS304)、ステップS302以降の処理を繰り返す。 If all brands have not been obtained from the list (N in step S303), the proposal information output unit 56 obtains the next brand from the list (step S304) and repeats the processing from step S302 onwards.

一方、リストからすべてのブランドが取得された場合には(ステップS303のY)、提案情報出力部56は、各ブランドにおいて算出された差異に基づいて、その差異に応じた提案情報を生成する(ステップS305)。例えば、提案情報出力部56は、ブランドのそれぞれについて、撮影されたタイヤ32の判定されたブランドに対する価格帯の差が価格閾値以下の場合には、「コストパフォーマンスで選ぶならこのブランド」という提案文とそのブランドを説明する情報(説明情報)を含む提案情報を作成する。同様に、提案情報出力部56は、転がり抵抗の値の差が抵抗閾値以上の場合には、「低燃費ならこのブランド」という提案文と説明情報を含む提案情報を作成し、快適性の値の差が性能閾値より大きい場合には「走り重視ならこのブランド」という提案文と説明情報とを含む提案情報を作成してよい。また提案文の代わりに、説明文に各ブランドの価格帯および性能を記載し、よりメリットのある価格帯および性能の項目を強調する画像を生成してもよい。また提案情報に各ブランドのタイヤの販売場所や在庫状況が含まれてもよい。提案情報出力部56は、提案情報として画像の情報を生成してもよいし、提案情報として音声情報を生成してもよいし、提案情報としてメッセージのテキストの文面を生成してもよい。 On the other hand, when all brands have been acquired from the list (Y in step S303), the proposed information output unit 56 generates proposed information according to the difference calculated for each brand based on the difference (step S305). For example, when the difference in the price range of the photographed tire 32 with respect to the determined brand is equal to or less than the price threshold, the proposed information output unit 56 creates proposed information including a proposal statement such as "If you want to choose based on cost performance, choose this brand" and information explaining the brand (explanation information). Similarly, when the difference in the rolling resistance value is equal to or greater than the resistance threshold, the proposed information output unit 56 may create proposed information including a proposal statement such as "If you want low fuel consumption, choose this brand" and explanation information, and when the difference in the comfort value is greater than the performance threshold, the proposed information may create proposed information including a proposal statement such as "If you want to prioritize driving, choose this brand" and explanation information. Also, instead of the proposed statement, the explanation may include the price range and performance of each brand, and an image may be generated that highlights the more advantageous price range and performance items. The proposed information may also include the sales location and inventory status of tires of each brand. The suggested information output unit 56 may generate image information as suggested information, may generate audio information as suggested information, or may generate the text of a message as suggested information.

提案情報が生成されると、提案情報出力部56は、生成された提案情報を通知装置21へ送信し、通知装置21に提案情報を出力させる(ステップS306)。通知装置21は提案情報を受信し、その提案情報が示す画像や音声をユーザへ向けて出力する。 When the proposed information is generated, the proposed information output unit 56 transmits the generated proposed information to the notification device 21 and causes the notification device 21 to output the proposed information (step S306). The notification device 21 receives the proposed information and outputs the image and sound indicated by the proposed information to the user.

本実施形態では、撮影装置22a,22bの画像によりタイヤ32の交換の必要性が判定され交換の提案がされる。これにより、ユーザがより適切なタイミングで交換の必要性を認識することが可能になる。また、撮影されるタイヤ32のブランドの特性の違いに応じて提案されるタイヤのブランドおよび提案情報が生成されることにより、よりユーザの志向にそった提案が可能になる。これらから、本実施形態により適切なタイヤ32の交換を支援することができる。またこの情報処理システムの導入により、システムの運営側がユーザによるタイヤ32の買い替えを促進し、利益を得ることも可能になる。 In this embodiment, the need for tire 32 replacement is determined based on images from the photographing devices 22a, 22b, and a replacement suggestion is made. This allows the user to recognize the need for replacement at a more appropriate time. In addition, the suggested tire brand and suggested information are generated according to the differences in the characteristics of the brand of tire 32 photographed, making it possible to make suggestions that are more in line with the user's preferences. As a result, this embodiment can support appropriate tire 32 replacement. Furthermore, the introduction of this information processing system allows the system operator to encourage users to replace their tires 32 and earn profits.

これまでの説明では、交換判定部52はトレッド画像40に基づいてタイヤ32の交換の必要性を判定していたが、他の手法で交換の必要性を判定してもよい。図12は、交換判定部52の処理の変形例を示す図である。 In the above explanation, the replacement determination unit 52 determines the necessity of replacing the tire 32 based on the tread image 40, but the necessity of replacement may be determined by other methods. FIG. 12 shows a modified example of the processing of the replacement determination unit 52.

図12に示される処理では、交換判定部52は、取得されたサイドウォール画像34から認識された製造時期を取得する(ステップS501)。より具体的には、交換判定部52は、サイドウォール画像34に含まれる製造時期記載36cを公知の文字認識技術により認識することによりタイヤ32の製造時期を取得してよい。 In the process shown in FIG. 12, the replacement determination unit 52 obtains the recognized manufacturing date from the acquired sidewall image 34 (step S501). More specifically, the replacement determination unit 52 may obtain the manufacturing date of the tire 32 by recognizing the manufacturing date description 36c included in the sidewall image 34 using a known character recognition technique.

また、交換判定部52は、種類判定部53により判定されたブランドに応じた交換判定閾値を取得する(ステップS502)。より具体的には、記憶部12には、予め、複数のブランドのそれぞれに関連付けて交換判定閾値が格納されており、交換判定部52は、判定されたブランドに関連付けられた交換判定閾値を取得する。 The exchange determination unit 52 also acquires an exchange determination threshold corresponding to the brand determined by the type determination unit 53 (step S502). More specifically, the storage unit 12 stores exchange determination thresholds in advance in association with each of a plurality of brands, and the exchange determination unit 52 acquires an exchange determination threshold associated with the determined brand.

そして、交換判定部52は、製造時期からの経過期間が交換判定閾値より大きい(または交換判定閾値以上である)場合には(ステップS504のY)、タイヤ32を交換する必要性ありと判定する(ステップS504)。一方、製造時期からの経過期間が交換判定閾値以下である(または交換判定閾値より小さい)場合には(ステップS504のN)、タイヤ32を交換する必要性なしと判定する(ステップS505)。図12に示される処理は、例えばスタッドレスタイヤや一部のスポーティーなタイヤなどの経年劣化に考慮してタイヤ32の交換の必要性を判定するものである。経年劣化のしやすさはブランド等により異なるため、ブランドごとに判定基準を異ならせることでより適切に交換の必要性を判定することができる。もちろん、交換判定部52は、製造時期からの経過期間と、トレッド画像40との両方に基づいて交換の必要性を判定してもよい。 Then, if the time elapsed since the manufacturing date is greater than (or equal to or greater than) the replacement judgment threshold (Y in step S504), the replacement judgment unit 52 judges that the tire 32 needs to be replaced (step S504). On the other hand, if the time elapsed since the manufacturing date is less than (or less than) the replacement judgment threshold (N in step S504), the replacement judgment unit 52 judges that the tire 32 does not need to be replaced (step S505). The process shown in FIG. 12 judges the need to replace the tire 32 taking into account the deterioration over time of, for example, studless tires and some sporty tires. Since the ease of deterioration over time differs depending on the brand, etc., the need for replacement can be more appropriately determined by setting different judgment criteria for each brand. Of course, the replacement judgment unit 52 may judge the need for replacement based on both the time elapsed since the manufacturing date and the tread image 40.

これまでに本発明の実施形態について説明したが、発明はその記載された範囲のみに限定されるものではない。本実施形態における具体的な数値や文字列、並びに、図面中の具体的な数値や文字列は例示であり、これらの数値や文字列には限定されない。 Although the embodiments of the present invention have been described above, the invention is not limited to the scope described. The specific numerical values and character strings in the present embodiments, as well as the specific numerical values and character strings in the drawings, are merely examples, and the invention is not limited to these numerical values and character strings.

1 情報処理装置、11 プロセッサ、12 記憶部、13 通信部、14 入出力部、21 通知装置、22a,22b 撮影装置、30 車両、32 タイヤ、34 サイドウォール画像、36a ブランド記載、36b メーカー記載、36c 製造時期記載、38 サイズ記載、40 トレッド画像、42 スリップサイン、44 主溝、46 着目領域、51 画像取得部、52 交換判定部、53 種類判定部、55 提案ブランド決定部、56 提案情報出力部。 1 Information processing device, 11 Processor, 12 Storage unit, 13 Communication unit, 14 Input/output unit, 21 Notification device, 22a, 22b Photography device, 30 Vehicle, 32 Tire, 34 Sidewall image, 36a Brand description, 36b Manufacturer description, 36c Manufacturing date description, 38 Size description, 40 Tread image, 42 Slip sign, 44 Main groove, 46 Focus area, 51 Image acquisition unit, 52 Replacement determination unit, 53 Type determination unit, 55 Proposed brand determination unit, 56 Proposed information output unit.

Claims (12)

使用されている製品の画像を取得する画像取得手段と、
前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段と、
前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段と、
前記種類判定手段により判定された種類の特性を示す情報を取得し前記判定された種類の特性を示すデータと、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段と、
前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段と、
を含む交換支援システム。
Image capture means for capturing an image of the product in use;
a replacement determination means for determining the necessity of replacing the product based on the acquired image;
a type determination means for determining which of a plurality of types the product is based on the acquired image;
a determination means for acquiring information indicating characteristics of the type determined by the type determination means , and determining a type to be a candidate for replacement from among the multiple types based on data indicating the characteristics of the determined type and data indicating the characteristics of each of the multiple types;
a notification means for notifying a notification destination of the determined type based on the determined necessity of replacement;
Exchange support system including.
請求項1に記載の交換支援システムにおいて、
前記種類は、前記製品のブランド、型番、およびメーカーのうち少なくとも1つである、
交換支援システム。
In the exchange assistance system according to claim 1 ,
The type is at least one of the brand, model, and manufacturer of the product;
Exchange support system.
請求項1または2に記載の交換支援システムにおいて、
前記交換判定手段は、製品の画像と当該製品の消耗の程度を示す教師データとを用いて学習された判定器を含む、
交換支援システム。
In the exchange assistance system according to claim 1 or 2,
The replacement determination means includes a determiner that is trained using an image of the product and training data indicating a degree of consumption of the product.
Exchange support system.
請求項1から3のいずれかに記載の交換支援システムにおいて、
前記製品はタイヤである、
交換支援システム。
In the exchange assistance system according to any one of claims 1 to 3,
The product is a tire.
Exchange support system.
請求項4に記載の交換支援システムにおいて、
前記画像取得手段は、前記使用されている製品のトレッドおよびサイドウォールの画像を取得する、
交換支援システム。
In the exchange assistance system according to claim 4,
the image capture means captures images of the tread and sidewall of the product in use;
Exchange support system.
請求項5に記載の交換支援システムにおいて、
前記取得されたサイドウォールの画像に含まれる製造時期に基づいて、前記製品の交換の必要性を判定する、
交換支援システム。
In the exchange assistance system according to claim 5,
determining whether or not the product needs to be replaced based on a manufacturing date included in the acquired image of the sidewall;
Exchange support system.
請求項4から6のいずれかに記載の交換支援システムにおいて、
前記種類判定手段は、前記取得された画像に基づいて、前記製品のサイズと前記種類とを判定し、
前記決定手段は、前記判定されたサイズ、前記判定された種類、複数の種類のそれぞれに存在するサイズ、および、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する、
交換支援システム。
In the exchange assistance system according to any one of claims 4 to 6,
The type determination means determines the size and the type of the product based on the acquired image,
the determining means determines a type to be a candidate for replacement from the plurality of types based on the determined size, the determined type, sizes present in each of the plurality of types, and data indicating characteristics of each of the plurality of types;
Exchange support system.
請求項4から7のいずれかに記載の交換支援システムにおいて、
前記特性は、価格、ブレーキ性能、転がり抵抗、快適性、耐摩耗性、静粛性、氷雪性能のうち少なくとも一部を含む、
交換支援システム。
In the exchange assistance system according to any one of claims 4 to 7,
The characteristics include at least some of the following: price, braking performance, rolling resistance, comfort, wear resistance, quietness, and snow and ice performance;
Exchange support system.
請求項1から8のいずれかに記載の交換支援システムにおいて、
前記通知手段は、前記判定された種類の特性と、前記決定された種類の特性との違いに基づいて、前記決定された種類の提案情報を作成し、前記通知先に通知する、
交換支援システム。
In the exchange assistance system according to any one of claims 1 to 8,
the notification means creates proposed information of the determined type based on a difference between the characteristics of the determined type and the characteristics of the determined type, and notifies the notification destination of the proposed information.
Exchange support system.
請求項4から9のいずれかに記載の交換支援システムにおいて、
前記画像取得手段は、前記製品を装着する車両が停車する場所において前記製品を撮影する撮像手段から前記製品の画像を取得する、
交換支援システム。
In the exchange assistance system according to any one of claims 4 to 9,
The image acquisition means acquires an image of the product from an imaging means that captures an image of the product at a location where a vehicle equipped with the product is stopped.
Exchange support system.
コンピュータが、
使用されている製品の画像を取得するステップと、
前記取得された画像に基づいて、前記製品の交換の必要性を判定するステップと、
前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定するステップと、
前記判定された種類の特性を示す情報を取得し前記判定された種類の特性を示すデータと、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定するステップと、
前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知するステップと、
を含む交換支援方法。
The computer
acquiring an image of the product in use;
determining a need for replacement of the product based on the captured images;
determining which of a plurality of types the product is based on the acquired image;
acquiring information indicating characteristics of the determined type, and determining a type that is a candidate for replacement from the plurality of types based on data indicating the characteristics of the determined type and data indicating the characteristics of each of the plurality of types;
notifying a notification destination of the determined type based on the determined necessity of replacement;
Exchange support methods, including:
使用されている製品の画像を取得する画像取得手段、
前記取得された画像に基づいて、前記製品の交換の必要性を判定する交換判定手段、
前記取得された画像に基づいて、前記製品が複数の種類のうちいずれであるかを判定する種類判定手段、
前記種類判定手段により判定された種類の特性を示す情報を取得し前記判定された種類の特性を示すデータと、複数の種類のそれぞれの特性を示すデータに基づいて、前記複数の種類から交換の候補となる種類を決定する決定手段、および、
前記判定された交換の必要性に基づいて、前記決定された種類を通知先へ通知する通知手段、
としてコンピュータを機能させるためのプログラム。
image capture means for capturing an image of the product in use;
a replacement determination means for determining the necessity of replacing the product based on the acquired image;
a type determination means for determining which of a plurality of types the product is based on the acquired image;
a determination means for acquiring information indicating characteristics of the type determined by the type determination means , and determining a type to be a candidate for replacement from among the multiple types based on data indicating the characteristics of the determined type and data indicating the characteristics of each of the multiple types; and
a notification means for notifying a notification destination of the determined type based on the determined necessity of replacement;
A program that makes a computer function as a
JP2020024483A 2020-02-17 2020-02-17 Exchange support system, exchange support method and program Active JP7495596B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020024483A JP7495596B2 (en) 2020-02-17 2020-02-17 Exchange support system, exchange support method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020024483A JP7495596B2 (en) 2020-02-17 2020-02-17 Exchange support system, exchange support method and program

Publications (2)

Publication Number Publication Date
JP2021128696A JP2021128696A (en) 2021-09-02
JP7495596B2 true JP7495596B2 (en) 2024-06-05

Family

ID=77488740

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020024483A Active JP7495596B2 (en) 2020-02-17 2020-02-17 Exchange support system, exchange support method and program

Country Status (1)

Country Link
JP (1) JP7495596B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023053569A (en) * 2021-10-01 2023-04-13 住友ゴム工業株式会社 Tire management system, tire management method and program
JP7427307B1 (en) 2023-11-24 2024-02-05 あやたかシステム開発株式会社 Terminal, system, method and program for recognizing tire serial numbers

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003178219A (en) 2001-12-12 2003-06-27 Yokohama Rubber Co Ltd:The Tire recommending system and tire recommending server
JP2003187125A (en) 2001-12-20 2003-07-04 Ntt Comware Corp Vehicle part information providing device, vehicle part information providing method, program and storage medium
JP2018020752A (en) 2016-07-22 2018-02-08 横浜ゴム株式会社 Maintenance timing presentation device, tire sales management system, maintenance timing presentation method, tire sales management method, maintenance timing presentation program and tire sales management program
JP2018040635A (en) 2016-09-06 2018-03-15 西日本高速道路エンジニアリング四国株式会社 Method of identifying winter tires
JP2019035626A (en) 2017-08-10 2019-03-07 株式会社ブリヂストン Recognition method of tire image and recognition device of tire image
JP2019184405A (en) 2018-04-09 2019-10-24 株式会社豊田自動織機 Tire management system and tire management method

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10320527A (en) * 1997-05-14 1998-12-04 Mitsubishi Heavy Ind Ltd Type discrimination device and vehicle driver leading and guiding device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003178219A (en) 2001-12-12 2003-06-27 Yokohama Rubber Co Ltd:The Tire recommending system and tire recommending server
JP2003187125A (en) 2001-12-20 2003-07-04 Ntt Comware Corp Vehicle part information providing device, vehicle part information providing method, program and storage medium
JP2018020752A (en) 2016-07-22 2018-02-08 横浜ゴム株式会社 Maintenance timing presentation device, tire sales management system, maintenance timing presentation method, tire sales management method, maintenance timing presentation program and tire sales management program
JP2018040635A (en) 2016-09-06 2018-03-15 西日本高速道路エンジニアリング四国株式会社 Method of identifying winter tires
JP2019035626A (en) 2017-08-10 2019-03-07 株式会社ブリヂストン Recognition method of tire image and recognition device of tire image
JP2019184405A (en) 2018-04-09 2019-10-24 株式会社豊田自動織機 Tire management system and tire management method

Also Published As

Publication number Publication date
JP2021128696A (en) 2021-09-02

Similar Documents

Publication Publication Date Title
US20230259977A1 (en) Systems and Methods for Switching Modes of Providing Content on a Charging Station Display
JP7495596B2 (en) Exchange support system, exchange support method and program
JP5742873B2 (en) Object identification device
US11494638B2 (en) Learning support device and learning support method
JP6333975B2 (en) Vehicle periphery monitoring device
US11526699B2 (en) Detecting device, detecting method, generating method, computer program, and storage medium
US11971267B2 (en) User journey carbon footprint reduction
EP3774405B1 (en) System for tire performance alerts and assisted remediation
JP2017207840A (en) Image processing apparatus, image processing system, image processing method, program, and recording medium
JP2016522519A (en) Gesture based advertising profile for users
JP7428870B2 (en) Tire wear degree estimation device, tire wear degree learning device, tire wear degree estimation method, learned model generation method and program
JP2023055602A (en) Tire state estimation method
JP7492120B2 (en) Consumption state learning device, trained model generation method and program
US20230130875A1 (en) System and method for providing user feedback regarding driving behavior and the effects on gas consumption and vehicle wear
JP7469640B2 (en) Tire abnormality determination device, tire abnormality determination method and program
JP2021181286A (en) Tire abnormality detection device, tire abnormality detection method and program
JP2019040244A (en) Driving support device
JP7335503B2 (en) Tire pressure drop estimation device, tire pressure drop learning device, tire pressure drop estimation method, trained model generation method and program
JP2020042489A (en) License plate identifying device, license plate identifying method and program
JP7393458B2 (en) EV vehicle operating status monitoring system, EV vehicle operating status monitoring program
WO2024127852A1 (en) Tire external-scratch monitoring device, tire external-scratch monitoring method, and program
EP4296089A1 (en) Tire tread wear determination system and method using deep artificial neural network
CN112417922A (en) Target identification method and device
KR20230168414A (en) Tire life prediction method and system using tire life prediction model
KR20230168415A (en) Tire store linkage method and system based on tire life prediction model

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20231108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240423

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240506

R150 Certificate of patent or registration of utility model

Ref document number: 7495596

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150