JP2021104740A - Tire air pressure reduction degree determination device, tire air pressure reduction degree determination method and program - Google Patents

Tire air pressure reduction degree determination device, tire air pressure reduction degree determination method and program Download PDF

Info

Publication number
JP2021104740A
JP2021104740A JP2019236775A JP2019236775A JP2021104740A JP 2021104740 A JP2021104740 A JP 2021104740A JP 2019236775 A JP2019236775 A JP 2019236775A JP 2019236775 A JP2019236775 A JP 2019236775A JP 2021104740 A JP2021104740 A JP 2021104740A
Authority
JP
Japan
Prior art keywords
tire
image
degree
deformation
amount
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019236775A
Other languages
Japanese (ja)
Other versions
JP7473779B2 (en
Inventor
拡太郎 多田
Kakutaro Tada
拡太郎 多田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokohama Rubber Co Ltd
Original Assignee
Yokohama Rubber Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokohama Rubber Co Ltd filed Critical Yokohama Rubber Co Ltd
Priority to JP2019236775A priority Critical patent/JP7473779B2/en
Publication of JP2021104740A publication Critical patent/JP2021104740A/en
Application granted granted Critical
Publication of JP7473779B2 publication Critical patent/JP7473779B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measuring Fluid Pressure (AREA)
  • Image Processing (AREA)

Abstract

To provide a tire air pressure reduction degree determination device, a tire air pressure reduction degree determination method and a program which can easily determine a reduction degree of a tire air pressure.SOLUTION: A photographic image acquisition part 64 acquires a photographic image that is a depth image or a three-dimensional image showing a side face of a tire provided on a vehicle. A deformation amount specification part 68 specifies a deformation amount of the tire on the basis of the photographic image. An air pressure reduction degree determination part 70 determines a determination degree of an air pressure of the tire on the basis of a specified deformation amount.SELECTED DRAWING: Figure 8

Description

本発明は、タイヤ空気圧低下度判定装置、タイヤ空気圧低下度判定方法及びプログラムに関する。 The present invention relates to a tire pressure drop determination device, a tire pressure drop determination method and a program.

特許文献1には、タイヤから得られる車輪速度に基づいて、4輪タイヤのうち、減圧しているタイヤを特定することができるタイヤ空気圧低下検出方法が記載されている。 Patent Document 1 describes a tire pressure drop detection method capable of identifying a tire whose pressure is reduced among four-wheel tires based on the wheel speed obtained from the tire.

特許文献2には、車輪の回転速度から、4輪が同時に減圧していることを検出するタイヤ空気圧低下警報方法が記載されている。 Patent Document 2 describes a tire pressure drop warning method for detecting that four wheels are simultaneously depressurized from the rotation speed of the wheels.

特開2004−161127号公報Japanese Unexamined Patent Publication No. 2004-161127 特開2006−27298号公報Japanese Unexamined Patent Publication No. 2006-27298

特許文献1に記載の技術では、タイヤの減圧を検出するために、タイヤの空気圧の低下を判定するための車輪速センサや角速度センサなどといったセンサをわざわざ設ける必要がある。特許文献2に記載の技術においても同様に、タイヤの減圧を検出するために、車輪の回転速度を検出する手段をわざわざ設ける必要がある。 In the technique described in Patent Document 1, in order to detect the decompression of the tire, it is necessary to bother to provide a sensor such as a wheel speed sensor or an angular velocity sensor for determining a decrease in the tire pressure. Similarly, in the technique described in Patent Document 2, in order to detect the decompression of the tire, it is necessary to bother to provide a means for detecting the rotational speed of the wheel.

本発明は上記実情に鑑みてなされたものであって、その目的の一つは、タイヤの空気圧の低下度を容易に判定できるタイヤ空気圧低下度判定装置、タイヤ空気圧低下度判定方法及びプログラムを提供することにある。 The present invention has been made in view of the above circumstances, and one of the objects thereof is to provide a tire pressure reduction degree determination device, a tire air pressure reduction degree determination method, and a program capable of easily determining the tire pressure reduction degree. To do.

上記課題を解決するために、本発明に係るタイヤ空気圧低下度判定装置は、車両が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得する撮影画像取得手段と、前記撮影画像に基づいて、前記タイヤの変形量を特定する変形量特定手段と、前記変形量に基づいて、前記タイヤの空気圧の低下度を判定する判定手段と、を含む。 In order to solve the above problems, the tire pressure drop determination device according to the present invention includes a photographed image acquisition means for acquiring a photographed image which is a depth image or a three-dimensional image showing a side surface of a tire provided in a vehicle, and the photographed image. Includes a deformation amount specifying means for specifying the deformation amount of the tire based on the above, and a determination means for determining the degree of decrease in the air pressure of the tire based on the deformation amount.

本発明の一態様では、前記車両が撮影範囲に存在することを検出する検出手段、をさらに含み、前記撮影画像取得手段は、前記車両が前記撮影範囲に存在することの検出に応じて撮影される前記撮影画像を取得する。 One aspect of the present invention further includes a detecting means for detecting that the vehicle is in the photographing range, and the captured image acquisition means is photographed in response to the detection that the vehicle is in the photographing range. The photographed image is acquired.

また、本発明の一態様では、前記判定手段は、1つの前記タイヤについて連続撮影される複数の前記撮影画像に基づいて、当該タイヤの空気圧の低下度を判定する。 Further, in one aspect of the present invention, the determination means determines the degree of decrease in the air pressure of the tire based on a plurality of the photographed images continuously photographed for one tire.

また、本発明の一態様では、前記判定手段は、1つの前記車両に設けられた複数の前記タイヤのそれぞれについて特定される前記変形量の比較結果に基づいて、当該複数の前記タイヤの空気圧の低下度を判定する。 Further, in one aspect of the present invention, the determination means determines the air pressure of the plurality of tires based on the comparison result of the amount of deformation specified for each of the plurality of tires provided in the vehicle. Determine the degree of decline.

あるいは、前記撮影画像のサイズを変更した画像の一部を切り出すことで、ホイールが表れる領域の大きさが所与の大きさであるターゲット画像を生成するターゲット画像生成手段、をさらに含み、前記変形量特定手段は、前記ターゲット画像に基づいて、前記タイヤの変形量を特定する。 Alternatively, the modification further includes a target image generation means for generating a target image in which the size of the area where the wheel appears is a given size by cutting out a part of the image in which the size of the captured image is changed. The amount specifying means specifies the amount of deformation of the tire based on the target image.

あるいは、前記撮影画像の一部を切り出した画像のサイズを変更することで、ホイールが表れる領域の大きさが所与の大きさであるターゲット画像を生成するターゲット画像生成手段、をさらに含み、前記変形量特定手段は、前記ターゲット画像に基づいて、前記タイヤの変形量を特定する。 Alternatively, the target image generation means for generating a target image in which the size of the area where the wheel appears is a given size by changing the size of the image obtained by cutting out a part of the captured image is further included. The deformation amount specifying means specifies the deformation amount of the tire based on the target image.

上記2つの態様では、前記ターゲット画像生成手段は、1つの前記車両が備える複数のタイヤのそれぞれについての、当該タイヤの側面が写る前記撮影画像に基づいて、当該タイヤの前記ターゲット画像を生成し、前記判定手段は、前記複数のタイヤのそれぞれについて当該タイヤの前記ターゲット画像に基づいて特定される前記変形量の比較結果に基づいて、当該複数の前記タイヤの空気圧の低下度を判定してもよい。 In the above two aspects, the target image generation means generates the target image of the tire based on the photographed image showing the side surface of the tire for each of the plurality of tires included in the vehicle. The determination means may determine the degree of decrease in air pressure of the plurality of tires based on the comparison result of the amount of deformation specified based on the target image of the tire for each of the plurality of tires. ..

また、本発明の一態様では、前記変形量特定手段は、前記タイヤの高さ、前記タイヤの側面の湾曲量、又は、前記撮影画像が撮影された位置から前記タイヤの表面までの距離の分布のうちの少なくとも1つを示す前記変形量を特定する。 Further, in one aspect of the present invention, the deformation amount specifying means is the distribution of the height of the tire, the amount of curvature of the side surface of the tire, or the distance from the position where the photographed image is taken to the surface of the tire. The amount of deformation indicating at least one of the above is specified.

また、本発明に係るタイヤ空気圧低下度判定方法は、車両が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得するステップと、前記撮影画像に基づいて、前記タイヤの変形量を特定するステップと、前記変形量に基づいて、前記タイヤの空気圧の低下度を判定するステップと、を含む。 Further, the method for determining the degree of decrease in tire pressure according to the present invention includes a step of acquiring a captured image which is a depth image or a three-dimensional image showing the side surface of the tire provided in the vehicle, and the amount of deformation of the tire based on the captured image. A step of determining the degree of decrease in the air pressure of the tire based on the amount of deformation is included.

また、本発明に係るプログラムは、車両が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得する手順、前記撮影画像に基づいて、前記タイヤの変形量を特定する手順、前記変形量に基づいて、前記タイヤの空気圧の低下度を判定する手順、をコンピュータに実行させる。 Further, the program according to the present invention includes a procedure for acquiring a captured image which is a depth image or a three-dimensional image showing a side surface of a tire provided in a vehicle, a procedure for specifying a deformation amount of the tire based on the captured image, and the above-mentioned. A computer is made to execute a procedure of determining the degree of decrease in the air pressure of the tire based on the amount of deformation.

本発明の一実施形態に係るタイヤ空気圧低下度判定装置の構成の一例を示す図である。It is a figure which shows an example of the structure of the tire pressure drop degree determination device which concerns on one Embodiment of this invention. 車両の上面の一例を模式的に示す図である。It is a figure which shows an example of the upper surface of a vehicle schematically. 高速サンプリング期間、前輪撮影期間、後輪撮影期間の関係の一例を模式的に示す図である。It is a figure which shows an example of the relationship of a high-speed sampling period, a front wheel photography period, and a rear wheel photography period schematically. 高速サンプリング画像の一例を示す図である。It is a figure which shows an example of a high-speed sampling image. ターゲット画像の一例を示す図である。It is a figure which shows an example of a target image. ターゲット画像の一例を示す図である。It is a figure which shows an example of a target image. ターゲット画像の一例を示す図である。It is a figure which shows an example of a target image. 本発明の一実施形態に係るタイヤ空気圧低下度判定装置の機能の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of the function of the tire pressure drop degree determination device which concerns on one Embodiment of this invention. 本発明の一実施形態に係るタイヤ空気圧低下度判定装置で行われる処理の流れの一例を示すフロー図である。It is a flow chart which shows an example of the flow of the process performed by the tire pressure drop degree determination apparatus which concerns on one Embodiment of this invention.

以下、本発明の一実施形態について、図面を参照しながら説明する。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings.

図1は、本発明の一実施形態に係るタイヤ空気圧低下度判定装置10の構成の一例を示す図である。本実施形態に係るタイヤ空気圧低下度判定装置10は、パーソナルコンピュータなどのコンピュータである。図1に示すようにタイヤ空気圧低下度判定装置10は、例えば、プロセッサ12、記憶部14、通信部16、表示部18、操作部20、撮影部22を含んでいる。 FIG. 1 is a diagram showing an example of the configuration of a tire pressure drop degree determining device 10 according to an embodiment of the present invention. The tire pressure drop determination device 10 according to the present embodiment is a computer such as a personal computer. As shown in FIG. 1, the tire pressure drop determination device 10 includes, for example, a processor 12, a storage unit 14, a communication unit 16, a display unit 18, an operation unit 20, and a photographing unit 22.

プロセッサ12は、例えばタイヤ空気圧低下度判定装置10にインストールされるプログラムに従って動作するCPU等のプログラム制御デバイスである。 The processor 12 is, for example, a program control device such as a CPU that operates according to a program installed in the tire pressure drop degree determination device 10.

記憶部14は、ROMやRAM等の記憶素子やハードディスクドライブなどである。記憶部14には、プロセッサ12によって実行されるプログラムなどが記憶される。 The storage unit 14 is a storage element such as a ROM or RAM, a hard disk drive, or the like. The storage unit 14 stores a program or the like executed by the processor 12.

通信部16は、例えばネットワークボードなどの通信インタフェースである。 The communication unit 16 is a communication interface such as a network board.

表示部18は、液晶ディスプレイ等の表示デバイスであって、プロセッサ12の指示に従って各種の画像を表示する。 The display unit 18 is a display device such as a liquid crystal display, and displays various images according to the instructions of the processor 12.

操作部20は、キーボードやマウスなどといったユーザインタフェースであって、ユーザの操作入力を受け付けて、その内容を示す信号をプロセッサ12に出力する。 The operation unit 20 is a user interface such as a keyboard or a mouse, receives an operation input of the user, and outputs a signal indicating the contents to the processor 12.

撮影部22は、三次元画像が撮影可能なステレオカメラや、奥行き画像が撮影可能なデプスカメラなどの撮影デバイスであり、撮影によって生成される三次元画像や奥行き画像をプロセッサ12に出力する。本実施形態に係るタイヤ空気圧低下度判定装置10が複数の撮影部22を備えていてもよい。また、撮影部22が、一連の三次元画像を含む三次元動画像や、一連の奥行き画像を含む奥行き動画像を撮影可能なビデオカメラであってもよい。 The shooting unit 22 is a shooting device such as a stereo camera capable of shooting a three-dimensional image or a depth camera capable of shooting a depth image, and outputs the three-dimensional image or the depth image generated by the shooting to the processor 12. The tire pressure drop determination device 10 according to the present embodiment may include a plurality of photographing units 22. Further, the photographing unit 22 may be a video camera capable of photographing a three-dimensional moving image including a series of three-dimensional images and a depth moving image including a series of depth images.

なお、タイヤ空気圧低下度判定装置10は、DVD−ROMやBlu−ray(登録商標)ディスクなどの光ディスクを読み取る光ディスクドライブ、USB(Universal Serial Bus)ポートなどを含んでいてもよい。 The tire pressure drop determination device 10 may include an optical disk drive for reading an optical disk such as a DVD-ROM or a Blu-ray (registered trademark) disc, a USB (Universal Serial Bus) port, or the like.

本実施形態では、撮影部22により撮影される画像に写るタイヤの空気圧の低下度が判定される。 In the present embodiment, the degree of decrease in the tire pressure in the image captured by the photographing unit 22 is determined.

図2は、空気圧の低下度が判定されるタイヤを備えた車両30の上面の一例を模式的に示す図である。車両30は、例えば、高速道路の料金所ゲート32を通過する直前であり、低速で走行中である。本実施形態では例えば、車両30は、時速20キロメートル以下で走行していることが想定されている。 FIG. 2 is a diagram schematically showing an example of the upper surface of a vehicle 30 provided with tires for which the degree of decrease in air pressure is determined. The vehicle 30 is traveling at a low speed, for example, just before passing through the tollhouse gate 32 on the highway. In the present embodiment, for example, it is assumed that the vehicle 30 is traveling at a speed of 20 km / h or less.

また、本実施形態では例えば、図2に示すように、撮影部22(22a及び22b)が、撮影方向が車線の中央に向くようにして、車両30が走行する車線の脇に設けられている。図2の例では、撮影部22a及び22bは、撮影方向が車線に対して垂直な方向となるよう配置されている。 Further, in the present embodiment, for example, as shown in FIG. 2, the photographing unit 22 (22a and 22b) is provided on the side of the lane in which the vehicle 30 travels so that the photographing direction faces the center of the lane. .. In the example of FIG. 2, the photographing units 22a and 22b are arranged so that the photographing direction is perpendicular to the lane.

本実施形態では例えば、撮影部22は、所定のサンプリングレートで画像を撮影する。以下、この状況で撮影される画像を低速サンプリング画像と呼ぶこととする。そして、本実施形態では例えば、低速サンプリング画像に基づいて、車両30が所定の撮影範囲に存在することの検出が行われる。例えば、形状認識技術、色認識技術、パターン認識技術等の画像認識技術を用いた、撮影部22が撮影する低速サンプリング画像からの車両30の像の検出が、車両30が所定の撮影範囲に存在することの検出のトリガに用いられてもよい。 In the present embodiment, for example, the photographing unit 22 photographs an image at a predetermined sampling rate. Hereinafter, the image taken in this situation will be referred to as a low-speed sampling image. Then, in the present embodiment, for example, it is detected that the vehicle 30 exists in a predetermined shooting range based on a low-speed sampled image. For example, the detection of the image of the vehicle 30 from the low-speed sampled image taken by the photographing unit 22 using the image recognition technology such as the shape recognition technology, the color recognition technology, and the pattern recognition technology is such that the vehicle 30 exists in a predetermined shooting range. It may be used to trigger the detection of what to do.

そして、車両30が所定の撮影範囲に存在することの検出に応じて、撮影部22は、低速サンプリング画像のサンプリングレートよりも高いサンプリングレートでの撮影を開始するよう制御される。以下、この状況で撮影される画像を高速サンプリング画像と呼ぶこととする。例えば、低速サンプリング画像に車両30が写っていることが確認された際に、高速サンプリング画像の撮影が開始される。高速サンプリング画像は、所定の時間間隔で撮影されてもよい。 Then, in response to the detection that the vehicle 30 is in the predetermined shooting range, the shooting unit 22 is controlled to start shooting at a sampling rate higher than the sampling rate of the low-speed sampling image. Hereinafter, the image taken in this situation will be referred to as a high-speed sampling image. For example, when it is confirmed that the vehicle 30 is shown in the low-speed sampling image, the high-speed sampling image is started to be taken. High-speed sampling images may be taken at predetermined time intervals.

本実施形態では例えば、撮影部22aによって、車両30の右前輪34の側面及び右後輪36の側面が写る高速サンプリング画像が撮影される。また、撮影部22bによって、車両30の左前輪38の側面及び左後輪40の側面が写る高速サンプリング画像が撮影される。 In the present embodiment, for example, the photographing unit 22a captures a high-speed sampling image in which the side surface of the right front wheel 34 and the side surface of the right rear wheel 36 of the vehicle 30 are captured. Further, the photographing unit 22b captures a high-speed sampling image in which the side surface of the left front wheel 38 and the side surface of the left rear wheel 40 of the vehicle 30 are captured.

そして本実施形態では、高速サンプリング画像に車両30が写っていないことが確認された際に、高速サンプリング画像の撮影は終了される。 Then, in the present embodiment, when it is confirmed that the vehicle 30 is not shown in the high-speed sampling image, the shooting of the high-speed sampling image is terminated.

図3に示すように、以下、このようにして一連の高速サンプリング画像が撮影される期間を高速サンプリング期間tと呼ぶこととする。 As shown in FIG. 3, hereinafter, the period during which a series of high-speed sampling images are captured in this way is referred to as a high-speed sampling period t.

本実施形態では例えば、高速サンプリング期間tには、前輪の側面が写る高速サンプリング画像が撮影される前輪撮影期間t1、及び、後輪の側面が写る高速サンプリング画像が撮影される後輪撮影期間t2が含まれる。 In the present embodiment, for example, in the high-speed sampling period t, the front wheel shooting period t1 in which the high-speed sampling image showing the side surface of the front wheel is captured, and the rear wheel shooting period t2 in which the high-speed sampling image showing the side surface of the rear wheel is captured. Is included.

例えば、撮影部22aによって、前輪撮影期間t1には、右前輪34の側面が写る高速サンプリング画像が撮影される。そして、後輪撮影期間t2には、右後輪36の側面が写る高速サンプリング画像が撮影される。 For example, the photographing unit 22a captures a high-speed sampling image in which the side surface of the right front wheel 34 is captured during the front wheel photographing period t1. Then, during the rear wheel photographing period t2, a high-speed sampling image in which the side surface of the right rear wheel 36 is captured is captured.

また例えば、撮影部22bによって、前輪撮影期間t1には、左前輪38の側面が写る高速サンプリング画像が撮影される。そして、後輪撮影期間t2には、左後輪40の側面が写る高速サンプリング画像が撮影される。 Further, for example, the photographing unit 22b photographs a high-speed sampling image in which the side surface of the left front wheel 38 is captured during the front wheel photographing period t1. Then, during the rear wheel photographing period t2, a high-speed sampling image in which the side surface of the left rear wheel 40 is captured is captured.

本実施形態では例えば、高速サンプリング期間tに連続撮影された一連の高速サンプリング画像のうちから、前輪撮影期間t1に撮影された一連の高速サンプリング画像、及び、後輪撮影期間t2に撮影された一連の高速サンプリング画像が特定される。 In the present embodiment, for example, from a series of high-speed sampling images continuously captured during the high-speed sampling period t, a series of high-speed sampling images captured during the front wheel imaging period t1 and a series captured during the rear wheel imaging period t2. High-speed sampling image is identified.

本実施形態では例えば、形状認識技術、色認識技術、パターン認識技術等の画像認識技術を用いて、高速サンプリング期間tに連続撮影された一連の高速サンプリング画像のうちから、タイヤの側面が写る複数の高速サンプリング画像が特定される。 In the present embodiment, for example, using image recognition technology such as shape recognition technology, color recognition technology, and pattern recognition technology, a plurality of high-speed sampling images in which the side surface of the tire is captured from a series of high-speed sampling images continuously taken during the high-speed sampling period t. High-speed sampling image is identified.

図3の例では、高速サンプリング画像の撮影が開始されるとまずはタイヤの側面が写っていない高速サンプリング画像が連続撮影される。その後、前輪が写る高速サンプリング画像が連続撮影される。そしてその後、前輪も後輪も高速サンプリング画像に写らない高速サンプリング画像が連続撮影される期間を経た後、後輪が写る高速サンプリング画像が連続撮影される。 In the example of FIG. 3, when the shooting of the high-speed sampling image is started, the high-speed sampling image in which the side surface of the tire is not shown is continuously shot. After that, high-speed sampling images showing the front wheels are continuously taken. Then, after a period in which the high-speed sampling image in which neither the front wheels nor the rear wheels are captured in the high-speed sampling image is continuously photographed, the high-speed sampling image in which the rear wheels are captured is continuously captured.

以上のことから、タイヤの側面が写る複数の高速サンプリング画像は、早いタイミングに撮影された一連の高速サンプリング画像と、遅いタイミングに撮影された一連の高速サンプリング画像と、に分類可能である。そして、早いタイミングに撮影された一連の高速サンプリング画像が、前輪撮影期間t1に撮影された高速サンプリング画像として特定される。また、遅いタイミングに撮影された一連の高速サンプリング画像が、後輪撮影期間t2に撮影された高速サンプリング画像として特定される。 From the above, the plurality of high-speed sampling images showing the side surface of the tire can be classified into a series of high-speed sampling images taken at an early timing and a series of high-speed sampling images taken at a late timing. Then, a series of high-speed sampling images taken at an early timing are specified as high-speed sampling images taken during the front wheel shooting period t1. Further, a series of high-speed sampling images taken at a late timing are specified as high-speed sampling images taken during the rear wheel shooting period t2.

以上のようにして、撮影部22aが撮影した一連の高速サンプリング画像から、右前輪34の側面が写る一連の高速サンプリング画像、及び、右後輪36の側面が写る一連の高速サンプリング画像が特定される。また、撮影部22bが撮影した一連の高速サンプリング画像から、左前輪38の側面が写る一連の高速サンプリング画像、及び、左後輪40の側面が写る一連の高速サンプリング画像が特定される。 As described above, from the series of high-speed sampling images taken by the photographing unit 22a, a series of high-speed sampling images showing the side surface of the right front wheel 34 and a series of high-speed sampling images showing the side surface of the right rear wheel 36 are specified. NS. Further, from the series of high-speed sampling images taken by the photographing unit 22b, a series of high-speed sampling images in which the side surface of the left front wheel 38 is captured and a series of high-speed sampling images in which the side surface of the left rear wheel 40 is captured are specified.

なお、高速サンプリング画像に前輪の側面も後輪の側面も写ることが考えられる。この場合は、前輪撮影期間t1と後輪撮影期間t2とは一部が重複することとなる。 It is conceivable that the side surface of the front wheel and the side surface of the rear wheel are captured in the high-speed sampling image. In this case, the front wheel shooting period t1 and the rear wheel shooting period t2 partially overlap.

図4は、撮影部22bによって撮影される、左前輪38が写る高速サンプリング画像の一例を示す図である。そして、本実施形態では例えば、図4に示す高速サンプリング画像に基づいて、図5に例示するターゲット画像が生成される。 FIG. 4 is a diagram showing an example of a high-speed sampling image in which the left front wheel 38 is captured, which is captured by the photographing unit 22b. Then, in the present embodiment, for example, the target image illustrated in FIG. 5 is generated based on the high-speed sampling image shown in FIG.

ここでは例えば、例えば形状認識技術、色認識技術、パターン認識技術等の画像認識技術を用いて高速サンプリング画像からタイヤの側面が写っている四角形の領域であるターゲット領域42を切り出すことにより、ターゲット画像が生成されてもよい。 Here, for example, by using an image recognition technique such as a shape recognition technique, a color recognition technique, or a pattern recognition technique, the target area 42, which is a quadrangular area showing the side surface of the tire, is cut out from the high-speed sampled image to obtain the target image. May be generated.

ここで、高速サンプリング画像からターゲット領域42を切り出すことにより、部分画像が生成されてもよい。そしてホイール44が表れる領域の大きさが所定の大きさとなるよう当該部分画像をサイズ変更(拡大又は縮小)することにより、ターゲット画像が生成されてもよい。例えば、ホイール44が表れる領域の直径の画素数が所定画素数rとなるよう当該部分画像をサイズ変更することにより、ターゲット画像が生成されてもよい。また、ホイール44が表れる領域の形状が正円となるよう当該部分画像に対してアフィン変換等による変形を行うことにより、ターゲット画像が生成されてもよい。 Here, a partial image may be generated by cutting out the target region 42 from the high-speed sampling image. Then, the target image may be generated by resizing (enlarging or reducing) the partial image so that the size of the region where the wheel 44 appears becomes a predetermined size. For example, the target image may be generated by resizing the partial image so that the number of pixels in the diameter of the region where the wheel 44 appears is a predetermined number of pixels r. Further, the target image may be generated by deforming the partial image by affine transformation or the like so that the shape of the region where the wheel 44 appears becomes a perfect circle.

あるいは、ホイール44が表れる領域の大きさが所定の大きさとなるよう高速サンプリング画像をサイズ変更した画像が生成されてもよい。例えば、ホイール44が表れる領域の直径の画素数が所定画素数rとなるよう高速サンプリング画像をサイズ変更した画像が生成されてもよい。ここで、ホイール44が表れる領域の形状が正円となるよう高速サンプリング画像に対してアフィン変換等による変形をした画像に対してサイズ変更が行われた画像が生成されてもよい。そしてサイズ変更された画像からタイヤの側面が写っている領域の画像を切り出すことで、ターゲット画像が生成されてもよい。 Alternatively, an image in which the high-speed sampling image is resized so that the size of the region where the wheel 44 appears becomes a predetermined size may be generated. For example, an image in which the high-speed sampling image is resized so that the number of pixels in the diameter of the region where the wheel 44 appears is a predetermined number r may be generated. Here, an image in which the size of the high-speed sampled image is deformed by affine transformation or the like is resized so that the shape of the region where the wheel 44 appears becomes a perfect circle may be generated. Then, a target image may be generated by cutting out an image of a region showing the side surface of the tire from the resized image.

そして本実施形態では例えば、ターゲット画像に基づいて、当該ターゲット画像に写るタイヤの変形量dが特定される。 Then, in the present embodiment, for example, the amount of deformation d of the tire reflected in the target image is specified based on the target image.

ここで例えば、空気圧が低下するとタイヤの高さが低くなることを踏まえて、図5に示すように、タイヤの高さに相当する画素数hを示す値が、タイヤの変形量dを示す値として特定されてもよい。 Here, for example, considering that the height of the tire decreases as the air pressure decreases, as shown in FIG. 5, the value indicating the number of pixels h corresponding to the height of the tire is the value indicating the amount of deformation d of the tire. May be specified as.

また、空気圧が低下するとタイヤの上部と下部との膨らみの差が大きくなることを踏まえて、タイヤの側面の湾曲量cを示す値が、タイヤの変形量dを示す値として特定されてもよい。ここで例えば、ターゲット画像においてタイヤの側面が表されている画素のそれぞれについて、高速サンプリング画像が撮影された位置からタイヤの表面までの距離が特定されてもよい。例えば、撮影部22が配置されている位置が、高速サンプリング画像が撮影された位置に相当する。以下、高速サンプリング画像が撮影された位置からタイヤの表面までの距離をデプスと呼ぶこととする。そしてデプスの最大値から最小値を引いた値が、湾曲量cを示す値として特定されてもよい。 Further, considering that the difference in bulge between the upper part and the lower part of the tire increases as the air pressure decreases, the value indicating the amount of curvature c on the side surface of the tire may be specified as the value indicating the amount of deformation d of the tire. .. Here, for example, the distance from the position where the high-speed sampling image is taken to the surface of the tire may be specified for each of the pixels showing the side surface of the tire in the target image. For example, the position where the photographing unit 22 is arranged corresponds to the position where the high-speed sampled image is photographed. Hereinafter, the distance from the position where the high-speed sampling image is taken to the surface of the tire will be referred to as depth. Then, a value obtained by subtracting the minimum value from the maximum value of the depth may be specified as a value indicating the amount of curvature c.

また例えば、図6に示すように、ターゲット画像内の、タイヤの側面が表れている領域内における相対的な位置がそれぞれ予め定められている、上領域46及び下領域48が特定されてもよい。上領域46には、タイヤの側面の上部の一部が表れており、下領域48には、タイヤの側面の下部の一部が表れている。 Further, for example, as shown in FIG. 6, the upper region 46 and the lower region 48, in which the relative positions in the region where the side surface of the tire appears in the target image are predetermined, may be specified. .. The upper region 46 shows a part of the upper part of the side surface of the tire, and the lower region 48 shows a part of the lower part of the side surface of the tire.

そして、上領域46内の画素のそれぞれについてデプスが特定されてもよい。また、下領域48内の画素のそれぞれについてデプスが特定されてもよい。 Then, the depth may be specified for each of the pixels in the upper region 46. Further, the depth may be specified for each of the pixels in the lower region 48.

そして、上領域46内の画素について特定されたデプスの最大値から下領域48内の画素について特定されたデプスの最小値を引いた値が、湾曲量cを示す値として特定されてもよい。 Then, a value obtained by subtracting the minimum value of the depth specified for the pixel in the lower region 48 from the maximum value of the depth specified for the pixel in the upper region 46 may be specified as a value indicating the bending amount c.

また、空気圧が低下するにつれてタイヤの膨らみが変化することを踏まえて、図7に示すように、ターゲット画像内においてタイヤの側面が表れている側面領域50内の各画素についてのデプスの分布を示す値が、タイヤの変形量dを示す値として特定されてもよい。以下、側面領域50内の各画素についてのデプスの分布を、サイドプロファイルpと呼ぶこととする。 Further, based on the fact that the bulge of the tire changes as the air pressure decreases, as shown in FIG. 7, the depth distribution for each pixel in the side surface region 50 in which the side surface of the tire appears in the target image is shown. The value may be specified as a value indicating the amount of deformation d of the tire. Hereinafter, the depth distribution for each pixel in the side surface region 50 will be referred to as a side profile p.

ここで例えば、ターゲット画像に表れているホイール44の中心に相当する画素についてのデプスである基準デプスz1が特定されてもよい。そして、側面領域50内の各画素についてのデプスと基準デプスz1との差を示す値z2が特定されてもよい。そして、このようにして特定される、側面領域50内の各画素についての値z2の分布が、サイドプロファイルpを示す値として特定されてもよい。 Here, for example, the reference depth z1 which is the depth for the pixel corresponding to the center of the wheel 44 appearing in the target image may be specified. Then, a value z2 indicating the difference between the depth and the reference depth z1 for each pixel in the side surface region 50 may be specified. Then, the distribution of the value z2 for each pixel in the side surface region 50 specified in this way may be specified as a value indicating the side profile p.

なお、サイドプロファイルpを示す値として、側面領域50内のすべての各画素についてのデプスの分布を示す値が用いられてもよいし、側面領域50内の特定の領域内の各画素についてのデプスの分布を示す値が用いられてもよい。 As the value indicating the side profile p, a value indicating the depth distribution for all the pixels in the side surface region 50 may be used, or the depth for each pixel in the specific region in the side surface region 50 may be used. A value indicating the distribution of may be used.

本実施形態では、車両30が備える4つのタイヤのそれぞれについての変形量dが特定される。 In the present embodiment, the amount of deformation d for each of the four tires included in the vehicle 30 is specified.

ここで例えば、タイヤの側面が写る一連の高速サンプリング画像のうちから任意の1つが選択されてもよい。例えば、前輪撮影期間t1の真ん中に撮影された高速サンプリング画像や、後輪撮影期間t2の真ん中に撮影された高速サンプリング画像が選択されてもよい。そして、選択された1つの高速サンプリング画像について上述の処理が実行されることにより、当該タイヤの変形量dが特定されてもよい。 Here, for example, any one may be selected from a series of high-speed sampling images showing the side surface of the tire. For example, a high-speed sampling image taken in the middle of the front wheel shooting period t1 or a high-speed sampling image taken in the middle of the rear wheel shooting period t2 may be selected. Then, the deformation amount d of the tire may be specified by executing the above-mentioned processing on one selected high-speed sampling image.

あるいは例えば、タイヤの側面が写る一連の高速サンプリング画像の一部又は全部について上述の処理が実行されて、当該高速サンプリング画像に対応する変形量dが特定されてもよい。そして、このようにして特定される変形量dの代表値(例えば、平均値)が、当該タイヤの変形量dとして特定されてもよい。 Alternatively, for example, the above-mentioned processing may be executed on a part or all of a series of high-speed sampling images showing the side surface of the tire to specify the deformation amount d corresponding to the high-speed sampling image. Then, the representative value (for example, the average value) of the deformation amount d specified in this way may be specified as the deformation amount d of the tire.

そして、4つのタイヤのそれぞれについて特定される4つの変形量dの比較結果に基づいて、各タイヤの空気圧の低下度が判定される。ここで例えば、変形量dを示す値の差に基づいて、各タイヤの空気圧の低下度が判定されてもよい。 Then, the degree of decrease in the air pressure of each tire is determined based on the comparison result of the four deformation amounts d specified for each of the four tires. Here, for example, the degree of decrease in the air pressure of each tire may be determined based on the difference in the values indicating the amount of deformation d.

例えば、右前輪34、右後輪36、左前輪38、及び、左後輪40について、それぞれ、変形量を示す値d1、d2、d3、及び、d4が特定されたとする。このとき、d1の値とd2の値との差、d1の値とd3の値との差、d1の値とd4の値との差のいずれもが、所定の閾値よりも大きい場合は、右前輪34の空気圧が低下していると判定されてもよい。 For example, it is assumed that the values d1, d2, d3, and d4 indicating the amount of deformation are specified for the right front wheel 34, the right rear wheel 36, the left front wheel 38, and the left rear wheel 40, respectively. At this time, if the difference between the value of d1 and the value of d2, the difference between the value of d1 and the value of d3, and the difference between the value of d1 and the value of d4 are all larger than a predetermined threshold value, the right It may be determined that the air pressure of the front wheels 34 is low.

また例えば、変形量dの分散を示す値が所定の閾値よりも大きい場合に、変形量dを示す値が4つのタイヤについての変形量dの平均値から最も離れているタイヤの空気圧が低下していると判定されてもよい。 Further, for example, when the value indicating the dispersion of the deformation amount d is larger than a predetermined threshold value, the air pressure of the tire whose value indicating the deformation amount d is farthest from the average value of the deformation amount d for the four tires decreases. It may be determined that the tire is used.

ここで変形量dの値として、例えば、上述のタイヤの高さに相当する画素数hが用いられてもよい。 Here, as the value of the amount of deformation d, for example, the number of pixels h corresponding to the height of the tire described above may be used.

また、変形量dの値として、例えば、上述の湾曲量cを示す値が用いられてもよい。 Further, as the value of the deformation amount d, for example, the value indicating the above-mentioned bending amount c may be used.

また、変形量dの値として、例えば、上述のサイドプロファイルpを示す値が用いられてもよい。 Further, as the value of the deformation amount d, for example, the value indicating the above-mentioned side profile p may be used.

この場合、例えば、側面領域50内のすべての画素について上述の値z2を合計した値が、サイドプロファイルpを示す値として用いられてもよい。 In this case, for example, the sum of the above-mentioned values z2 for all the pixels in the side surface region 50 may be used as the value indicating the side profile p.

あるいは、例えば、2つのターゲット画像に関し、側面領域50内の互いに対応付けられる画素についての上述の値z2の差の二乗和が特定されてもよい。そしてこのようにして特定される差の二乗和が、これら2つのターゲット画像に対応付けられる2つのタイヤについてのサイドプロファイルpを示す値の差として用いられてもよい。 Alternatively, for example, for two target images, the sum of squares of the differences of the above values z2 for the pixels associated with each other in the side region 50 may be specified. Then, the sum of squares of the differences identified in this way may be used as the difference between the values indicating the side profiles p for the two tires associated with these two target images.

また、画素数hを示す値、湾曲量cを示す値、及び、サイドプロファイルpを示す値のうちの複数の組合せが、変形量dの値として用いられてもよい。また、画素数hを示す値、湾曲量cを示す値、及び、サイドプロファイルpを示す値以外のものが、変形量dの値として用いられてもよい。 Further, a plurality of combinations of a value indicating the number of pixels h, a value indicating the amount of curvature c, and a value indicating the side profile p may be used as the value of the amount of deformation d. Further, a value other than the value indicating the number of pixels h, the value indicating the amount of curvature c, and the value indicating the side profile p may be used as the value of the amount of deformation d.

以上のようにして本実施形態によれば、車輪速センサや角速度センサなどといったセンサを設けることなく、タイヤの側面を撮影した画像を用いてタイヤの空気圧の低下度を容易に判定できることとなる。 As described above, according to the present embodiment, it is possible to easily determine the degree of decrease in the air pressure of the tire by using the image of the side surface of the tire without providing a sensor such as a wheel speed sensor or an angular velocity sensor.

なお、本発明の適用範囲は、車両30が料金所ゲート32付近を走行している状況に限定されない。また、本発明は、車両30が停車している状況でも適用可能である。 The scope of application of the present invention is not limited to the situation where the vehicle 30 is traveling near the tollhouse gate 32. The present invention can also be applied to a situation where the vehicle 30 is stopped.

例えば、ガソリンスタンドや駐車場での車両30の停車の検出に応じて撮影される画像に基づいて、車両30が備えるタイヤの空気圧の低下度が判定されてもよい。また、ガソリンスタンドや駐車場出入口において車両30が低速走行している際に撮影される画像に基づいて、車両30が備えるタイヤの空気圧の低下度が判定されてもよい。 For example, the degree of decrease in the tire pressure of the vehicle 30 may be determined based on an image taken in response to the detection of the vehicle 30 stopping at a gas station or a parking lot. Further, the degree of decrease in the tire pressure of the vehicle 30 may be determined based on an image taken when the vehicle 30 is traveling at a low speed at a gas station or a parking lot entrance / exit.

以下、タイヤ空気圧低下度判定装置10に実装されている機能、及び、タイヤ空気圧低下度判定装置10で行われる処理についてさらに説明する。 Hereinafter, the functions mounted on the tire pressure reduction degree determination device 10 and the processing performed by the tire pressure reduction degree determination device 10 will be further described.

図8は、本実施形態に係るタイヤ空気圧低下度判定装置10で実装される機能の一例を示す機能ブロック図である。なお、本実施形態に係るタイヤ空気圧低下度判定装置10で、図8に示す機能のすべてが実装される必要はなく、また、図8に示す機能以外の機能が実装されていても構わない。 FIG. 8 is a functional block diagram showing an example of the functions implemented in the tire pressure drop degree determination device 10 according to the present embodiment. The tire pressure drop determination device 10 according to the present embodiment does not need to have all the functions shown in FIG. 8, and may have functions other than the functions shown in FIG.

図8に示すように、タイヤ空気圧低下度判定装置10には、機能的には例えば、検出部60、撮影制御部62、撮影画像取得部64、ターゲット画像生成部66、変形量特定部68、空気圧低下度判定部70、が含まれる。 As shown in FIG. 8, functionally, the tire pressure drop determination device 10 includes a detection unit 60, a photographing control unit 62, a photographed image acquisition unit 64, a target image generation unit 66, a deformation amount specifying unit 68, and the like. The air pressure drop degree determination unit 70 is included.

以上の機能は、コンピュータであるタイヤ空気圧低下度判定装置10にインストールされた、以上の機能に対応する指令を含むプログラムをプロセッサ12で実行することにより実装されてもよい。このプログラムは、例えば、光ディスク、磁気ディスク、磁気テープ、光磁気ディスク、フラッシュメモリ等のコンピュータ読み取り可能な情報記憶媒体を介して、あるいは、インターネットなどを介してタイヤ空気圧低下度判定装置10に供給されてもよい。 The above functions may be implemented by executing the program including the instructions corresponding to the above functions installed in the tire pressure drop degree determination device 10 which is a computer on the processor 12. This program is supplied to the tire pressure drop determination device 10 via, for example, a computer-readable information storage medium such as an optical disk, a magnetic disk, a magnetic tape, a magneto-optical disk, or a flash memory, or via the Internet or the like. You may.

検出部60は、本実施形態では例えば、車両30が所定の撮影範囲に存在することを検出する。例えば上述のように、検出部60は、撮影部22が撮影する低速サンプリング画像に基づいて、車両30が所定の撮影範囲に存在することを検出してもよい。なお、車両30が所定の撮影範囲に存在することの検出方法は、低速サンプリング画像に基づく方法には限定されない。 In the present embodiment, the detection unit 60 detects, for example, that the vehicle 30 is in a predetermined shooting range. For example, as described above, the detection unit 60 may detect that the vehicle 30 is in a predetermined shooting range based on the low-speed sampling image taken by the shooting unit 22. The method of detecting that the vehicle 30 is within the predetermined shooting range is not limited to the method based on the low-speed sampled image.

撮影制御部62は、本実施形態では例えば、車両30が所定の撮影範囲に存在することの検出に応じて、車両30が備えるタイヤの側面が写る画像を撮影するよう撮影部22を制御する。例えば、撮影部22が撮影する低速サンプリング画像から車両30の像が検出された際に、撮影制御部62は、高速サンプリング画像の撮影開始指示を当該撮影部22に送信してもよい。そして、撮影開始指示を受信した撮影部22は、高速サンプリング画像の撮影を開始してもよい。 In the present embodiment, the photographing control unit 62 controls the photographing unit 22 so as to acquire an image in which the side surface of the tire included in the vehicle 30 is captured, for example, in response to the detection that the vehicle 30 is in a predetermined photographing range. For example, when the image of the vehicle 30 is detected from the low-speed sampling image taken by the shooting unit 22, the shooting control unit 62 may transmit a shooting start instruction of the high-speed sampled image to the shooting unit 22. Then, the photographing unit 22 that has received the photographing start instruction may start photographing the high-speed sampled image.

撮影画像取得部64は、本実施形態では例えば、車両30が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得する。撮影画像取得部64は、例えば、車両30が上述の撮影範囲に存在することの検出に応じて撮影される、上述の高速サンプリング画像を取得する。 In the present embodiment, the captured image acquisition unit 64 acquires, for example, a captured image which is a depth image or a three-dimensional image showing the side surface of the tire included in the vehicle 30. The captured image acquisition unit 64 acquires, for example, the above-mentioned high-speed sampling image taken in response to the detection that the vehicle 30 is in the above-mentioned imaging range.

ターゲット画像生成部66は、本実施形態では例えば、高速サンプリング画像に基づいて、ターゲット画像を生成する。 In this embodiment, the target image generation unit 66 generates a target image based on, for example, a high-speed sampling image.

ターゲット画像生成部66は、高速サンプリング画像のサイズを変更した画像の一部を切り出すことで、ホイール44が表れる領域の大きさが所与の大きさであるターゲット画像を生成してもよい。 The target image generation unit 66 may generate a target image in which the size of the region where the wheel 44 appears is a given size by cutting out a part of the image in which the size of the high-speed sampling image is changed.

あるいは、ターゲット画像生成部66は、高速サンプリング画像の一部を切り出した画像のサイズを変更することで、ホイール44が表れる領域の大きさが所与の大きさであるターゲット画像を生成してもよい。 Alternatively, the target image generation unit 66 may generate a target image in which the size of the area where the wheel 44 appears is a given size by changing the size of the image obtained by cutting out a part of the high-speed sampling image. good.

また、ターゲット画像生成部66は、1つの車両30が備える複数のタイヤのそれぞれについての、当該タイヤの側面が写る撮影画像に基づいて、当該タイヤのターゲット画像を生成してもよい。 Further, the target image generation unit 66 may generate a target image of the tire based on a photographed image showing the side surface of the tire for each of a plurality of tires included in one vehicle 30.

ここで上述のように、ホイール44が表れる領域の大きさが所定の大きさであるターゲット画像が生成されてもよい。あるいは、基準となるタイヤが写る高速サンプリング画像においてホイール44が表れている領域の大きさが基準サイズとして特定されてもよい。そして、他のタイヤについては、ホイール44が表れる領域の大きさが、上述の基準サイズであるターゲット画像が生成されてもよい。 Here, as described above, a target image in which the size of the region where the wheel 44 appears is a predetermined size may be generated. Alternatively, the size of the region where the wheel 44 appears in the high-speed sampling image showing the reference tire may be specified as the reference size. Then, for other tires, a target image may be generated in which the size of the region where the wheel 44 appears is the above-mentioned reference size.

例えば、右後輪36、左前輪38、左後輪40が写る高速サンプリング画像が、ホイール44が表れている領域の大きさが、右前輪34が写る高速サンプリング画像においてホイール44が表れている領域の大きさと同じになるようサイズ変更されてもよい。ここで、右前輪34と右後輪36とでは、ホイール44が表れている領域の大きさが概ね同じである可能性が高い。このことを踏まえ、左前輪38、左後輪40が写る高速サンプリング画像のみが、ホイール44が表れている領域の大きさが、右前輪34が写る高速サンプリング画像においてホイール44が表れている領域の大きさと同じになるようサイズ変更されてもよい。 For example, the size of the area where the wheel 44 appears in the high-speed sampling image showing the right rear wheel 36, the left front wheel 38, and the left rear wheel 40 is the area where the wheel 44 appears in the high-speed sampling image where the right front wheel 34 appears. It may be resized to be the same size as. Here, it is highly possible that the right front wheel 34 and the right rear wheel 36 have substantially the same size of the region in which the wheel 44 appears. Based on this, only the high-speed sampling image showing the left front wheel 38 and the left rear wheel 40 shows the size of the area where the wheel 44 appears, and the area where the wheel 44 appears in the high-speed sampling image showing the right front wheel 34. It may be resized to be the same size.

ターゲット画像においてホイール44が表れる領域の大きさを所与の大きさとすることで、車両30が車線の中央を走行していなくても、4つのタイヤのそれぞれについてのターゲット画像におけるタイヤの側面が表れている領域の大きさを揃えることができる。 By setting the size of the area where the wheel 44 appears in the target image to a given size, the side surface of the tire in the target image for each of the four tires appears even if the vehicle 30 is not traveling in the center of the lane. The size of the area can be made uniform.

また、上述のように、ターゲット画像に表れるホイール44の形状が正円となるよう、ターゲット画像生成部66が、高速サンプリング画像又は高速サンプリング画像の一部を切り出した画像に対してアフィン変換等の変形を行ってもよい。 Further, as described above, the target image generation unit 66 performs affine transformation or the like on a high-speed sampling image or an image obtained by cutting out a part of the high-speed sampling image so that the shape of the wheel 44 appearing in the target image becomes a perfect circle. It may be deformed.

変形量特定部68は、本実施形態では例えば、タイヤの側面が写る撮影画像に基づいて、当該タイヤの変形量dを特定する。変形量特定部68は、ターゲット画像に基づいて、当該ターゲット画像に写るタイヤの変形量dを特定してもよい。 In the present embodiment, the deformation amount specifying unit 68 specifies the deformation amount d of the tire, for example, based on a photographed image showing the side surface of the tire. The deformation amount specifying unit 68 may specify the deformation amount d of the tire shown in the target image based on the target image.

変形量特定部68は、上述のように、タイヤの高さ、タイヤの側面の湾曲量c、又は、高速サンプリング画像が撮影された位置からタイヤの表面までの距離(上述のデプス)の分布のうちの少なくとも1つを示す変形量dを特定してもよい。 As described above, the deformation amount specifying portion 68 is the distribution of the height of the tire, the amount of curvature c on the side surface of the tire, or the distance from the position where the high-speed sampling image was taken to the surface of the tire (the depth described above). The deformation amount d indicating at least one of them may be specified.

空気圧低下度判定部70は、本実施形態では例えば、タイヤの変形量dに基づいて、当該タイヤの空気圧の低下度を判定する。 In the present embodiment, the air pressure decrease determination unit 70 determines the decrease in the air pressure of the tire based on, for example, the amount of deformation d of the tire.

空気圧低下度判定部70は、上述のように、1つのタイヤについて連続撮影される複数の高速サンプリング画像に基づいて、当該タイヤの空気圧の低下度を判定してもよい。また、空気圧低下度判定部70は、1つの車両30に設けられた複数のタイヤのそれぞれについて特定される変形量dの比較結果に基づいて、当該複数のタイヤの空気圧の低下度を判定してもよい。また、空気圧低下度判定部70は、複数のタイヤのそれぞれについて当該タイヤのターゲット画像に基づいて特定される変形量dの比較結果に基づいて、当該複数のタイヤの空気圧の低下度を判定してもよい。 As described above, the air pressure decrease degree determination unit 70 may determine the air pressure decrease degree of the tire based on a plurality of high-speed sampling images continuously photographed for one tire. Further, the air pressure decrease degree determination unit 70 determines the air pressure decrease degree of the plurality of tires based on the comparison result of the deformation amount d specified for each of the plurality of tires provided in one vehicle 30. May be good. Further, the air pressure decrease degree determination unit 70 determines the air pressure decrease degree of the plurality of tires based on the comparison result of the deformation amount d specified based on the target image of the tire for each of the plurality of tires. May be good.

ここで、本実施形態に係るタイヤ空気圧低下度判定装置10で行われる学習処理の流れの一例を、図9に例示するフロー図を参照しながら説明する。なお本処理例では、高速サンプリング画像の撮影タイミングは、撮影部22aと撮影部22bとで同期がとられており、撮影部22aと撮影部22bとが同時に高速サンプリング画像を撮影することとする。 Here, an example of the flow of the learning process performed by the tire pressure drop degree determination device 10 according to the present embodiment will be described with reference to the flow chart illustrated in FIG. In this processing example, the shooting timing of the high-speed sampling image is synchronized between the shooting unit 22a and the shooting unit 22b, and the shooting unit 22a and the shooting unit 22b simultaneously shoot the high-speed sampling image.

まず、検出部60によって車両30が所定の撮影範囲に存在することが検出されるまで待機する(S101)。S101に示す処理における検出は、例えば、撮影部22aによって撮影される低速サンプリング画像、あるいは、撮影部22bによって撮影される低速サンプリング画像に基づいて行われる。 First, the detection unit 60 waits until the detection unit 60 detects that the vehicle 30 is within a predetermined shooting range (S101). The detection in the process shown in S101 is performed based on, for example, a low-speed sampling image captured by the photographing unit 22a or a low-speed sampling image captured by the photographing unit 22b.

検出部60によって車両30が所定の撮影範囲に存在することが検出されると、撮影制御部62は、撮影部22a及び撮影部22bに、高速サンプリング画像の撮影開始指示を送信する(S102)。撮影部22a及び撮影部22bは、当該撮影開始指示の受信に応じて、高速サンプリング画像の撮影を開始する。 When the detection unit 60 detects that the vehicle 30 is within a predetermined shooting range, the shooting control unit 62 transmits a shooting start instruction of the high-speed sampled image to the shooting unit 22a and the shooting unit 22b (S102). The photographing unit 22a and the photographing unit 22b start taking a high-speed sampled image in response to receiving the shooting start instruction.

そして、撮影画像取得部64が、撮影部22aによって撮影された高速サンプリング画像、及び、撮影部22bによって撮影された高速サンプリング画像を取得する(S103)。 Then, the captured image acquisition unit 64 acquires the high-speed sampled image captured by the photographing unit 22a and the high-speed sampled image captured by the photographing unit 22b (S103).

そして、検出部60は、S103に示す処理で取得された高速サンプリング画像に、車両30が写っているか否かを確認する(S104)。ここで例えば、撮影部22aによって撮影された高速サンプリング画像に車両30が写っているか否かが確認されてもよい。あるいは、撮影部22bによって撮影された高速サンプリング画像に車両30が写っているか否かが確認されてもよい。 Then, the detection unit 60 confirms whether or not the vehicle 30 is reflected in the high-speed sampling image acquired by the process shown in S103 (S104). Here, for example, it may be confirmed whether or not the vehicle 30 is captured in the high-speed sampling image captured by the photographing unit 22a. Alternatively, it may be confirmed whether or not the vehicle 30 is captured in the high-speed sampling image captured by the photographing unit 22b.

ここで、写っていることが確認された場合は(S104:Y)、撮影部22a及び撮影部22bによって新たに撮影された高速サンプリング画像に基づくS103に示す処理が実行される。 Here, when it is confirmed that the image is captured (S104: Y), the process shown in S103 based on the high-speed sampled image newly captured by the photographing unit 22a and the photographing unit 22b is executed.

S103に示す処理で取得された高速サンプリング画像に車両30が写っていないことが確認されたとする(S104:N)。この場合は、ターゲット画像生成部66が、S103に示す処理で取得された一連の高速サンプリング画像のうちから、4つのタイヤのそれぞれについて、当該タイヤの側面が写る高速サンプリング画像を特定する(S105)。 It is assumed that the vehicle 30 is not shown in the high-speed sampling image acquired by the process shown in S103 (S104: N). In this case, the target image generation unit 66 specifies a high-speed sampling image showing the side surface of each of the four tires from the series of high-speed sampling images acquired by the process shown in S103 (S105). ..

ここでは例えば、撮影部22aによって撮影された一連の高速サンプリング画像のうちから、右前輪34の側面が写る一連の高速サンプリング画像、及び、右後輪36の側面が写る一連の高速サンプリング画像が特定される。また、撮影部22bによって撮影された一連の高速サンプリング画像のうちから、左前輪38の側面が写る一連の高速サンプリング画像、及び、左後輪40の側面が写る一連の高速サンプリング画像が特定される。 Here, for example, from a series of high-speed sampling images taken by the photographing unit 22a, a series of high-speed sampling images showing the side surface of the right front wheel 34 and a series of high-speed sampling images showing the side surface of the right rear wheel 36 are specified. Will be done. Further, from the series of high-speed sampling images captured by the photographing unit 22b, a series of high-speed sampling images showing the side surface of the left front wheel 38 and a series of high-speed sampling images showing the side surface of the left rear wheel 40 are specified. ..

そして、ターゲット画像生成部66が、車両30が備える4つのタイヤのそれぞれについて、当該タイヤが写るターゲット画像を生成する(S106)。ここでは例えば、4つのタイヤのそれぞれについて、少なくとも1つのターゲット画像が生成される。 Then, the target image generation unit 66 generates a target image in which the tire is captured for each of the four tires included in the vehicle 30 (S106). Here, for example, at least one target image is generated for each of the four tires.

そして、変形量特定部68が、S106に示す処理で生成されたターゲット画像に基づいて、当該ターゲット画像に写るタイヤの変形量dを特定する(S107)。ここで、変形量特定部68は、1つのタイヤの側面が写る複数のターゲット画像のそれぞれについて特定される変形量dに基づいて、当該ターゲット画像に写るタイヤの変形量dを特定してもよい。 Then, the deformation amount specifying unit 68 specifies the deformation amount d of the tire reflected in the target image based on the target image generated by the process shown in S106 (S107). Here, the deformation amount specifying unit 68 may specify the deformation amount d of the tire shown in the target image based on the deformation amount d specified for each of the plurality of target images showing the side surface of one tire. ..

そして、空気圧低下度判定部70が、S107に示す処理で4つのタイヤのそれぞれについて特定された変形量dに基づいて、各タイヤの空気圧の低下度を判定する(S108)。ここでは例えば、空気圧が低下しているタイヤが判定されてもよい。 Then, the air pressure decrease degree determination unit 70 determines the air pressure decrease degree of each tire based on the deformation amount d specified for each of the four tires by the process shown in S107 (S108). Here, for example, a tire whose air pressure is low may be determined.

そして、撮影制御部62が、撮影部22a及び撮影部22bに、低速サンプリング画像の撮影開始指示を送信して(S109)、本処理例に示す処理は終了される。撮影部22a及び撮影部22bは、当該撮影開始指示の受信に応じて、低速サンプリング画像の撮影を開始する。 Then, the shooting control unit 62 transmits a shooting start instruction of the low-speed sampled image to the shooting unit 22a and the shooting unit 22b (S109), and the process shown in this processing example is completed. The photographing unit 22a and the photographing unit 22b start taking a low-speed sampled image in response to receiving the shooting start instruction.

上述の処理例において、例えば、S103に示す処理で取得された高速サンプリング画像にタイヤの側面が写っているか否かが判定されてもよい。そして、写っていると判定される際に、ターゲット画像生成部66が、当該高速サンプリング画像に基づいて、ターゲット画像を生成してもよい。 In the above processing example, for example, it may be determined whether or not the side surface of the tire is reflected in the high-speed sampling image acquired by the processing shown in S103. Then, when it is determined that the image is captured, the target image generation unit 66 may generate a target image based on the high-speed sampling image.

また、本実施形態において、4つのタイヤの変形量dの比較結果に基づいて、空気圧の低下度が判定される必要はない。 Further, in the present embodiment, it is not necessary to determine the degree of decrease in air pressure based on the comparison result of the deformation amounts d of the four tires.

例えば、ターゲット画像に基づいて特定される湾曲量cを示す値が所定値よりも大きい場合は、当該ターゲット画像に写るタイヤの空気圧が低下していると判定されてもよい。 For example, when the value indicating the amount of curvature c specified based on the target image is larger than the predetermined value, it may be determined that the air pressure of the tire shown in the target image is reduced.

また例えば、ターゲット画像に基づいて特定されるサイドプロファイルpを示す値が所定の条件を満足する場合は、当該ターゲット画像に写るタイヤの空気圧が低下していると判定されてもよい。例えば、側面領域50内の各画素についてのデプスの分散が所定値よりも大きい場合は、当該側面領域50を含むターゲット画像に写るタイヤの空気圧が低下していると判定されてもよい。 Further, for example, when the value indicating the side profile p specified based on the target image satisfies a predetermined condition, it may be determined that the air pressure of the tire shown in the target image is reduced. For example, when the dispersion of the depth for each pixel in the side surface region 50 is larger than a predetermined value, it may be determined that the air pressure of the tire shown in the target image including the side surface region 50 is reduced.

なお、本発明は上述の実施形態に限定されるものではない。 The present invention is not limited to the above-described embodiment.

また、上記の具体的な数値や文字列、並びに、図面中の具体的な数値や文字列は例示であり、これらの数値や文字列には限定されない。 Further, the above-mentioned specific numerical values and character strings, as well as specific numerical values and character strings in the drawings are examples, and the present invention is not limited to these numerical values and character strings.

10 タイヤ空気圧低下度判定装置、12 プロセッサ、14 記憶部、16 通信部、18 表示部、20 操作部、22,22a,22b 撮影部、30 車両、32 料金所ゲート、34 右前輪、36 右後輪、38 左前輪、40 左後輪、42 ターゲット領域、44 ホイール、46 上領域、48 下領域、50 側面領域、60 検出部、62 撮影制御部、64 撮影画像取得部、66 ターゲット画像生成部、68 変形量特定部、70 空気圧低下度判定部。 10 Tire pressure drop judgment device, 12 Processor, 14 Storage unit, 16 Communication unit, 18 Display unit, 20 Operation unit, 22, 22a, 22b Imaging unit, 30 Vehicles, 32 Tollhouse gate, 34 Right front wheel, 36 Right rear Wheel, 38 Left front wheel, 40 Left rear wheel, 42 Target area, 44 Wheel, 46 Upper area, 48 Lower area, 50 Side area, 60 Detection unit, 62 Imaging control unit, 64 Imaging image acquisition unit, 66 Target image generation unit , 68 Deformation amount identification unit, 70 Pneumatic pressure drop determination unit.

Claims (10)

車両が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得する撮影画像取得手段と、
前記撮影画像に基づいて、前記タイヤの変形量を特定する変形量特定手段と、
前記変形量に基づいて、前記タイヤの空気圧の低下度を判定する判定手段と、
を含むことを特徴とするタイヤ空気圧低下度判定装置。
A photographed image acquisition means for acquiring a photographed image which is a depth image or a three-dimensional image showing the side surface of a tire provided in a vehicle, and
Deformation amount specifying means for specifying the deformation amount of the tire based on the captured image, and
A determination means for determining the degree of decrease in tire pressure based on the amount of deformation, and
A tire pressure drop determination device comprising.
前記車両が撮影範囲に存在することを検出する検出手段、をさらに含み、
前記撮影画像取得手段は、前記車両が前記撮影範囲に存在することの検出に応じて撮影される前記撮影画像を取得する、
ことを特徴とする請求項1に記載のタイヤ空気圧低下度判定装置。
Further including a detecting means for detecting the presence of the vehicle in the photographing range,
The captured image acquisition means acquires the captured image captured in response to the detection that the vehicle is in the photographing range.
The tire pressure decrease degree determining device according to claim 1.
前記判定手段は、1つの前記タイヤについて連続撮影される複数の前記撮影画像に基づいて、当該タイヤの空気圧の低下度を判定する、
ことを特徴とする請求項1又は2に記載のタイヤ空気圧低下度判定装置。
The determination means determines the degree of decrease in the air pressure of the tire based on a plurality of the photographed images continuously photographed for the tire.
The tire pressure decrease degree determining device according to claim 1 or 2.
前記判定手段は、1つの前記車両に設けられた複数の前記タイヤのそれぞれについて特定される前記変形量の比較結果に基づいて、当該複数の前記タイヤの空気圧の低下度を判定する、
ことを特徴とする請求項1から3のいずれか一項に記載のタイヤ空気圧低下度判定装置。
The determination means determines the degree of decrease in air pressure of the plurality of tires based on the comparison result of the amount of deformation specified for each of the plurality of tires provided in the vehicle.
The tire pressure drop degree determining device according to any one of claims 1 to 3, wherein the tire pressure drop degree determination device is characterized.
前記撮影画像のサイズを変更した画像の一部を切り出すことで、ホイールが表れる領域の大きさが所与の大きさであるターゲット画像を生成するターゲット画像生成手段、をさらに含み、
前記変形量特定手段は、前記ターゲット画像に基づいて、前記タイヤの変形量を特定する、
ことを特徴とする請求項1から3のいずれか一項に記載のタイヤ空気圧低下度判定装置。
Further including a target image generation means for generating a target image in which the size of the area where the wheel appears is a given size by cutting out a part of the image in which the size of the captured image is changed.
The deformation amount specifying means identifies the deformation amount of the tire based on the target image.
The tire pressure decrease degree determining device according to any one of claims 1 to 3, wherein the tire pressure drop degree determination device is characterized.
前記撮影画像の一部を切り出した画像のサイズを変更することで、ホイールが表れる領域の大きさが所与の大きさであるターゲット画像を生成するターゲット画像生成手段、をさらに含み、
前記変形量特定手段は、前記ターゲット画像に基づいて、前記タイヤの変形量を特定する、
ことを特徴とする請求項1から3のいずれか一項に記載のタイヤ空気圧低下度判定装置。
Further including a target image generation means for generating a target image in which the size of the area where the wheel appears is a given size by changing the size of the image obtained by cutting out a part of the captured image.
The deformation amount specifying means identifies the deformation amount of the tire based on the target image.
The tire pressure drop degree determining device according to any one of claims 1 to 3, wherein the tire pressure drop degree determination device is characterized.
前記ターゲット画像生成手段は、1つの前記車両が備える複数のタイヤのそれぞれについての、当該タイヤの側面が写る前記撮影画像に基づいて、当該タイヤの前記ターゲット画像を生成し、
前記判定手段は、前記複数のタイヤのそれぞれについて当該タイヤの前記ターゲット画像に基づいて特定される前記変形量の比較結果に基づいて、当該複数の前記タイヤの空気圧の低下度を判定する、
ことを特徴とする請求項5又は6に記載のタイヤ空気圧低下度判定装置。
The target image generation means generates the target image of the tire based on the photographed image showing the side surface of the tire for each of the plurality of tires included in the vehicle.
The determination means determines the degree of decrease in air pressure of the plurality of tires based on the comparison result of the amount of deformation specified based on the target image of the tire for each of the plurality of tires.
The tire pressure drop degree determining device according to claim 5 or 6, wherein the tire pressure drop degree is determined.
前記変形量特定手段は、前記タイヤの高さ、前記タイヤの側面の湾曲量、又は、前記撮影画像が撮影された位置から前記タイヤの表面までの距離の分布のうちの少なくとも1つを示す前記変形量を特定する、
ことを特徴とする請求項1から7のいずれか一項に記載のタイヤ空気圧低下度判定装置。
The deformation amount specifying means indicates at least one of the height of the tire, the amount of curvature of the side surface of the tire, or the distribution of the distance from the position where the photographed image is taken to the surface of the tire. Identify the amount of deformation,
The tire pressure decrease degree determining device according to any one of claims 1 to 7, wherein the tire pressure drop degree determination device is characterized.
車両が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得するステップと、
前記撮影画像に基づいて、前記タイヤの変形量を特定するステップと、
前記変形量に基づいて、前記タイヤの空気圧の低下度を判定するステップと、
を含むことを特徴とするタイヤ空気圧低下度判定方法。
The step of acquiring a captured image which is a depth image or a three-dimensional image showing the side surface of the tire provided in the vehicle,
A step of specifying the amount of deformation of the tire based on the captured image, and
A step of determining the degree of decrease in tire pressure based on the amount of deformation, and
A method for determining the degree of decrease in tire pressure, which comprises.
車両が備えるタイヤの側面が写る奥行き画像又は三次元画像である撮影画像を取得する手順、
前記撮影画像に基づいて、前記タイヤの変形量を特定する手順、
前記変形量に基づいて、前記タイヤの空気圧の低下度を判定する手順、
をコンピュータに実行させることを特徴とするプログラム。
Procedure for acquiring a captured image which is a depth image or a three-dimensional image showing the side surface of a tire provided in a vehicle,
A procedure for identifying the amount of deformation of the tire based on the captured image,
A procedure for determining the degree of decrease in tire pressure based on the amount of deformation,
A program characterized by having a computer execute.
JP2019236775A 2019-12-26 2019-12-26 Apparatus and method for determining degree of decrease in tire air pressure Active JP7473779B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019236775A JP7473779B2 (en) 2019-12-26 2019-12-26 Apparatus and method for determining degree of decrease in tire air pressure

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019236775A JP7473779B2 (en) 2019-12-26 2019-12-26 Apparatus and method for determining degree of decrease in tire air pressure

Publications (2)

Publication Number Publication Date
JP2021104740A true JP2021104740A (en) 2021-07-26
JP7473779B2 JP7473779B2 (en) 2024-04-24

Family

ID=76918448

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019236775A Active JP7473779B2 (en) 2019-12-26 2019-12-26 Apparatus and method for determining degree of decrease in tire air pressure

Country Status (1)

Country Link
JP (1) JP7473779B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10272907A (en) * 1997-03-28 1998-10-13 Omron Corp Dangerous vehicle detection device
JPH10320527A (en) * 1997-05-14 1998-12-04 Mitsubishi Heavy Ind Ltd Type discrimination device and vehicle driver leading and guiding device
JP2007038730A (en) * 2005-08-01 2007-02-15 Toyota Motor Corp Tire state determination device and its method
JP2011042288A (en) * 2009-08-21 2011-03-03 Rohm Co Ltd Tire air pressure management device for vehicle and tire for vehicle capable of outputting air pressure information
JP2016170508A (en) * 2015-03-11 2016-09-23 三菱重工メカトロシステムズ株式会社 Tire pattern determination device, vehicle model discrimination device, and tire pattern determination method and program

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010017293A1 (en) 2010-06-08 2011-12-08 Dürr Assembly Products GmbH Method for determining tire pressure of e.g. passenger car, involves determining wheel load and vertical deformation of side surface of tire, and computing tire pressure by applying determined wheel load and vertical deformation

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10272907A (en) * 1997-03-28 1998-10-13 Omron Corp Dangerous vehicle detection device
JPH10320527A (en) * 1997-05-14 1998-12-04 Mitsubishi Heavy Ind Ltd Type discrimination device and vehicle driver leading and guiding device
JP2007038730A (en) * 2005-08-01 2007-02-15 Toyota Motor Corp Tire state determination device and its method
JP2011042288A (en) * 2009-08-21 2011-03-03 Rohm Co Ltd Tire air pressure management device for vehicle and tire for vehicle capable of outputting air pressure information
JP2016170508A (en) * 2015-03-11 2016-09-23 三菱重工メカトロシステムズ株式会社 Tire pattern determination device, vehicle model discrimination device, and tire pattern determination method and program

Also Published As

Publication number Publication date
JP7473779B2 (en) 2024-04-24

Similar Documents

Publication Publication Date Title
CA2958832C (en) Method and axle-counting device for contact-free axle counting of a vehicle and axle-counting system for road traffic
JP4258385B2 (en) Road surface reflection detector
US11430149B2 (en) Image processing device and image processing method
JP2001291096A (en) Method for deciding displacement of vehicle from lane
JP2005300315A (en) Object detection device
JP6722084B2 (en) Object detection device
JP7202304B2 (en) Collision prediction device, collision prediction method and program
JP2020056717A (en) Position detection device
JP7445117B2 (en) Tire wear degree determination device, tire wear degree determination method and program
JP2021104740A (en) Tire air pressure reduction degree determination device, tire air pressure reduction degree determination method and program
KR101484170B1 (en) Assessment system and method for image projected from head up display
JP4788399B2 (en) Pedestrian detection method, apparatus, and program
JP2020126304A (en) Out-of-vehicle object detection apparatus
JP2010056975A (en) Object detection system by rear camera
WO2022004495A1 (en) Obstacle detection device and obstacle detection method
US11420855B2 (en) Object detection device, vehicle, and object detection process
CN115346191A (en) Method and apparatus for calibration
JP7385118B2 (en) Tire air pressure decrease degree determination device, tire air pressure decrease degree determination method and program
CN116778457B (en) Automatic parking auxiliary control system and device for vehicle
JP6564682B2 (en) Object detection device, object detection method, and object detection program
JP7335503B2 (en) Tire pressure drop estimation device, tire pressure drop learning device, tire pressure drop estimation method, trained model generation method and program
JP7322651B2 (en) Obstacle recognition device
JP2001005979A (en) Identification function learning device and vehicle detecting device
JP7469640B2 (en) Tire abnormality determination device, tire abnormality determination method and program
JP2004310282A (en) Vehicle detector

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230822

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230829

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231013

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231212

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240325

R150 Certificate of patent or registration of utility model

Ref document number: 7473779

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150