WO2021182511A1 - 通知装置、通知方法及びプログラム - Google Patents

通知装置、通知方法及びプログラム Download PDF

Info

Publication number
WO2021182511A1
WO2021182511A1 PCT/JP2021/009533 JP2021009533W WO2021182511A1 WO 2021182511 A1 WO2021182511 A1 WO 2021182511A1 JP 2021009533 W JP2021009533 W JP 2021009533W WO 2021182511 A1 WO2021182511 A1 WO 2021182511A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
wheel nut
wheel
unit
nut
Prior art date
Application number
PCT/JP2021/009533
Other languages
English (en)
French (fr)
Inventor
今井　聡
Original Assignee
いすゞ自動車株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by いすゞ自動車株式会社 filed Critical いすゞ自動車株式会社
Priority to US17/905,516 priority Critical patent/US20230122897A1/en
Priority to CN202180018835.8A priority patent/CN115298527A/zh
Priority to DE112021001560.5T priority patent/DE112021001560T5/de
Publication of WO2021182511A1 publication Critical patent/WO2021182511A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M17/00—Testing of vehicles
    • G01M17/007—Wheeled or endless-tracked vehicles
    • G01M17/013—Wheels
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G07C5/006—Indicating maintenance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/001—Industrial image inspection using an image reference approach
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60B—VEHICLE WHEELS; CASTORS; AXLES FOR WHEELS OR CASTORS; INCREASING WHEEL ADHESION
    • B60B2900/00—Purpose of invention
    • B60B2900/30—Increase in
    • B60B2900/331—Safety or security
    • B60B2900/3312—Safety or security during regular use
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60B—VEHICLE WHEELS; CASTORS; AXLES FOR WHEELS OR CASTORS; INCREASING WHEEL ADHESION
    • B60B3/00—Disc wheels, i.e. wheels with load-supporting disc body
    • B60B3/14—Attaching disc body to hub ; Wheel adapters
    • B60B3/16—Attaching disc body to hub ; Wheel adapters by bolts or the like
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior

Definitions

  • the present invention relates to a notification device, a notification method and a program for notifying that the wheel nut is loose.
  • Patent Document 1 A technique for automatically detecting looseness of a wheel nut is known (see, for example, Patent Document 1).
  • Patent Document 1 describes that the strain of a spacer-like member that receives a tightening force by a wheel nut is measured by a strain sensor, and looseness of the wheel nut is detected based on the measurement result.
  • the present invention has been made in view of this point, and an object of the present invention is to provide a notification device and a notification method program that can simplify the work of detecting looseness of a wheel nut.
  • the notification device is a reference for identifying the position of a plurality of current wheel nuts provided on the wheel in the captured image and the acquisition unit that acquires the captured image of the wheel of the vehicle.
  • a reception unit that accepts the designation of a position
  • a storage unit that stores a reference image that is the captured image acquired by the acquisition unit in the past, and the reference position of the reference image in association with each other, and the reference position of the reference image.
  • a reference wheel nut which is one of a plurality of wheel nuts included in the reference image, is selected based on the above, and the reference position received by the reception unit is obtained from the captured image acquired by the acquisition unit.
  • the detection unit for detecting the looseness of the current wheel nut and the notification unit for notifying the user that the current wheel nut is loose when the detection unit detects the looseness of the current wheel nut are provided. ..
  • the notification device further includes a display control unit that displays the captured image before the user is instructed to capture the image as a pre-display image on the display unit, and the reception unit is the reference for the display area of the pre-display image. You may accept the designation of the position.
  • the acquisition unit may acquire the captured image when the reception unit receives the designation of the reference position.
  • the notification device displays the captured image before the user is instructed to capture the image as a pre-display image, and displays a display control unit that displays the pre-display image including a frame for designating the reference position on the display unit. Further may be included.
  • the detection unit detects looseness of the current wheel nuts of a predetermined number or more of the wheels included in the captured image
  • the notification unit includes a wheel included in the reference image and a wheel included in the captured image. May notify the user that is different.
  • the detection unit may obtain a rotation angle at which the current wheel nut has rotated with respect to the reference wheel nut, and may detect looseness of the current wheel nut when the obtained rotation angle is equal to or greater than a threshold value.
  • the notification method of the second aspect of the present invention identifies a step of acquiring an image of an image of a wheel of a vehicle, which is executed by a computer, and a position of a plurality of current wheel nuts provided on the wheel in the image. Based on the step of accepting the designation of the reference position to be specified, the step of associating and storing the reference image which is the captured image acquired in the past and the reference position of the reference image, and the reference position of the reference image.
  • the reference wheel nut which is one of the plurality of wheel nuts included in the reference image, is selected, and the reference wheel nut at the same position as the reference wheel nut is obtained from the acquired image with respect to the received reference position.
  • a step of specifying the current wheel nut a step of detecting looseness of the current wheel nut by detecting that the specified current wheel nut has rotated with respect to the reference wheel nut included in the reference image, and a step of detecting the looseness of the current wheel nut.
  • the step of notifying the user that the current wheel nut is loose is provided.
  • the program of the third aspect of the present invention is for identifying to a computer a step of acquiring an image of an image of a wheel of a vehicle and the position of a plurality of current wheel nuts provided on the wheel in the image.
  • a step of accepting the designation of the reference position a step of associating and storing the reference image which is the captured image acquired in the past and the reference position of the reference image, and the reference based on the reference position of the reference image.
  • a reference wheel nut which is one of a plurality of wheel nuts included in the image, is selected, and the current wheel nut at the same position as the reference wheel nut is obtained from the acquired image with respect to the received reference position.
  • the step of detecting the looseness of the current wheel nut by detecting that the specified current wheel nut has rotated with respect to the reference wheel nut included in the reference image, and the step of detecting the looseness of the current wheel nut.
  • the step of notifying the user that the wheel nut is currently loose is executed.
  • FIG. 1 It is a figure which shows the outline of the notification device of an embodiment. It is a figure which shows the structure of the notification device. It is a figure which shows the example of the process which the reception part receives a reference position. It is a figure which shows the example of the detection method of the present looseness of a wheel nut by a detection part. It is a figure which shows the example of the method which the notification part currently notifies the looseness of a wheel nut. It is a figure which shows the processing procedure of the detection of the looseness of a wheel nut by a notification device. It is a figure which shows another example of the process which the reception part accepts the designation of a reference position.
  • FIG. 1 is a diagram showing an outline of the notification device 100 of the present embodiment.
  • the notification device 100 is a device managed by a business operator that inspects the vehicle 200, and is, for example, an information terminal such as a smartphone or a tablet.
  • the vehicle 200 is, for example, a commercial vehicle such as a truck.
  • the notification device 100 detects looseness of a plurality of wheel nuts provided on the wheel 20 of the vehicle 200.
  • the notification device 100 acquires an captured image of the wheel 20.
  • the notification device 100 reads out from the storage unit a reference image which is an image captured in the past by the wheel 20 which is the same as the acquired image.
  • the reference image was obtained, for example, when it was confirmed last time that each wheel nut of the wheel 20 was not loosened. Further, the reference image may be the one acquired when the wheel 20 was imaged last time.
  • the notification device 100 has the same position as one wheel nut (hereinafter, also referred to as a reference wheel nut) of the wheel nuts included in the reference image among the plurality of wheel nuts (hereinafter, currently wheel nuts) included in the captured image. Identify the current wheel nut of.
  • the notification device 100 currently detects looseness of the wheel nut by determining whether or not the wheel nut has currently rotated with respect to the reference wheel nut included in the reference image. When the notification device 100 detects that the wheel nut is currently loose, it notifies the user that the wheel nut is currently loose. In this way, the notification device 100 can simplify the work of detecting looseness of the wheel nut.
  • FIG. 2 is a diagram showing the configuration of the notification device 100.
  • the notification device 100 includes a touch panel 1, an imaging unit 2, a display unit 3, a storage unit 4, and a control unit 5.
  • the touch panel 1 accepts a user's operation on the display surface of the display unit 3.
  • the imaging unit 2 images the wheel 20 of the vehicle 200.
  • the display unit 3 is a display for displaying images, characters, and the like.
  • the storage unit 4 is composed of, for example, a ROM (Read Only Memory), a RAM (Random Access Memory), or the like.
  • the control unit 5 is, for example, a CPU (Central Processing Unit).
  • the control unit 5 functions as a reception unit 51, an acquisition unit 52, a specific unit 53, a detection unit 54, a display control unit 55, and a notification unit 56 by executing the program stored in the storage unit 4.
  • the reception unit 51 accepts the user's operation on the touch panel 1.
  • the reception unit 51 accepts, for example, an operation of designating a reference position for identifying the positions of a plurality of current wheel nuts provided on the wheel 20 in the captured image.
  • FIG. 3 is a diagram showing an example of a process in which the reception unit 51 receives a reference position.
  • FIG. 3 shows a state in which the imaging unit 2 images the wheel 20.
  • the captured image before the user is instructed to capture the image is displayed as a pre-display image.
  • the inspection of the wheel nut is selected by the user from the plurality of inspection items of the pre-operation inspection in the state where the application of the notification device 100 for performing the pre-operation inspection of the vehicle 200 is activated.
  • the reception unit 51 receives the instruction of the user to display the pre-display image after the message instructing to image the wheel 20 of the left front wheel of the vehicle 200 is displayed on the display unit 3.
  • the pre-display image of FIG. 3 is displayed.
  • the pre-display image includes the wheel 20 of the vehicle 200.
  • the wheel 20 includes a plurality of current wheel nuts and one air valve 201.
  • the reception unit 51 receives the designation of the reference position of the wheel 20 with respect to the display area 60 of the pre-display image.
  • the reference position is the position of the air valve 201 in the examples herein.
  • the acquisition unit 52 acquires an image captured by the image pickup unit 2 of the wheel 20 of the vehicle 200.
  • the acquisition unit 52 acquires the captured image when the reception unit 51 receives the designation of the reference position.
  • the message "The image is taken when the position of the air valve on the left front wheel of the vehicle is specified by touch operation" is displayed on the display unit 3.
  • the acquisition unit 52 acquires the captured image of the wheel 20. Therefore, the user does not need to separately instruct to acquire the captured image.
  • the identification unit 53 specifies the relative positions of the plurality of current wheel nuts included in the captured image acquired by the acquisition unit 52 with respect to the reference position. For example, the specifying unit 53 specifies, as a relative position, the number of the plurality of current wheel nuts clockwise from the captured image acquired by the acquiring unit 52, starting from the reference position on the wheel 20.
  • the storage unit 4 is associated with a reference image which is an image captured by the wheel 20 acquired by the acquisition unit 52 in the past, information indicating a reference position of the reference image, and vehicle identification information for identifying the vehicle 200. It is remembered.
  • the reference position of the reference image is a position designated by the reception unit 51 while the reference image is displayed on the display unit 3 as a pre-display image.
  • the acquisition unit 52 stores the captured image as the reference image in the storage unit 4 in association with the information indicating the designated reference position by the reception unit 51.
  • the specific unit 53 corresponds to the same wheel as the wheel corresponding to the captured image among the reference images associated with the vehicle identification information selected by the user in the application of the notification device 100 for performing the pre-operation inspection of the vehicle 200.
  • the reference image and information indicating the reference position of the reference image are read out from the storage unit 4.
  • a plurality of reference images corresponding to a plurality of wheels 20 of the vehicle 200 are associated with one vehicle identification information.
  • the specific unit 53 touches the position of the air valve on the left front wheel of the vehicle, which is displayed on the display unit 3 among a plurality of reference images associated with the vehicle identification information selected by the user. Then, an image is taken. ”(Fig. 3), the reference image including the wheel 20 of the left front wheel shall be read out.
  • the specific unit 53 selects one of the plurality of current wheel nuts included in the read reference image as the reference wheel nut.
  • the specific unit 53 selects the reference wheel nut based on the reference position of the reference image. For example, the specific unit 53 selects the first wheel nut clockwise as the reference wheel nut starting from the reference position.
  • the identification unit 53 identifies the current wheel nut 202 at the same position as the selected reference wheel nut with respect to the reference position based on the relative position of the identified current wheel nut.
  • the detection unit 54 detects the looseness of the current wheel nut by detecting that the current wheel nut specified by the specific unit 53 has rotated with respect to the reference wheel nut included in the reference image.
  • FIG. 4 is a diagram showing an example of a method of detecting looseness of the current wheel nut 202 by the detection unit 54.
  • the detection unit 54 identifies a line segment L1 connecting the center of the current wheel nut 202 specified by the specific unit 53 and the axle of the wheel 20.
  • the detection unit 54 selects the vertex having the smallest distance from the axle of the wheel 20 among the six vertices of the hexagon of the wheel nut 202 at present.
  • the detection unit 54 identifies the line segment L2 connecting the selected apex and the axle of the wheel 20.
  • the detection unit 54 obtains the angle A formed by the line segment L1 and the line segment L2.
  • the detection unit 54 reads out the angle A'similarly obtained in the reference image from the storage unit 4.
  • the detection unit 54 currently detects looseness of the wheel nut 202 when the difference between the obtained angles is equal to or greater than the first threshold value.
  • the first threshold value is, for example, a preset angle as the maximum value of the angle at which a change with respect to the angle of the reference wheel nut is allowed.
  • the first threshold value may be the minimum value of the angle that can be detected by the detection unit 54.
  • the detection unit 54 does not currently detect looseness of the wheel nut 202 when the obtained angle difference is less than the first threshold value.
  • the detection unit 54 determines the rotation angle of the reference wheel nut in the rotation direction with respect to the reference position of the reference image and the rotation angle of the current wheel nut 202 in the rotation direction with respect to the reference position of the captured image in which the wheel nut 202 is currently captured. When the difference is equal to or greater than the second threshold value, it may be detected that the wheel nut 202 is currently rotated with respect to the reference wheel nut.
  • the detection unit 54 rotates the reference image so that the reference position is located directly below the reference wheel nut. Similarly, the detection unit 54 rotates the captured image so that the reference position is located directly below the current wheel nut 202 specified by the specific unit 53.
  • the detection unit 54 compares the reference wheel nut after the rotation of the reference image with the current wheel nut 202 after the rotation of the captured image.
  • the detection unit 54 obtains the rotation angle at which the wheel nut 202 is currently rotated with respect to the reference hole nut.
  • the detection unit 54 currently detects looseness of the wheel nut 202 when the obtained rotation angle is equal to or greater than the second threshold value.
  • the second threshold value is, for example, a preset angle as the maximum value of the angle at which a change with respect to the angle of the reference wheel nut is allowed.
  • the second threshold value may be the minimum value of the angle that can be detected by the detection unit 54.
  • the display control unit 55 causes the display unit 3 to display various images and characters. For example, the display control unit 55 causes the display unit 3 to display a message instructing that the wheel 20 of the left front wheel of the vehicle 200 is imaged when the wheel nut is inspected. As shown in FIG. 3, the display control unit 55 causes the display unit 3 to display the captured image before the user is instructed to capture the image as a pre-display image.
  • FIG. 5 is a diagram showing an example of a method in which the notification unit 56 currently notifies the looseness of the wheel nut 202.
  • the notification unit 56 displays a message indicating that the looseness of the wheel nut 202 is currently detected.
  • the notification unit 56 displays information indicating the current wheel nut 202 in which the detection unit 54 has detected looseness.
  • the notification unit 56 attaches a double circle indicating the current wheel nut 202 in which the detection unit 54 has detected looseness to the captured image of the wheel 20 and causes the display unit 3 to display the image.
  • the detection unit 54 detects looseness of a large number of current wheel nuts 202 included in the same wheel 20, the wheel 20 included in the reference image and the wheel 20 included in the captured image may be different.
  • the detection unit 54 detects that the current wheel nut 202 is loosened by a predetermined number or more of the wheels 20 included in the captured image, the notification unit 56 is different from the wheel included in the reference image and the wheel included in the captured image. Notify the user of this.
  • the predetermined number is, for example, about half of the total number of current wheel nuts 202 included in the wheel 20.
  • FIG. 6 is a diagram showing a processing procedure for detecting looseness of the wheel nut by the notification device 100.
  • this processing procedure for example, after a message instructing to image one of the wheels 20 of the vehicle 200 is displayed on the display unit 3, a user's instruction to display the pre-display image is given. It starts when the reception unit 51 accepts.
  • the display control unit 55 causes the display unit 3 to display the pre-display image (S101).
  • the reception unit 51 determines whether or not the designation of the reference position has been accepted (S102).
  • the acquisition unit 52 acquires an captured image of the wheel 20 of the vehicle 200 (S103).
  • the specific unit 53 reads a reference image, which is an image captured by the same wheel 20 acquired in the past by the acquisition unit 52, from the storage unit 4.
  • the specific unit 53 selects an unselected wheel nut as the reference wheel nut from the plurality of wheel nuts included in the reference image (S104).
  • the identification unit 53 identifies the current wheel nut 202 at the same position as the selected reference wheel nut (S105).
  • the detection unit 54 detects whether or not the wheel nut 202 is currently loose by detecting that the current wheel nut 202 specified by the specific unit 53 has rotated with respect to the reference wheel nut.
  • the notification unit 56 determines whether or not the detection unit 54 has detected the looseness of the wheel nut 202 (S106). When the notification unit 56 determines that the detection unit 54 has detected the looseness of the wheel nut 202 (YES in S106), the notification unit 56 notifies the user that the wheel nut 202 is currently loose (S107).
  • the specific unit 53 determines whether or not there is an unselected wheel nut among the plurality of wheel nuts included in the reference image (S108). When it is determined that there is no unselected wheel nut (NO in S108), the specific unit 53 ends the process.
  • the reception unit 51 repeats the determination of S102 when the designation of the reference position is not accepted in the determination of S102 (NO of S102).
  • the notification unit 56 determines that the detection unit 54 has not detected the looseness of the wheel nut 202 in the determination of S106 (NO in S106)
  • the notification unit 56 moves to the determination of S108.
  • the specific unit 53 returns to the process of S104.
  • the detection unit 54 can detect the current looseness of the wheel nut 202 by detecting that the wheel nut 202 has currently rotated with respect to the reference wheel nut. Therefore, the notification device 100 can simplify the work of detecting the looseness of the wheel nut.
  • FIG. 7 is a diagram showing another example of the process in which the reception unit 51 accepts the designation of the reference position.
  • the display control unit 55 causes the display unit 3 to display a pre-display image including the frame 61 for designating the reference position.
  • the message "Please take an image so that the air valve of the left front wheel of the vehicle is within the frame" is displayed.
  • the acquisition unit 52 acquires the image captured by the wheel 20. At this time, the reception unit 51 may accept the operation of the image pickup button 62 assuming that the position in the frame 61 is designated as the reference position.
  • reception unit 51 is not limited to the example of receiving the designation of the reference position with respect to the display area 60 of the pre-displayed image.
  • the display control unit 55 displays the captured image of the wheel 20 acquired by the acquisition unit 52 on the display unit 3.
  • the reception unit 51 may accept the designation of the reference position with respect to the display area of the captured image displayed on the display unit 3.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Human Computer Interaction (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Force Measurement Appropriate To Specific Purposes (AREA)
  • Automobile Manufacture Line, Endless Track Vehicle, Trailer (AREA)

Abstract

車両２００のホイールを撮像した撮像画像を取得する取得部５２と、基準位置の指定を受け付ける受付部５１と、基準位置に対して、撮像画像から、基準ホイールナットと同じ位置の現在ホイールナットを特定する特定部５３と、基準位置に対して、過去に取得部５２が取得した撮像画像である基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットと同じ位置のホイールナットである現在ホイールナットを特定する特定部５３と、基準画像に含まれる基準ホイールナットに対し、特定部５３が特定した現在ホイールナットが回転したことを検出することにより、現在ホイールナットの緩みを検出する検出部５４と、検出部５４が現在ホイールナットの緩みを検出すると、現在ホイールナットが緩んでいることをユーザに通知する通知部５６と、を備える。

Description

通知装置、通知方法及びプログラム
　本発明は、ホイールナットが緩んでいることを通知する通知装置、通知方法及びプログラムに関する。
　ホイールナットの緩みを自動検出する技術が知られている（例えば、特許文献１参照）。特許文献１には、ホイールナットによる締め付け力を受けるスペーサ状部材の歪みを歪みセンサにより測定し、この測定結果に基づいて、ホイールナットの緩みを検出することが記載されている。
特開２０１６－１８７９７７号公報
　特許文献１に記載された方法では、歪みセンサをホイールナットごとに取り付ける必要があり、歪みセンサのための電源や通信装置も確保する必要があるため、ホイールナットの緩みを検出するための作業が煩雑であるという問題があった。
　本発明はこの点に鑑みてなされたものであり、ホイールナットの緩みを検出する作業を簡略化することができる通知装置、通知方法プログラムを提供することを目的とする。
　本発明の第１の態様の通知装置は、車両のホイールを撮像した撮像画像を取得する取得部と、前記撮像画像における前記ホイールに設けられた複数の現在ホイールナットの位置を識別するための基準位置の指定を受け付ける受付部と、過去に前記取得部が取得した前記撮像画像である基準画像と、前記基準画像の前記基準位置とを関連付けて記憶する記憶部と、前記基準画像の前記基準位置に基づいて前記基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットを選択し、前記受付部が受け付けた前記基準位置に対して、前記取得部が取得した前記撮像画像から、前記基準ホイールナットと同じ位置の前記現在ホイールナットを特定する特定部と、前記基準画像に含まれる前記基準ホイールナットに対し、前記特定部が特定した前記現在ホイールナットが回転したことを検出することにより、前記現在ホイールナットの緩みを検出する検出部と、前記検出部が前記現在ホイールナットの緩みを検出すると、前記現在ホイールナットが緩んでいることをユーザに通知する通知部と、を備える。
　前記通知装置は、ユーザにより撮像が指示される前の前記撮像画像を事前表示画像として表示部に表示させる表示制御部をさらに含み、前記受付部は、前記事前表示画像の表示領域に対する前記基準位置の指定を受け付けてもよい。前記取得部は、前記受付部が基準位置の指定を受け付けたときに前記撮像画像を取得してもよい。
　前記通知装置は、ユーザにより撮像が指示される前の前記撮像画像を事前表示画像として表示し、前記基準位置を指定するための枠を含む当該事前表示画像を表示部に表示させる表示制御部をさらに含んでもよい。前記通知部は、前記撮像画像に含まれるホイールの所定数以上の前記現在ホイールナットの緩みを前記検出部が検出した場合に、前記基準画像に含まれるホイールと、前記撮像画像に含まれるホイールとが異なることをユーザに通知してもよい。前記検出部は、前記基準ホイールナットに対し、前記現在ホイールナットが回転した回転角度を求め、求めた回転角度が閾値以上である場合に、前記現在ホイールナットの緩みを検出してもよい。
　本発明の第２の態様の通知方法は、コンピュータに実行させる、車両のホイールを撮像した撮像画像を取得するステップと、前記撮像画像における前記ホイールに設けられた複数の現在ホイールナットの位置を識別するための基準位置の指定を受け付けるステップと、過去に取得した前記撮像画像である基準画像と、前記基準画像の前記基準位置とを関連付けて記憶するステップと、前記基準画像の前記基準位置に基づいて前記基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットを選択し、受け付けた前記基準位置に対して、取得した前記撮像画像から、前記基準ホイールナットと同じ位置の前記現在ホイールナットを特定するステップと、前記基準画像に含まれる前記基準ホイールナットに対し、特定した前記現在ホイールナットが回転したことを検出することにより、前記現在ホイールナットの緩みを検出するステップと、前記現在ホイールナットの緩みを検出すると、前記現在ホイールナットが緩んでいることをユーザに通知するステップと、を備える。
　本発明の第３の態様のプログラムは、コンピュータに、車両のホイールを撮像した撮像画像を取得するステップと、前記撮像画像における前記ホイールに設けられた複数の現在ホイールナットの位置を識別するための基準位置の指定を受け付けるステップと、過去に取得した前記撮像画像である基準画像と、前記基準画像の前記基準位置とを関連付けて記憶するステップと、前記基準画像の前記基準位置に基づいて前記基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットを選択し、受け付けた前記基準位置に対して、取得した前記撮像画像から、前記基準ホイールナットと同じ位置の前記現在ホイールナットを特定するステップと、前記基準画像に含まれる前記基準ホイールナットに対し、特定した前記現在ホイールナットが回転したことを検出することにより、前記現在ホイールナットの緩みを検出するステップと、前記現在ホイールナットの緩みを検出すると、前記現在ホイールナットが緩んでいることをユーザに通知するステップと、を実行させる。
　本発明によれば、ホイールナットの緩みを検出する作業を簡略化するという効果を奏する。
実施形態の通知装置の概要を示す図である。 通知装置の構成を示す図である。 受付部が基準位置を受け付ける処理の例を示す図である。 検出部による現在ホイールナットの緩みの検出方法の例を示す図である。 通知部が現在ホイールナットの緩みを通知する方法の例を示す図である。 通知装置によるホイールナットの緩みの検出の処理手順を示す図である。 受付部が基準位置の指定を受け付ける処理の別の例を示す図である。
［通知装置の概要］
　図１は、本実施形態の通知装置１００の概要を示す図である。通知装置１００は、車両２００を点検する事業者が管理する装置であり、例えばスマートフォン又はタブレット等の情報端末である。車両２００は、例えば、トラック等の商用車である。通知装置１００は、車両２００のホイール２０に設けられた複数のホイールナットの緩みを検出する。
　まず、通知装置１００は、ホイール２０を撮像した撮像画像を取得する。通知装置１００は、取得した撮像画像と同一のホイール２０を過去に撮像した撮像画像である基準画像を記憶部から読み出す。基準画像は、例えば、ホイール２０の各ホイールナットが緩んでいないことが前回確認された際に取得されたものである。また、基準画像は、前回ホイール２０を撮像した際に取得されたものであってもよい。通知装置１００は、撮像画像に含まれる複数のホイールナット（以下、現在ホイールナット）のうち、基準画像に含まれるホイールナットのうちの１つのホイールナット（以下、基準ホイールナットともいう）と同じ位置の現在ホイールナットを特定する。
　詳細については後述するが、通知装置１００は、基準画像に含まれる基準ホイールナットに対し、現在ホイールナットが回転したか否かを判定することにより、現在ホイールナットの緩みを検出する。通知装置１００は、現在ホイールナットの緩みを検出すると、現在ホイールナットが緩んでいることをユーザに通知する。このようにして、通知装置１００は、ホイールナットの緩みを検出する作業を簡略化することができる。
［通知装置の構成］
　図２は、通知装置１００の構成を示す図である。通知装置１００は、タッチパネル１、撮像部２、表示部３、記憶部４及び制御部５を有する。タッチパネル１は、表示部３の表示面に対するユーザの操作を受け付ける。撮像部２は、車両２００のホイール２０を撮像する。表示部３は、画像や文字等を表示するディスプレイである。記憶部４は、例えば、ＲＯＭ（Read Only Memory）及びＲＡＭ（Random Access Memory）等により構成される。
　制御部５は、例えば、ＣＰＵ（Central Processing Unit）である。制御部５は、記憶部４に記憶されたプログラムを実行することにより、受付部５１、取得部５２、特定部５３、検出部５４、表示制御部５５及び通知部５６として機能する。
　受付部５１は、タッチパネル１に対するユーザの操作を受け付ける。受付部５１は、例えば、撮像画像におけるホイール２０に設けられた複数の現在ホイールナットの位置を識別するための基準位置を指定する操作を受け付ける。
［基準位置の指定］
　図３は、受付部５１が基準位置を受け付ける処理の例を示す図である。図３には、撮像部２がホイール２０を撮像する際の様子を示す。表示部３には、ユーザにより撮像が指示される前の撮像画像が事前表示画像として表示されている。
　例えば、車両２００の運行前点検を行うための通知装置１００のアプリケーションが起動した状態において、運行前点検の複数の点検項目のうち、ホイールナットの点検がユーザにより選択されたものとする。ホイールナットの点検では、車両２００の左前輪のホイール２０を撮像することを指示するメッセージが表示部３に表示された後、事前表示画像を表示させるユーザの指示を受付部５１が受け付けたときに図３の事前表示画像が表示される。
　図３の例では、事前表示画像は、車両２００のホイール２０を含む。ホイール２０は、複数の現在ホイールナット及び一つのエアバルブ２０１を含む。受付部５１は、事前表示画像の表示領域６０に対するホイール２０の基準位置の指定を受け付ける。基準位置は、本明細書の例では、エアバルブ２０１の位置である。
　取得部５２は、車両２００のホイール２０を撮像部２により撮像した撮像画像を取得する。例えば、取得部５２は、受付部５１が基準位置の指定を受け付けたときに撮像画像を取得する。図３の例では、表示部３には、「車両の左前輪のエアバルブの位置をタッチ操作で指定すると撮像します。」というメッセージが表示されている。取得部５２は、エアバルブの位置を基準位置として指定する操作を受付部５１が受け付けると、ホイール２０の撮像画像を取得する。このため、ユーザは、撮像画像を取得することを別途指示する必要がない。
　特定部５３は、取得部５２が取得した撮像画像に含まれる複数の現在ホイールナットの基準位置に対する相対的な位置を特定する。例えば、特定部５３は、取得部５２が取得した撮像画像から、ホイール２０において基準位置を起点として、複数の現在ホイールナットが時計回りに何番目かをそれぞれ相対的な位置として特定する。
　記憶部４には、取得部５２が過去に取得したホイール２０の撮像画像である基準画像と、基準画像の基準位置を示す情報と、車両２００を識別するための車両識別情報とが関連付けられて記憶されている。基準画像の基準位置は、基準画像が事前表示画像として表示部３に表示されている間に受付部５１が指定を受けた位置である。取得部５２は、受付部５１が指定を受けた基準位置を示す情報を関連付けて、基準画像となる撮像画像を記憶部４に記憶する。
　特定部５３は、車両２００の運行前点検を行うための通知装置１００のアプリケーションにおいてユーザが選択した車両識別情報に関連付けられた基準画像のうち、撮像画像に対応する車輪と同一の車輪に対応する基準画像及びこの基準画像の基準位置を示す情報を記憶部４から読み出す。一つの車両識別情報には、車両２００の複数のホイール２０に対応する複数の基準画像が関連付けられている。一例としては、特定部５３は、ユーザが選択した車両識別情報に関連付けられた複数の基準画像のうち、表示部３に表示されているメッセージ「車両の左前輪のエアバルブの位置をタッチ操作で指定すると撮像します。」（図３）に対応する左前輪のホイール２０を含む基準画像を読み出すものとする。
　特定部５３は、読み出した基準画像に含まれる複数の現在ホイールナットのうち、いずれか１つのホイールナットを基準ホイールナットとして選択する。特定部５３は、基準画像の基準位置に基づいて、基準ホイールナットを選択する。例えば、特定部５３は、基準位置を起点として、時計回りに１番目のホイールナットを基準ホイールナットとして選択する。特定部５３は、特定した現在ホイールナットの相対的な位置に基づいて、基準位置に対して、選択した基準ホイールナットと同じ位置の現在ホイールナット２０２を特定する。
［現在ホイールナットの緩みの検出］
　検出部５４は、基準画像に含まれる基準ホイールナットに対し、特定部５３が特定した現在ホイールナットが回転したことを検出することにより、現在ホイールナットの緩みを検出する。
　図４は、検出部５４による現在ホイールナット２０２の緩みの検出方法の例を示す図である。検出部５４は、特定部５３が特定した現在ホイールナット２０２の中心と、ホイール２０の車軸とを結ぶ線分Ｌ１を特定する。検出部５４は、現在ホイールナット２０２の６角形の６個の頂点のうち、ホイール２０の車軸との距離が最も小さくなる頂点を選択する。検出部５４は、選択した頂点と、ホイール２０の車軸とを結ぶ線分Ｌ２を特定する。検出部５４は、線分Ｌ１と線分Ｌ２とのなす角度Ａを求める。検出部５４は、基準画像において同様にして求めた角度Ａ’を記憶部４から読み出す。
　角度Ａ’と、角度Ａとが一致しない場合、現在ホイールナット２０２が基準画像の撮像時から回転したことが分かる。検出部５４は、求めた角度の差が第１閾値以上である場合に、現在ホイールナット２０２の緩みを検出する。第１閾値は、例えば、基準ホイールナットの角度に対する変化が許容される角度の最大値として予め設定された角度である。第１閾値は、検出部５４が検出可能な角度の最小値であってもよい。一方、検出部５４は、求めた角度の差が第１閾値未満である場合に、現在ホイールナット２０２の緩みを検出しない。
　また、検出部５４は、基準画像の基準位置に対する基準ホイールナットの回転方向の回転角度と、現在ホイールナット２０２が写っている撮像画像の基準位置に対する現在ホイールナット２０２の回転方向の回転角度との差が第２閾値以上である場合に、基準ホイールナットに対して現在ホイールナット２０２が回転したことを検出してもよい。
　例えば、検出部５４は、基準ホイールナットの真下に基準位置が位置するように基準画像を回転させる。同様に、検出部５４は、特定部５３が特定した現在ホイールナット２０２の真下に基準位置が位置するように撮像画像を回転させる。検出部５４は、基準画像の回転後の基準ホイールナットと、撮像画像の回転後の現在ホイールナット２０２とを比較する。検出部５４は、基準ホールナットに対し、現在ホイールナット２０２が回転した回転角度を求める。検出部５４は、求めた回転角度が第２閾値以上である場合に、現在ホイールナット２０２の緩みを検出する。第２閾値は、例えば、基準ホイールナットの角度に対する変化が許容される角度の最大値として予め設定された角度である。第２閾値は、検出部５４が検出可能な角度の最小値であってもよい。
　表示制御部５５は、各種の画像や文字を表示部３に表示させる。例えば、表示制御部５５は、ホイールナットの点検時に、車両２００の左前輪のホイール２０を撮像することを指示するメッセージを表示部３に表示させる。表示制御部５５は、図３に示すように、ユーザにより撮像が指示される前の撮像画像を事前表示画像として表示部３に表示させる。
［ホイールナットの緩みの通知］
　通知部５６は、検出部５４が現在ホイールナット２０２の緩みを検出すると、現在ホイールナット２０２が緩んでいることをユーザに通知する。図５は、通知部５６が現在ホイールナット２０２の緩みを通知する方法の例を示す図である。通知部５６は、現在ホイールナット２０２の緩みを検出したことを示すメッセージを表示する。通知部５６は、検出部５４が緩みを検出した現在ホイールナット２０２を示す情報を表示する。図５の例では、通知部５６は、検出部５４が緩みを検出した現在ホイールナット２０２を示す二重丸印をホイール２０の撮像画像に付して表示部３に表示させる。
　検出部５４が同じホイール２０に含まれる多数の現在ホイールナット２０２の緩みを検出した場合、基準画像に含まれるホイール２０と、撮像画像に含まれるホイール２０とが異なる可能性がある。通知部５６は、撮像画像に含まれるホイール２０の所定数以上の現在ホイールナット２０２の緩みを検出部５４が検出した場合に、基準画像に含まれるホイールと、撮像画像に含まれるホイールとが異なることをユーザに通知する。所定数は、例えば、ホイール２０に含まれる現在ホイールナット２０２の総数の約２分の１である。
［ホイールナットの緩みの検出の処理手順］
　図６は、通知装置１００によるホイールナットの緩みの検出の処理手順を示す図である。この処理手順は、例えば、車両２００の複数のホイール２０のうち、いずれかのホイール２０を撮像することを指示するメッセージが表示部３に表示された後、事前表示画像を表示させるユーザの指示を受付部５１が受け付けたときに開始する。
　まず、表示制御部５５は、事前表示画像を表示部３に表示させる（Ｓ１０１）。受付部５１は、基準位置の指定を受け付けたか否かを判定する（Ｓ１０２）。取得部５２は、基準位置の指定を受付部５１が受け付けた場合に（Ｓ１０２のＹＥＳ）、車両２００のホイール２０を撮像した撮像画像を取得する（Ｓ１０３）。特定部５３は、取得部５２が過去に取得した同じホイール２０の撮像画像である基準画像を記憶部４から読み出す。特定部５３は、基準画像に含まれる複数のホイールナットのうち、未選択のホイールナットを基準ホイールナットとして選択する（Ｓ１０４）。
　特定部５３は、選択した基準ホイールナットと同じ位置の現在ホイールナット２０２を特定する（Ｓ１０５）。検出部５４は、基準ホイールナットに対し、特定部５３が特定した現在ホイールナット２０２が回転したことを検出することにより、現在ホイールナット２０２の緩みの有無を検出する。通知部５６は、現在ホイールナット２０２の緩みを検出部５４が検出したか否かを判定する（Ｓ１０６）。通知部５６は、現在ホイールナット２０２の緩みを検出部５４が検出したと判定すると（Ｓ１０６のＹＥＳ）、現在ホイールナット２０２が緩んでいることをユーザに通知する（Ｓ１０７）。特定部５３は、基準画像に含まれる複数のホイールナットのうち、未選択のホイールナットがあるか否かを判定する（Ｓ１０８）。特定部５３は、未選択のホイールナットがないと判定した場合（Ｓ１０８のＮＯ）、処理を終了する。
　受付部５１は、Ｓ１０２の判定において基準位置の指定を受け付けていない場合に（Ｓ１０２のＮＯ）、Ｓ１０２の判定を繰り返す。通知部５６は、Ｓ１０６の判定において現在ホイールナット２０２の緩みを検出部５４が検出していないと判定すると（Ｓ１０６のＮＯ）、Ｓ１０８の判定に移る。特定部５３は、Ｓ１０８の判定において未選択のホイールナットがあると判定した場合（Ｓ１０８のＹＥＳ）、Ｓ１０４の処理に戻る。
［本発明による効果］
　本実施形態によれば、検出部５４は、基準ホイールナットに対し、現在ホイールナット２０２が回転したことを検出することにより、現在ホイールナット２０２の緩みを検出することができる。したがって、通知装置１００は、ホイールナットの緩みを検出する作業を簡略化することができる。
［基準位置の指定の変形例］
　図３の例では、受付部５１は、ユーザのタッチ操作が行われた位置を基準位置とするように、基準位置の指定を受け付ける。しかしながら、本発明は、これに限定されない。受付部５１は、基準位置を指定するための枠により、基準位置の指定を受け付けてもよい。図７は、受付部５１が基準位置の指定を受け付ける処理の別の例を示す図である。図７の例では、表示制御部５５は、基準位置を指定するための枠６１を含む事前表示画像を表示部３に表示させる。図７の例では、「車両の左前輪のエアバルブが枠内に入るように撮像してください。」というメッセージが表示されている。取得部５２は、撮像ボタン６２に対するユーザの操作を受付部５１が受け付けると、ホイール２０の撮像画像を取得する。このとき、受付部５１は、枠６１内の位置が基準位置として指定されたものとして撮像ボタン６２の操作を受け付けてもよい。
　また、受付部５１は、事前表示画像の表示領域６０に対する基準位置の指定を受け付ける例に限定されない。例えば、表示制御部５５は、取得部５２が取得したホイール２０の撮像画像を表示部３に表示する。受付部５１は、表示部３に表示されている撮像画像の表示領域に対する基準位置の指定を受け付けてもよい。
　以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されず、その要旨の範囲内で種々の変形及び変更が可能である。例えば、装置の全部又は一部は、任意の単位で機能的又は物理的に分散・統合して構成することができる。また、複数の実施の形態の任意の組み合わせによって生じる新たな実施の形態も、本発明の実施の形態に含まれる。組み合わせによって生じる新たな実施の形態の効果は、もとの実施の形態の効果を併せ持つ。
１　タッチパネル
２　撮像部
３　表示部
４　記憶部
５　制御部
２０　前回ホイール
２０　ホイール
５１　受付部
５２　取得部
５３　特定部
５４　検出部
５５　表示制御部
５６　通知部
６０　表示領域
６１　枠
６２　撮像ボタン
１００　通知装置
２００　車両
２０１　エアバルブ
２０２　現在ホイールナット

Claims (8)

  1. 　車両のホイールを撮像した撮像画像を取得する取得部と、
    　前記撮像画像における前記ホイールに設けられた複数の現在ホイールナットの位置を識別するための基準位置の指定を受け付ける受付部と、
    　過去に前記取得部が取得した前記撮像画像である基準画像と、前記基準画像の前記基準位置とを関連付けて記憶する記憶部と、
    　前記基準画像の前記基準位置に基づいて前記基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットを選択し、前記受付部が受け付けた前記基準位置に対して、前記取得部が取得した前記撮像画像から、前記基準ホイールナットと同じ位置の前記現在ホイールナットを特定する特定部と、
    　前記基準画像に含まれる前記基準ホイールナットに対し、前記特定部が特定した前記現在ホイールナットが回転したことを検出することにより、前記現在ホイールナットの緩みを検出する検出部と、
    　前記検出部が前記現在ホイールナットの緩みを検出すると、前記現在ホイールナットが緩んでいることをユーザに通知する通知部と、を備える、
    　通知装置。
  2. 　ユーザにより撮像が指示される前の前記撮像画像を事前表示画像として表示部に表示させる表示制御部をさらに含み、
    　前記受付部は、前記事前表示画像の表示領域に対する前記基準位置の指定を受け付ける、
    　請求項１に記載の通知装置。
  3. 　前記取得部は、前記受付部が基準位置の指定を受け付けたときに前記撮像画像を取得する、
    　請求項２に記載の通知装置。
  4. 　ユーザにより撮像が指示される前の前記撮像画像を事前表示画像として表示し、前記基準位置を指定するための枠を含む当該事前表示画像を表示部に表示させる表示制御部をさらに含む、
    　請求項１に記載の通知装置。
  5. 　前記通知部は、前記撮像画像に含まれるホイールの所定数以上の前記現在ホイールナットの緩みを前記検出部が検出した場合に、前記基準画像に含まれるホイールと、前記撮像画像に含まれるホイールとが異なることをユーザに通知する、
    　請求項１から４のいずれか一項に記載の通知装置。
  6. 　前記検出部は、前記基準ホイールナットに対し、前記現在ホイールナットが回転した回転角度を求め、求めた回転角度が閾値以上である場合に、前記現在ホイールナットの緩みを検出する、
    　請求項１から５のいずれか一項に記載の通知装置。
  7. 　コンピュータに実行させる、
    　車両のホイールを撮像した撮像画像を取得するステップと、
    　前記撮像画像における前記ホイールに設けられた複数の現在ホイールナットの位置を識別するための基準位置の指定を受け付けるステップと、
    　過去に取得した前記撮像画像である基準画像と、前記基準画像の前記基準位置とを関連付けて記憶するステップと、
    　前記基準画像の前記基準位置に基づいて前記基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットを選択し、受け付けた前記基準位置に対して、取得した前記撮像画像から、前記基準ホイールナットと同じ位置の前記現在ホイールナットを特定するステップと、
    　前記基準画像に含まれる前記基準ホイールナットに対し、特定した前記現在ホイールナットが回転したことを検出することにより、前記現在ホイールナットの緩みを検出するステップと、
    　前記現在ホイールナットの緩みを検出すると、前記現在ホイールナットが緩んでいることをユーザに通知するステップと、を備える、
    　通知方法。
  8. 　コンピュータに、
    　車両のホイールを撮像した撮像画像を取得するステップと、
    　前記撮像画像における前記ホイールに設けられた複数の現在ホイールナットの位置を識別するための基準位置の指定を受け付けるステップと、
    　過去に取得した前記撮像画像である基準画像と、前記基準画像の前記基準位置とを関連付けて記憶するステップと、
    　前記基準画像の前記基準位置に基づいて前記基準画像に含まれる複数のホイールナットのうちの１つである基準ホイールナットを選択し、受け付けた前記基準位置に対して、取得した前記撮像画像から、前記基準ホイールナットと同じ位置の前記現在ホイールナットを特定するステップと、
    　前記基準画像に含まれる前記基準ホイールナットに対し、特定した前記現在ホイールナットが回転したことを検出することにより、前記現在ホイールナットの緩みを検出するステップと、
    　前記現在ホイールナットの緩みを検出すると、前記現在ホイールナットが緩んでいることをユーザに通知するステップと、
    　を実行させるための、プログラム。
PCT/JP2021/009533 2020-03-11 2021-03-10 通知装置、通知方法及びプログラム WO2021182511A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US17/905,516 US20230122897A1 (en) 2020-03-11 2021-03-10 Notification device, notification method and program
CN202180018835.8A CN115298527A (zh) 2020-03-11 2021-03-10 通知装置、通知方法和程序
DE112021001560.5T DE112021001560T5 (de) 2020-03-11 2021-03-10 Benachrichtigungsvorrichtung, Benachrichtigungsverfahren und -programm

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-041746 2020-03-11
JP2020041746A JP2021143892A (ja) 2020-03-11 2020-03-11 通知装置、通知方法及びプログラム

Publications (1)

Publication Number Publication Date
WO2021182511A1 true WO2021182511A1 (ja) 2021-09-16

Family

ID=77672390

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2021/009533 WO2021182511A1 (ja) 2020-03-11 2021-03-10 通知装置、通知方法及びプログラム

Country Status (5)

Country Link
US (1) US20230122897A1 (ja)
JP (1) JP2021143892A (ja)
CN (1) CN115298527A (ja)
DE (1) DE112021001560T5 (ja)
WO (1) WO2021182511A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023089659A1 (ja) * 2021-11-16 2023-05-25 太平洋工業株式会社 緩み検知装置、及び緩み検知プログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05246203A (ja) * 1992-03-10 1993-09-24 Nissan Motor Co Ltd 自動車の車輪自動取付方法
JPH08278116A (ja) * 1995-04-07 1996-10-22 Central Japan Railway Co ボルト緩み検査方法及びボルト緩み検査装置
US20100274607A1 (en) * 2007-11-30 2010-10-28 Volvo Lastvagnar Ab Method of identifying positions of wheel modules
JP2011053059A (ja) * 2009-09-01 2011-03-17 Hitachi Ltd 車両検査装置
JP2014089068A (ja) * 2012-10-29 2014-05-15 Uchimura:Kk 位置ずれ検出具、位置ずれ検出装置、位置ずれ検出システム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6545501B2 (ja) 2015-03-30 2019-07-17 Ntn株式会社 車輪締結状態の判定装置
US20200226902A1 (en) * 2015-12-30 2020-07-16 Bmmpr Multipurpose event detection sensor and payload alert system
US11474519B2 (en) * 2018-02-26 2022-10-18 Nvidia Corporation Systems and methods for computer-assisted shuttles, buses, robo-taxis, ride-sharing and on-demand vehicles with situational awareness
EP4069985A4 (en) * 2019-12-05 2023-08-23 Volvo Truck Corporation METHOD, DEVICE, SYSTEM AND COMPUTER PROGRAM FOR DETECTING WHEEL FASTENER LOOSENING AND COMPUTER READABLE MEDIA STORING A COMPUTER PROGRAM

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05246203A (ja) * 1992-03-10 1993-09-24 Nissan Motor Co Ltd 自動車の車輪自動取付方法
JPH08278116A (ja) * 1995-04-07 1996-10-22 Central Japan Railway Co ボルト緩み検査方法及びボルト緩み検査装置
US20100274607A1 (en) * 2007-11-30 2010-10-28 Volvo Lastvagnar Ab Method of identifying positions of wheel modules
JP2011053059A (ja) * 2009-09-01 2011-03-17 Hitachi Ltd 車両検査装置
JP2014089068A (ja) * 2012-10-29 2014-05-15 Uchimura:Kk 位置ずれ検出具、位置ずれ検出装置、位置ずれ検出システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023089659A1 (ja) * 2021-11-16 2023-05-25 太平洋工業株式会社 緩み検知装置、及び緩み検知プログラム

Also Published As

Publication number Publication date
US20230122897A1 (en) 2023-04-20
DE112021001560T5 (de) 2023-02-23
JP2021143892A (ja) 2021-09-24
CN115298527A (zh) 2022-11-04

Similar Documents

Publication Publication Date Title
TWI405134B (zh) Driver face image recognition system
US8908991B2 (en) Image processing apparatus, image processing method and storage medium
JP3394278B2 (ja) 視覚センサ座標系設定治具及び設定方法
WO2021182511A1 (ja) 通知装置、通知方法及びプログラム
JP6182629B2 (ja) 車両用表示システム
JP4934454B2 (ja) 画像読取装置
JP2018180875A (ja) 判定装置、判定方法および判定プログラム
WO2022168616A1 (ja) 装置判別システム、装置判別方法及び装置判別プログラム
US20130328936A1 (en) Display apparatus and method for rotating displayed content
JP4968093B2 (ja) 光学的情報読取装置
JP2010071951A (ja) 視覚検査装置および視覚検査方法
JP2019004204A (ja) 画像処理装置、画像出力装置およびコンピュータプログラム
JP4855278B2 (ja) カメラパラメータ取得装置
WO2021111599A1 (en) Method, device, system, and computer program for detecting wheel fastener looseness and computer-readable medium storing computer program
JP2008241424A (ja) 画像処理装置及びこれを用いた画像処理方法
US20210201511A1 (en) Image processing apparatus, image processing method, and storage medium
US20090146971A1 (en) Operation display device
JPS6378295A (ja) 運送中の荷物の監視装置
JP4587581B2 (ja) 車載センサシステム
JP6855254B2 (ja) 画像処理装置、画像処理システム、及び、画像処理方法
US20230306707A1 (en) Around view monitoring system and the method thereof
JP3084843B2 (ja) 画像処理装置
US10609250B2 (en) Image reading apparatus and method for controlling the same
CN109827759B (zh) 应用于光学模组的缺陷检测方法及检测装置
JP5007960B2 (ja) 光学的情報読取装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21768113

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 21768113

Country of ref document: EP

Kind code of ref document: A1