DE112021001560T5

DE112021001560T5 - Benachrichtigungsvorrichtung, Benachrichtigungsverfahren und -programm

Info

Publication number: DE112021001560T5
Application number: DE112021001560.5T
Authority: DE
Inventors: Akira Imai
Original assignee: Isuzu Motors Ltd
Current assignee: Isuzu Motors Ltd
Priority date: 2020-03-11
Filing date: 2021-03-10
Publication date: 2023-02-23
Also published as: WO2021182511A1; US20230122897A1; CN115298527A; JP2021143892A

Abstract

Die vorliegende Erfindung umfasst: eine Erfassungseinheit 52, die ein aufgenommenes Bild erfasst, in dem ein Rad eines Fahrzeugs 200 abgebildet ist; eine Empfangseinheit 51, die eine Klassifizierung einer Referenzposition empfängt; eine Spezifizierungseinheit 53, die aus dem erfassten Bild eine aktuelle Radmutter an derselben Position wie eine Referenzradmutter bezüglich der Referenzposition spezifiziert; eine Spezifizierungseinheit 53, die bezüglich der Referenzposition eine aktuelle Radmutter an derselben Position wie die Referenzradmutter spezifiziert, die eine aus mehreren in dem Referenzbild enthaltenen Radmuttern ist, die in einem von der Erfassungseinheit 52 zu einem früheren Zeitpunkt erfassten Referenzbild enthalten sind; eine Erkennungseinheit 54, die eine Lockerheit der aktuellen Radmutter, die durch die Spezifikationseinheit 53 spezifiziert ist, durch Erkennen der Drehung der aktuellen Radmutter bezüglich der Referenzradmutter, die in dem Referenzbild enthalten ist, erkennt; und eine Benachrichtigungseinheit 56, die einen Benutzer über die Lockerheit der aktuellen Radmutter benachrichtigt, wenn die Erkennungseinheit 54 die Lockerheit der aktuellen Radmutter erfasst.

Description

[Technisches Gebiet]
Die vorliegende Beschreibung bezieht sich auf eine Benachrichtigungsvorrichtung, ein Verfahren und ein Programm zur Benachrichtigung über eine lockere Radmutter.
[HINTERGRUND DER ERFINDUNG]
Ein Verfahren zur automatischen Erkennung der Lockerheit einer Radmutter ist bekannt (siehe z.B. Druckschrift 1). Die Druckschrift 1 beschreibt die Messung der Dehnung eines Abstandselements, das eine Befestigungskraft von einer Radmutter aufnimmt, mit einem Dehnungssensor und die Erkennung der Lockerheit der Radmutter basierend auf dem Messergebnis.
[STAND DER TECHNIK]
[Patentschrift]
Druckschrift 1: JP 2016-187977 A.
[KURZBESCHREIBUNG DER ERFINDUNG]
[PROBLEM, DAS DURCH DIE ERFINDUNG GELÖST WERDEN SOLL]
Da bei dem in der Druckschrift 1 beschriebenen Verfahren an jeder Radmutter ein Dehnungssensor angebracht werden muss und eine Stromversorgung und eine Kommunikationseinrichtung für die Dehnungssensoren sichergestellt werden muss, besteht das Problem, dass der Vorgang zur Erfassung der Lockerheit einer Radmutter umständlich ist.
Es ist ein Ziel der vorliegenden Offenbarung, eine Benachrichtigungsvorrichtung und ein Programm für ein Verfahren zur Benachrichtigung vorzusehen, die den Vorgang der Feststellung der Lockerheit einer Radmutter vereinfachen können.
[MITTEL ZUR LÖSUNG DES PROBLEMS]
Eine Benachrichtigungsvorrichtung des ersten Aspekts der vorliegenden Offenbarung enthält eine Erfassungseinheit, die ein aufgenommenes Bild eines Rades eines Fahrzeugs erfasst, eine Empfangseinheit, die eine Klassifizierung einer Referenzposition empfängt, um Positionen mehrerer aktueller Radmuttern zu identifizieren, die an dem Rad in dem aufgenommenen Bild vorhanden sind, eine Speichereinheit, die ein Referenzbild, das das von der Erfassungseinheit zu einem früheren Zeitpunkt erfasste Bild repräsentiert, und die Referenzposition des Referenzbildes gemeinsam speichert, eine Spezifizierungseinheit, die basierend auf der Referenzposition des Referenzbildes eine Referenzradmutter aus mehreren in dem Referenzbild enthaltenen Radmuttern auswählt und die aktuelle Radmutter an derselben Position wie die Referenzradmutter aus dem von der Erfassungseinheit erfassten Bild bezüglich der von der Empfangseinheit empfangenen Referenzposition spezifiziert, eine Erkennungseinheit, die eine Lockerheit der aktuellen Radmutter erkennt, indem sie erkennt, dass die aktuelle Radmutter, die durch die Spezifizierungseinheit spezifiziert wurde, sich bezüglich der Referenzradmutter, die in dem Referenzbild enthalten ist, gedreht hat, und eine Benachrichtigungseinheit, die einen Benutzer benachrichtigt, dass die aktuelle Radmutter locker ist, sobald die Erkennungseinheit eine Lockerheit der aktuellen Radmutter erkennt.
Die Benachrichtigungsvorrichtung kann ferner eine Anzeigesteuereinheit umfassen, die eine Anzeigeeinheit dazu veranlasst, als vorläufiges Anzeigebild das aufgenommene Bild anzuzeigen, das aufgenommen wurde, bevor eine Anweisung zur Aufnahme eines Bildes von einem Benutzer ausgegeben wird, wobei die Empfangseinheit die Klassifizierung der Referenzposition in Bezug auf einen Anzeigenbereich des vorläufigen Anzeigebildes empfangen kann. Die Erfassungseinheit kann das aufgenommene Bild erfassen, wenn die Empfangseinheit die Klassifizierung der Bezugsposition empfängt.
Die Benachrichtigungsvorrichtung kann ferner eine Anzeigesteuereinheit umfassen, die als vorläufiges Anzeigebild das aufgenommene Bild anzeigt, das aufgenommen wurde, bevor eine Anweisung zur Aufnahme eines Bildes von einem Benutzer ausgegeben wird, und die die Anzeigeeinheit veranlasst, das vorläufige Anzeigebild anzuzeigen, das einen Rahmen zur Klassifizierung der Bezugsposition enthält. Die Benachrichtigungseinheit kann einen Benutzer darüber informieren, dass sich ein im Referenzbild enthaltenes Rad von einem im aufgenommenen Bild enthaltenen Rad unterscheidet, wenn die Erkennungseinheit feststellt, dass eine vorbestimmte Anzahl oder mehr der aktuellen Radmuttern des im aufgenommenen Bild enthaltenen Rades locker sind. Die Erkennungseinheit kann einen Drehwinkel berechnen, um den sich die aktuelle Radmutter bezüglich der Referenzradmutter gedreht hat, und eine Lockerung der aktuellen Radmutter erkennt, wenn der berechnete Drehwinkel gleich oder größer als ein Schwellenwert ist.
Ein Verfahren des zweiten Aspekts der vorliegenden Offenbarung enthält die von einem Computer ausgeführten Schritte des Erfassens eines aufgenommenen Bildes eines Rades eines Fahrzeugs, des Empfangens einer Klassifizierung einer Referenzposition zur Identifizierung von Positionen mehrerer aktueller Radmuttern, die an dem Rad in dem aufgenommenen Bild vorhanden sind, des gemeinsames Speichern eines Referenzbildes, das das zuvor aufgenommene Bild repräsentiert, und der Referenzposition des Referenzbildes, des Auswählens einer Referenzradmutter aus mehreren in dem Referenzbild enthaltenen Radmuttern, basierend auf der Referenzposition des Referenzbildes, und Spezifizieren der aktuellen Radmutter an derselben Position wie die Referenzradmutter aus dem erfassten Bild bezüglich der empfangenen Referenzposition, des Erkennens einer Lockerheit der aktuellen Radmutter durch Erkennen, dass sich die spezifizierte aktuelle Radmutter bezüglich der in dem Referenzbild enthaltenen Referenzradmutter gedreht hat; und des Benachrichtigens eines Benutzers, dass die aktuelle Radmutter locker ist, wenn die Lockerheit der aktuellen Radmutter erkannt wird.
Ein Programm des dritten Aspekts der vorliegenden Offenbarung veranlasst einen Computer, die folgenden Schritte auszuführen: Erfassen eines aufgenommenen Bildes eines Rades eines Fahrzeugs, Empfangen einer Klassifizierung einer Referenzposition zur Identifizierung von Positionen mehrerer aktueller Radmuttern, die an dem Rad in dem aufgenommenen Bild vorhanden sind, Gemeinsames Speichern eines Referenzbildes, das das zuvor aufgenommene Bild repräsentiert, und der Referenzposition des Referenzbildes, Auswählen einer Referenzradmutter aus mehreren in dem Referenzbild enthaltenen Radmuttern, basierend auf der Referenzposition des Referenzbildes, und Spezifizieren der aktuellen Radmutter an derselben Position wie die Referenzradmutter aus dem erfassten Bild bezüglich der empfangenen Referenzposition, Erkennen einer Lockerheit der aktuellen Radmutter durch Erkennen, dass sich die spezifizierte aktuelle Radmutter bezüglich der in dem Referenzbild enthaltenen Referenzradmutter gedreht hat, und Benachrichtigen eines Benutzers, dass die aktuelle Radmutter locker ist, wenn die Lockerheit der aktuellen Radmutter erkannt wird.
[TECHNICHER EFFEKT DER ERFINDUNG]
Gemäß der vorliegenden Offenbarung ist es möglich, die Erkennung einer Lockerheit einer Radmutter zu vereinfachen.
Figurenliste

1 ist ein Schaubild, das einen Umriss einer Benachrichtigungsvorrichtung gemäß einer Ausführungsform zeigt.
2 ist ein Schaubild, das eine Konfiguration der Benachrichtigungsvorrichtung zeigt.
3 ist ein Schaubild, das ein Beispiel für einen Prozess zeigt, bei dem eine Empfangseinheit eine Referenzposition erhält.
4 ist ein Schaubild, das ein Beispiel für ein Verfahren zur Erkennung der Lockerheit einer aktuellen Radmutter mit einer Erkennungseinheit zeigt.
5 ist ein Schaubild, das ein Beispiel für ein Verfahren zeigt, bei dem eine Benachrichtigungseinheit über die Lockerheit der aktuellen Radmutter benachrichtigt.
6 ist ein Flussdiagramm, das ein Verfahren zur Feststellung der Lockerheit einer Radmutter zeigt, das von der Benachrichtigungsvorrichtung ausgeführt wird.
7 ist ein Schaubild, das ein weiteres Beispiel eines Verfahrens veranschaulicht, bei dem die Empfangseinheit eine Klassifizierung einer Referenzposition erhält.

[BESCHREIBUNG DER AUSFÜHRUNGSFORMEN]
[Skizze der Benachrichtigungsvorrichtung]
1 ist ein Schaubild, das einen Umriss einer Benachrichtigungsvorrichtung 100 gemäß der vorliegenden Ausführungsform zeigt. Die Benachrichtigungsvorrichtung 100 ist eine Vorrichtung, das von einem Benutzer bedient wird, der ein Fahrzeug 200 inspiziert, und ist beispielsweise ein Informationsterminal, wie ein Smartphone oder ein Tablet. Bei dem Fahrzeug 200 handelt es sich beispielsweise um ein Nutzfahrzeug wie einen Lkw. Die Benachrichtigungsvorrichtung 100 detektiert eine Lockerheit mehrerer Radmuttern, die an einem Rad 20 des Fahrzeugs 200 vorhanden sind.
Zunächst nimmt die Benachrichtigungsvorrichtung 100 ein Bild des Rades 20 auf. Die Benachrichtigungsvorrichtung 100 liest ein Referenzbild aus der Speichereinheit aus, bei dem es sich um ein aufgenommenes Bild handelt, das durch Aufnahme desselben Rades 20 wie bei einem zuvor aufgenommenen Bild erhalten wurde. Das Referenzbild ist ein Bild, das erhalten wurde, nachdem zuvor bestätigt wurde, dass beispielsweise jede Radmutter des Rades 20 nicht locker war. Ferner kann das Referenzbild ein Bild sein, das bei einer früheren Aufnahme des Rades 20 erhalten wurde. Die Benachrichtigungsvorrichtung 100 bestimmt eine aktuelle Radmutter an derselben Position wie eine Radmutter (im Folgenden auch als Referenzradmutter bezeichnet) unter den im Referenzbild enthaltenen Radmuttern aus mehreren im aufgenommenen Bild enthaltenen Radmuttern (im Folgenden als aktuelle Radmuttern bezeichnet).
Obwohl Einzelheiten später beschrieben werden, erkennt die Benachrichtigungsvorrichtung 100 die Lockerheit der aktuellen Radmutter, indem sie feststellt, ob sich die aktuelle Radmutter bezüglich der im Referenzbild enthaltenen Referenzradmutter gedreht hat oder nicht. Wenn die Benachrichtigungsvorrichtung 100 eine Lockerheit der aktuellen Radmutter feststellt, benachrichtigt die Benachrichtigungsvorrichtung 100 den Benutzer, dass die aktuelle Radmutter locker ist. Auf diese Weise kann die Benachrichtigungsvorrichtung 100 den Vorgang des Erkennens der Lockerheit der Radmutter vereinfachen.
[Einrichtung der Benachrichtigungsvorrichtung]
2 ist ein Schaubild, das eine Konfiguration der Benachrichtigungsvorrichtung 100 zeigt. Die Benachrichtigungsvorrichtung 100 enthält ein Touchpanel 1, eine Bilderzeugungseinheit 2, eine Anzeigeeinheit 3, eine Speichereinheit 4 und eine Steuereinheit 5. Das Touchpanel 1 empfängt die Betätigung eines Benutzers auf der Anzeigefläche des Anzeigeteils 3. Die Bilderzeugungseinheit 2 nimmt ein Bild des Rades 20 des Fahrzeugs 200 auf. Die Anzeigeeinheit 3 ist ein Display, das Bilder, Zeichen und dergleichen anzeigt. Die Speichereinheit 4 enthält zum Beispiel einen ROM-Speicher (Read Only Memory), einen RAM-Speiche (Random Access Memory) und dergleichen.
Die Steuereinheit 5 ist zum Beispiel eine CPU (Central Processing Unit). Die Steuereinheit 5 dient als Empfangseinheit 51, als Erfassungseinheit 52, als Spezifizierungseinheit 53, als Erkennungseinheit 54, als Anzeigesteuereinheit 55 und als Benachrichtigungseinheit 56, indem sie ein in der Speichereinheit 4 gespeichertes Programm ausführt.
Die Empfangseinheit 51 empfängt die Betätigung eines Benutzers auf dem Touchpanel 1. Die Empfangseinheit 51 empfängt zum Beispiel eine Operation zur Klassifizierung einer Referenzposition zur Identifizierung von Positionen mehrerer aktueller Radmuttern, die auf dem Rad 20 in dem aufgenommenen Bild vorhanden sind.
[Klassifizierung der Referenzposition]
3 ist ein Schaubild, das ein Beispiel für einen Vorgang veranschaulicht, bei dem die Empfangseinheit 51 eine Referenzposition empfängt. 3 zeigt einen Zustand, in dem die Bilderzeugungseinheit 2 ein Bild des Rades 20 aufnimmt. Ein aufgenommenes Bild, das vor der Ausgabe eines Bildaufnahmebefehls durch den Benutzer aufgenommen wurde, wird als vorläufiges Anzeigebild auf der Anzeigeeinheit 3 angezeigt.
Zum Beispiel wird angenommen, dass in einem Zustand, in dem eine Anwendung der Benachrichtigungsvorrichtung 100 zur Durchführung einer Inspektion des Fahrzeugs 200 vor Fahrtantritt gestartet wird, die Inspektion der Radmuttern vom Benutzer aus mehreren Inspektionspunkten für die Inspektion vor Fahrtantritt ausgewählt wird. Bei der Inspektion der Radmuttern wird, nachdem eine Nachricht, die die Bildaufnahme des linken Vorderrads 20 des Fahrzeugs 200 veranlasst, auf der Anzeigeeinheit 3 angezeigt wird, das in 3 gezeigte vorläufige Anzeigebild angezeigt, wenn die Empfangseinheit 51 eine Anweisung von einem Benutzer erhält, das vorläufige Anzeigebild anzuzeigen.
In dem Beispiel von 3 enthält das vorläufige Anzeigebild ein Rad 20 des Fahrzeugs 200. Das Rad 20 enthält mehrere aktuelle Radmuttern und ein Luftventil 201. Die Empfangseinheit 51 empfängt eine Klassifizierung der Referenzposition des Rades 20 bezüglich des Anzeigenbereichs 60 des vorläufigen Anzeigebildes. Gemäß der vorliegenden Anmeldung entspricht die Referenzposition beispielsweise der Position des Luftventils 201.
Die Erfassungseinheit 52 erfasst das erfasste Bild, das durch Abbildung des Rades 20 des Fahrzeugs 200 mit der Bilderzeugungseinheit 2 erhalten wurde. Zum Beispiel erfasst die Erfassungseinheit 52 das aufgenommene Bild, wenn die Empfangseinheit 51 die Klassifizierung der Referenzposition erhält. Im Beispiel von 3 wird auf der Anzeigeeinheit 3 die Meldung „Wenn die Position des Luftventils des linken Vorderrads des Fahrzeugs durch eine Berührung klassifiziert wird, wird ein Bild aufgenommen.“ angezeigt. Wenn die Empfangseinheit 51 eine Klassifizierung der Position des Luftventils als Referenzposition empfängt, nimmt die Erfassungseinheit 52 ein Bild des Rades 20 auf. Daher muss der Benutzer keine separaten Anweisungen zur Erfassung des erfassten Bildes erteilen.
Die Spezifizierungseinheit 53 spezifiziert die relativen Positionen der mehreren aktuellen Radmuttern in Bezug auf die Referenzposition, die in dem von der Erfassungseinheit 52 aufgenommenen Bild enthalten ist. Zum Beispiel spezifiziert die Spezifizierungseinheit 53 aus dem von der Erfassungseinheit 52 erfassten Bild die Ordnungszahl jeder der aktuellen Radmuttern im Uhrzeigersinn von der Referenzposition des Rades 20 als die relativen Positionen.
Die Speichereinheit 4 speichert ein Referenzbild, bei dem es sich um ein in der Vergangenheit von der Erfassungseinheit 52 erfasstes Bild des Rades 20 handelt, Informationen, die die Referenzposition des Referenzbildes angeben, und Fahrzeugidentifizierungsinformationen zur Identifizierung des Fahrzeugs 200 in Verbindung miteinander. Die Referenzposition des Referenzbildes ist eine Position, die von der Empfangseinheit 51 klassifiziert wird, während das Referenzbild als vorläufiges Anzeigebild auf der Anzeigeeinheit 3 angezeigt wird. Die Erfassungseinheit 52 speichert das aufgenommene Bild, das als das Referenzbild dient, in der Speichereinheit 4 in Verbindung mit der Information, die die von der Empfangseinheit 51 bezeichnete Referenzposition angibt.
Die Spezifizierungseinheit 53 liest aus der Speichereinheit 4, i) das Referenzbild, das demselben Rad entspricht wie das Rad, das dem aufgenommenen Bild entspricht, und ii) die Information, die die Referenzposition dieses Referenzbildes angibt, aus den Referenzbildern, die mit den Fahrzeugidentifikationsinformationen einhergehen, die vom Benutzer bei der Anwendung der Benachrichtigungsvorrichtung 100 zur Durchführung der Vorfahrtkontrolle des Fahrzeugs 200 ausgewählt wurden. Mehrere Referenzbilder, die mehreren Rädern 20 des Fahrzeugs 200 entsprechen, gehen mit einer Fahrzeugidentifikationsinformation einher. Als Beispiel liest die Spezifizierungseinheit 53 ein Referenzbild, das das linke Vorderrad 20 enthält, das der Meldung „Wenn die Position des Luftventils des linken Vorderrads des Fahrzeugs durch eine Berührung klassifiziert wird, wird ein Bild aufgenommen.“ (3), die auf der Anzeigeeinheit 3 angezeigt wird, aus mehreren Referenzbildern, die mit den vom Benutzer ausgewählten Fahrzeugidentifikationsinformationen einhergehen.
Die Spezifizierungseinheit 53 wählt eine beliebige Radmutter aus mehreren aktuellen Radmuttern, die in dem gelesenen Referenzbild enthalten sind, als Referenzradmutter aus. Die Spezifizierungseinheit 53 wählt die Referenzradmutter basierend auf der Referenzposition des Referenzbildes aus. Zum Beispiel wählt die Spezifizierungseinheit 53 die erste Radmutter im Uhrzeigersinn, mit der Referenzposition als Ausgangspunkt, als Referenzradmutter aus. Die Spezifizierungseinheit 53 spezifiziert die aktuelle Radmutter 202 an der gleichen Position, bezüglich der Referenzposition, wie die ausgewählte Referenzradmutter, basierend auf der relativen Position der spezifizierten aktuellen Radmutter.
[Erkennung der Lockerheit der aktuellen Radmutter]
Die Erkennungseinheit 54 erkennt die Lockerheit der aktuellen Radmutter, indem sie feststellt, dass die durch die Spezifizierungseinheit 53 spezifizierte aktuelle Radmutter sich bezüglich der im Referenzbild enthaltenen Referenzradmutter gedreht hat.
4 ist ein Schaubild, das ein Beispiel für ein Verfahren zur Erkennung der Lockerheit der aktuellen Radmutter 202 zeigt, das von der Erkennungseinheit 54 ausgeführt wird. Die Erkennungseinheit 54 identifiziert ein Liniensegment L1, das die Mitte der aktuellen Radmutter 202, die durch die Spezifizierungseinheit 53 spezifiziert wurde, und die Achse des Rades 20 verbindet. Die Erkennungseinheit 54 wählt aus den sechs Scheitelpunkten der sechseckigen Form der aktuellen Radmutter 202 den Scheitelpunkt aus, dessen Abstand zur Achse des Rades 20 am geringsten ist. Die Erkennungseinheit 54 identifiziert ein Liniensegment L2, das den ausgewählten Scheitelpunkt und die Achse des Rades 20 verbindet. Die Erkennungseinheit 54 berechnet einen Winkel A, der von dem Liniensegment L1 und dem Liniensegment L2 gebildet wird. Die Erkennungseinheit 54 liest aus der Speichereinheit 4 einen Winkel A', der auf die gleiche Weise im Referenzbild erhalten wurde.
Wenn der Winkel A' nicht mit dem Winkel A übereinstimmt, wird davon ausgegangen, dass sich die aktuelle Radmutter 202 seit der Aufnahme des Referenzbildes gedreht hat. Wenn die Differenz zwischen den berechneten Winkeln gleich oder größer als ein erster Schwellenwert ist, erkennt die Erkennungseinheit 54 eine Lockerheit der aktuellen Radmutter 202. Bei dem ersten Schwellenwert handelt es sich beispielsweise um einen Winkel, der im Voraus als Maximalwert des Winkels der tolerierbaren Veränderung im Verhältnis zum Winkel der Referenzradmutter festgelegt wurde. Der erste Schwellenwert kann ein minimaler Wert eines Winkels sein, der von der Erkennungseinheit 54 erkannt werden kann. Andererseits, wenn die Differenz zwischen den berechneten Winkeln kleiner als der erste Schwellenwert ist, erkennt die Erkennungseinheit 54 keine Lockerheit der aktuellen Radmutter 202.
Ferner kann die Erkennungseinheit 54 erkennen, dass sich die aktuelle Radmutter 202 bezüglich der Referenzradmutter gedreht hat, wenn die Differenz zwischen i) dem Drehwinkel der Referenzradmutter in der Drehrichtung bezüglich der Referenzposition des Referenzbildes und ii) dem Drehwinkel der aktuellen Radmutter 202 in der Drehrichtung bezüglich der Referenzposition des aufgenommenen Bildes, in dem die aktuelle Radmutter 202 aufgenommen ist, gleich oder größer als ein zweiter Schwellenwert ist.
Zum Beispiel dreht die Erkennungseinheit 54 das Referenzbild so, dass sich die Referenzposition unmittelbar unter der Referenzradmutter befindet. In ähnlicher Weise dreht die Erkennungseinheit 54 das erfasste Bild so, dass die Referenzposition unmittelbar unter der aktuellen Radmutter 202 liegt, die von der Spezifizierungseinheit 53 festgelegt wurde. Die Erkennungseinheit 54 vergleicht die Referenzradmutter nach der Drehung des Referenzbildes mit der aktuellen Radmutter 202 nach der Drehung des aufgenommenen Bildes. Die Erkennungseinheit 54 berechnet einen Drehwinkel, bei dem die aktuelle Radmutter 202 relativ zur Referenzradmutter gedreht wird. Wenn der berechnete Drehwinkel gleich oder größer als der zweite Schwellenwert ist, erkennt die Erkennungseinheit 54 eine Lockerheit der aktuellen Radmutter 202. Bei dem zweiten Schwellenwert handelt es sich beispielsweise um einen Winkel, der im Voraus als Maximalwert des Winkels der tolerierbaren Veränderung relativ zum Winkel der Referenzradmutter festgelegt wurde. Der zweite Schwellenwert kann ein minimaler Wert eines Winkels sein, der von der Erkennungseinheit 54 erkannt werden kann.
Die Anzeigesteuereinheit 55 zeigt verschiedene Bilder und Zeichen auf der Anzeigeeinheit 3 an. Zum Beispiel veranlasst die Anzeigesteuereinheit 55 die Anzeigeeinheit 3, eine Meldung anzuzeigen, die eine Bildaufnahme des linken Vorderrads 20 des Fahrzeugs 200 zu dem Zeitpunkt veranlasst, an dem die Radmuttern inspiziert werden. Wie in 3 gezeigt, veranlasst die Anzeigesteuereinheit 55 die Anzeigeeinheit 3, als vorläufiges Anzeigebild ein aufgenommenes Bild anzuzeigen, das aufgenommen wurde, bevor eine Anweisung zur Aufnahme eines Bildes durch den Benutzer erteilt wurde.
[Benachrichtigung über Lockerheit einer Radmutter]
Wenn die Erkennungseinheit 54 eine Lockerheit der aktuellen Radmutter 202 feststellt, benachrichtigt die Benachrichtigungseinheit 56 den Benutzer, dass die aktuelle Radmutter 202 locker ist. 5 ist ein Schaubild, das ein Beispiel für ein Verfahren zeigt, bei dem die Benachrichtigungseinheit 56 eine Meldung über die Lockerheit der aktuellen Radmutter 202 bereitstellt. Die Benachrichtigungseinheit 56 zeigt eine Meldung an, die besagt, dass eine Lockerheit der aktuellen Radmutter 202 festgestellt wurde. Die Benachrichtigungseinheit 56 zeigt Informationen an, die die aktuelle Radmutter 202 angeben, deren Lockerheit von der Erkennungseinheit 54 erkannt worden ist. Im Beispiel von 5 veranlasst die Benachrichtigungseinheit 56 die Anzeigeeinheit 3, auf dem aufgenommenen Bild des Rades 20 einen Doppelkreis anzuzeigen, der die aktuelle Radmutter 202 angibt, deren Lockerheit von der Erkennungseinheit 54 erkannt wurde.
Wenn die Erkennungseinheit 54 die Lockerheit einer großen Anzahl aktueller Radmuttern 202 feststellt, die in demselben Rad 20 enthalten sind, besteht die Möglichkeit, dass sich das im Referenzbild enthaltene Rad 20 von dem im aufgenommenen Bild enthaltenen Rad 20 unterscheidet. Wenn die Erkennungseinheit 54 eine Lockerheit einer vorgegebenen Anzahl oder mehr der aktuellen Radmuttern 202 des im aufgenommenen Bild enthaltenen Rades 20 feststellt, meldet die Benachrichtigungseinheit 56 dem Benutzer, dass sich das im Referenzbild enthaltene Rad von dem im aufgenommenen Bild enthaltenen Rad unterscheidet. Die vorbestimmte Anzahl ist zum Beispiel etwa die Hälfte der Gesamtzahl der aktuellen Radmuttern 202, die in dem Rad 20 enthalten sind.
[Verfahren zur Erkennung der Lockerheit einer Radmutter]
6 ist ein Flussdiagramm, das ein Verfahren zum Erkennen der Lockerheit einer Radmutter zeigt, das von der Benachrichtigungsvorrichtung 100 durchgeführt wird. Dieses Verfahren wird zum Beispiel gestartet, wenn die Empfangseinheit 51 die Anweisung des Benutzers zur Anzeige des vorläufigen Anzeigebildes erhält, nachdem eine Nachricht, die die Bildaufnahme eines der mehreren Räder 20 des Fahrzeugs 200 veranlasst, auf der Anzeigeeinheit 3 angezeigt wurde.
Zunächst zeigt die Anzeigesteuereinheit 55 das vorläufige Anzeigebild auf der Anzeigeeinheit 3 an (S101). Die Empfangseinheit 51 stellt fest, ob eine Klassifizierung einer Referenzposition empfangen wurde oder nicht (S102). Wenn die Empfangseinheit 51 die Klassifizierung der Referenzposition empfangen hat (JA in S102), erfasst die Erfassungseinheit 52 das aufgenommene Bild des Rades 20 des Fahrzeugs 200 (S103). Die Spezifizierungseinheit 53 liest das Referenzbild, d.h. das Bild desselben Rades 20, das in der Vergangenheit von der Erfassungseinheit 52 aufgenommen wurde, aus der Speichereinheit 4. Die Spezifizierungseinheit 53 wählt eine nicht ausgewählte Radmutter aus mehreren Radmuttern, die in dem Referenzbild enthalten sind, als Referenzradmutter aus (S104).
Die Spezifizierungseinheit 53 spezifiziert die aktuelle Radmutter 202 an derselben Position wie die ausgewählte Referenzradmutter (S105). Die Erkennungseinheit 54 erkennt, ob die aktuelle Radmutter 202 locker ist oder nicht, indem sie feststellt, ob die von der Spezifizierungseinheit 53 festgelegte aktuelle Radmutter 202 sich bezüglich der Referenzradmutter gedreht hat. Die Benachrichtigungseinheit 56 stellt fest, ob die Erkennungseinheit 54 eine Lockerheit der aktuellen Radmutter 202 festgestellt hat oder nicht (S106). Wenn die Benachrichtigungseinheit 56 feststellt, dass die Erkennungseinheit 54 eine Lockerheit der aktuellen Radmutter 202 erkannt hat (JA in S106), meldet die Benachrichtigungseinheit 56 dem Benutzer, dass die aktuelle Radmutter 202 locker ist (S107). Die Spezifizierungseinheit 53 bestimmt, ob eine nicht ausgewählte Radmutter unter den mehreren im Referenzbild enthaltenen Radmuttern vorhanden ist oder nicht (S108). Wenn festgestellt wird, dass es „nicht ausgewählte“ Radmuttern gibt (NEIN in S108), beendet die Spezifizierungseinheit 53 das Verfahren.
Wenn in S102 festgestellt wird, dass eine Klassifizierung der Referenzposition nicht empfangen wurde (NEIN in S102), wiederholt die Empfangseinheit 51 die Klassifizierung von S102. Wenn die Benachrichtigungseinheit 56 feststellt, dass die Erkennungseinheit 54 bei der Bestimmung von S106 keine Lockerheit der aktuellen Radmutter 202 erkannt hat (NEIN in S106), wird mit der Bestimmung von S108 fortgefahren. Wenn die Spezifizierungseinheit 53 in S108 feststellt, dass eine nicht ausgewählte Radmutter vorhanden ist (JA in S108), kehrt die Verarbeitung zu S104 zurück.
[Effekte der vorliegenden Erfindung]
Gemäß der vorliegenden Ausführungsform kann die Erkennungseinheit 54 die Lockerheit einer aktuellen Radmutter 202 erkennen, indem sie erkennt, dass die aktuelle Radmutter 202 bezüglich der Referenzradmutter gedreht wird. Daher kann die Benachrichtigungsvorrichtung 100 den Vorgang der Erkennung der Lockerheit der Radmutter vereinfachen.
[Variation der Klassifizierung der Referenzposition]
Im Beispiel von 3 empfängt die Empfangseinheit 51 die Klassifizierung der Referenzposition, beispielsweise die Position, an der die Touchbedienung durch den Anwender vorgenommen wird, als Referenzposition festgelegt wird. Die vorliegende Offenbarung ist jedoch nicht darauf begrenzt. Die Empfangseinheit 51 kann die Klassifizierung der Bezugsposition unter Verwendung eines Rahmens zur Bestimmung der Bezugsposition empfangen. 7 ist ein Schaubild, das ein weiteres Beispiel für ein Verfahren zeigt, bei dem die Empfangseinheit 51 die Klassifizierung der Referenzposition empfängt. In dem Beispiel von 7 veranlasst die Anzeigesteuereinheit 55 die Anzeigeeinheit 3, ein vorläufiges Anzeigebild anzuzeigen, das einen Rahmen 61 zur Klassifizierung der Referenzposition enthält. Im Beispiel von 7 wird die Meldung „Bitte machen Sie ein Bild, bei dem das Luftventil des linken Vorderrads des Fahrzeugs innerhalb des Rahmens liegt.“ angezeigt. Wenn die Empfangseinheit 51 die Betätigung einer Bildaufnahmetaste 62 durch den Anwender erhält, nimmt die Erfassungseinheit 52 ein Bild des Rades 20 auf. Zu diesem Zeitpunkt kann die Empfangseinheit 51 die Betätigung der Bildaufnahmetaste 62 empfangen, während sie annimmt, dass die Position innerhalb des Rahmens 61 als die Referenzposition klassifiziert ist.
Darüber hinaus ist die Empfangseinheit 51 nicht auf das Beispiel des Empfangs der Klassifizierung der Referenzposition im Anzeigenbereich 60 des vorläufigen Anzeigebildes begrenzt. Zum Beispiel zeigt die Anzeigesteuereinheit 55 das von der Erfassungseinheit 52 erfasste Bild des Rades 20 auf der Anzeigeeinheit 3 an. Die Empfangseinheit 51 kann die Klassifizierung der Referenzposition im Anzeigenbereich des auf der Anzeigeeinheit 3 angezeigten erfassten Bildes empfangen.
Die vorliegende Offenbarung wird anhand der beispielhaften Ausführungsformen erläutert. Der technische Umfang der vorliegenden Offenbarung ist nicht auf den in den vorliegenden Ausführungsformen erläuterten Umfang begrenzt, und es ist möglich, verschiedene Änderungen und Modifikationen innerhalb des Umfangs der Offenbarung vorzunehmen. Zum Beispiel kann die gesamte Vorrichtung oder ein Teil davon mit einer beliebigen Einheit eingerichtet werden, die funktionell oder physisch verteilt oder integriert ist. Ferner sind in den vorliegenden Ausführungsformen neue beispielhafte Ausführungsformen enthalten, die durch beliebige Kombinationen von ihnen erzeugt werden. Darüber hinaus haben die technischen Effekte der neuen beispielhaften Ausführungsformen, die durch die Kombinationen erzeugt werden, auch die technischen Effekte der ursprünglichen beispielhaften Ausführungsformen.
Bezugszeichenliste

1: Touchpanel
2: Bilderzeugungseinheit
3: Anzeigeeinheit
4: Speichereinheit
5: Steuereinheit
20: Vorheriges Rad
20: Rad
51: Empfangseinheit
52: Erfassungseinheit
53: Spezifizierungseinheit
54: Erkennungseinheit
55: Anzeigesteuereinheit
56: Benachrichtigungseinheit
60: Anzeigenbereich
61: Rahmen
62: Bildaufnahmetaste
100: Benachrichtigungsvorrichtung
200: Fahrzeug
201: Luftventil
202: aktuelle Radmutter

ZITATE ENTHALTEN IN DER BESCHREIBUNG
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
Zitierte Patentliteratur

JP 2016187977 [0003]

Claims

Benachrichtigungsvorrichtung, umfassend: eine Erfassungseinheit, die ein aufgenommenes Bild eines Rades eines Fahrzeugs erfasst; eine Empfangseinheit, die eine Klassifizierung einer Referenzposition empfängt, um Positionen mehrerer aktueller Radmuttern zu identifizieren, die an dem Rad in dem aufgenommenen Bild vorhanden sind; eine Speichereinheit, die ein Referenzbild, das das von der Erfassungseinheit zu einem früheren Zeitpunkt erfasste Bild repräsentiert, und die Referenzposition des Referenzbildes gemeinsam speichert; eine Spezifizierungseinheit, die basierend auf der Referenzposition des Referenzbildes eine Referenzradmutter aus mehreren in dem Referenzbild enthaltenen Radmuttern auswählt und die aktuelle Radmutter an derselben Position wie die Referenzradmutter aus dem von der Erfassungseinheit erfassten Bild bezüglich der von der Empfangseinheit empfangenen Referenzposition spezifiziert; eine Erkennungseinheit, die eine Lockerheit der aktuellen Radmutter erkennt, indem sie erkennt, dass die aktuelle Radmutter, die durch die Spezifizierungseinheit spezifiziert wurde, sich bezüglich der Referenzradmutter, die in dem Referenzbild enthalten ist, gedreht hat; und eine Benachrichtigungseinheit, die einen Benutzer benachrichtigt, dass die aktuelle Radmutter locker ist, sobald die Erkennungseinheit eine Lockerheit der aktuellen Radmutter erkennt.
Benachrichtigungsvorrichtung gemäß Anspruch 1, die ferner Folgendes umfasst: eine Anzeigesteuereinheit, die eine Anzeigeeinheit dazu veranlasst, als vorläufiges Anzeigebild das aufgenommene Bild anzuzeigen, das aufgenommen wurde, bevor eine Anweisung zur Aufnahme eines Bildes von einem Benutzer ausgegeben wird, wobei die Empfangseinheit die Klassifizierung der Referenzposition in Bezug auf einen Anzeigenbereich des vorläufigen Anzeigebildes empfängt.
Benachrichtigungsvorrichtung gemäß Anspruch 2, wobei die Erfassungseinheit das aufgenommene Bild erfasst, wenn die Empfangseinheit die Klassifizierung der Bezugsposition empfängt.
Benachrichtigungsvorrichtung gemäß Anspruch 1, die ferner umfasst: eine Anzeigesteuereinheit, die als vorläufiges Anzeigebild das aufgenommene Bild anzeigt, das aufgenommen wurde, bevor eine Anweisung zur Aufnahme eines Bildes von einem Benutzer ausgegeben wird, und die die Anzeigeeinheit veranlasst, das vorläufige Anzeigebild anzuzeigen, das einen Rahmen zur Klassifizierung der Bezugsposition enthält.
Benachrichtigungsvorrichtung gemäß einem der Ansprüche 1 bis 4, wobei die Benachrichtigungseinheit einen Benutzer darüber informiert, dass sich ein im Referenzbild enthaltenes Rad von einem im aufgenommenen Bild enthaltenen Rad unterscheidet, wenn die Erkennungseinheit feststellt, dass eine vorbestimmte Anzahl oder mehr der aktuellen Radmuttern des im aufgenommenen Bild enthaltenen Rades locker sind.
Benachrichtigungsvorrichtung gemäß einem der Ansprüche 1 bis 5, wobei die Erkennungseinheit einen Drehwinkel berechnet, um den sich die aktuelle Radmutter bezüglich der Referenzradmutter gedreht hat, und eine Lockerung der aktuellen Radmutter erkennt, wenn der berechnete Drehwinkel gleich oder größer als ein Schwellenwert ist.
Verfahren zum Benachrichtigen umfasst die Folgenden von einem Computer ausgeführte Schritte: Erfassen eines aufgenommenen Bildes eines Rades eines Fahrzeugs; Empfangen einer Klassifizierung einer Referenzposition zur Identifizierung von Positionen mehrerer aktueller Radmuttern, die an dem Rad in dem aufgenommenen Bild vorhanden sind; Gemeinsames Speichern eines Referenzbildes, das das zuvor aufgenommene Bild repräsentiert, und der Referenzposition des Referenzbildes; Auswählen einer Referenzradmutter aus mehreren in dem Referenzbild enthaltenen Radmuttern, basierend auf der Referenzposition des Referenzbildes, und Spezifizieren der aktuellen Radmutter an derselben Position wie die Referenzradmutter aus dem erfassten Bild bezüglich der empfangenen Referenzposition; Erkennen einer Lockerheit der aktuellen Radmutter durch Erkennen, dass sich die spezifizierte aktuelle Radmutter bezüglich der in dem Referenzbild enthaltenen Referenzradmutter gedreht hat; und Benachrichtigen eines Benutzers, dass die aktuelle Radmutter locker ist, wenn die Lockerheit der aktuellen Radmutter erkannt wird.
Programm, das einen Computer veranlasst, die folgenden Schritte auszuführen: Erfassen eines aufgenommenen Bildes eines Rades eines Fahrzeugs; Empfangen einer Klassifizierung einer Referenzposition zur Identifizierung von Positionen mehrerer aktueller Radmuttern, die an dem Rad in dem aufgenommenen Bild vorhanden sind; Gemeinsames Speichern eines Referenzbildes, das das zuvor aufgenommene Bild repräsentiert, und der Referenzposition des Referenzbildes; Auswählen einer Referenzradmutter aus mehreren in dem Referenzbild enthaltenen Radmuttern, basierend auf der Referenzposition des Referenzbildes, und Spezifizieren der aktuellen Radmutter an derselben Position wie die Referenzradmutter aus dem erfassten Bild bezüglich der empfangenen Referenzposition; Erkennen einer Lockerheit der aktuellen Radmutter durch Erkennen, dass sich die spezifizierte aktuelle Radmutter bezüglich der in dem Referenzbild enthaltenen Referenzradmutter gedreht hat; und Benachrichtigen eines Benutzers, dass die aktuelle Radmutter locker ist, wenn die Lockerheit der aktuellen Radmutter erkannt wird.