DE102021214119B3 - Supervision of the dumping of material - Google Patents
Supervision of the dumping of material Download PDFInfo
- Publication number
- DE102021214119B3 DE102021214119B3 DE102021214119.6A DE102021214119A DE102021214119B3 DE 102021214119 B3 DE102021214119 B3 DE 102021214119B3 DE 102021214119 A DE102021214119 A DE 102021214119A DE 102021214119 B3 DE102021214119 B3 DE 102021214119B3
- Authority
- DE
- Germany
- Prior art keywords
- zero
- speed
- sensor
- loading device
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000000463 material Substances 0.000 title claims abstract description 33
- 238000000034 method Methods 0.000 claims abstract description 27
- 238000003384 imaging method Methods 0.000 claims abstract description 4
- 238000012544 monitoring process Methods 0.000 claims abstract description 3
- 238000004590 computer program Methods 0.000 claims description 7
- 239000013598 vector Substances 0.000 claims description 7
- 238000011161 development Methods 0.000 description 9
- 230000018109 developmental process Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 8
- 239000013590 bulk material Substances 0.000 description 3
- 230000005484 gravity Effects 0.000 description 2
- 239000012773 agricultural material Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Abstract
Die Erfindung betrifft ein Verfahren zur Überwachung des Ausschüttens von Material (109) aus einer Ladevorrichtung (107) eines Fahrzeugs (101); wobei das Fahrzeug (101) mindestens einen bildgebenden Sensor (103) aufweist, der einen Bereich außerhalb der Ladevorrichtung (107) erfasst, den das Material (109) beim Ausschütten mindestens teilweise passiert. Ein oder mehrere Geschwindigkeitsgrößen in mindestens einem Bild des Sensors (103) werden bestimmt; wobei geprüft wird ob die Geschwindigkeitsgrößen mindestens teilweise von Null verschieden sind.The invention relates to a method for monitoring the pouring out of material (109) from a loading device (107) of a vehicle (101); wherein the vehicle (101) has at least one imaging sensor (103) which detects an area outside the loading device (107) through which the material (109) at least partially passes when being poured out. One or more speed variables in at least one image of the sensor (103) are determined; where it is checked whether the speed variables are at least partially different from zero.
Description
Die Erfindung betrifft ein Verfahren nach dem Oberbegriff von Anspruch 1, ein Steuergerät nach dem Oberbegriff von Anspruch 6 und ein Computerprogramm nach Anspruch 8.The invention relates to a method according to the preamble of claim 1, a control unit according to the preamble of claim 6 and a computer program according to claim 8.
Die
Der Erfindung liegt die Aufgabe zugrunde, eine Ladevorrichtung eines Fahrzeugs unter Umgehung der den aus dem Stand der Technik bekannten Lösungen innewohnenden Nachteile zu überwachen. Diese Aufgabe wird gelöst durch ein Verfahren nach Anspruch 1, ein Steuergerät nach Anspruch 6 und ein Computerprogramm nach Anspruch 8. Bevorzugte Weiterbildungen sind in den Unteransprüchen enthalten und ergeben sich aus nachfolgender Beschreibung.The object of the invention is to monitor a charging device of a vehicle while avoiding the inherent disadvantages of the solutions known from the prior art. This object is achieved by a method according to claim 1, a control unit according to claim 6 and a computer program according to claim 8. Preferred developments are contained in the dependent claims and result from the following description.
Das Verfahren dient zur Überwachung des Ausschüttens von Material aus einer Ladevorrichtung eines Fahrzeugs. Vorzugsweise ist das Verfahren computerimplementiert.The method is used to monitor the spilling of material from a loading device of a vehicle. The method is preferably computer-implemented.
Die Ladevorrichtung bezeichnet eine Vorrichtung, die mit dem Fahrzeug verbunden oder verbindbar ist und zum Laden von Material, etwa von Stück- und/oder Stückgut, dient. Beispielsweise handelt es sich bei der Ladevorrichtung um eine Baggerschaufel, eine kippbare Lademulde oder einen kippbaren Container.The loading device designates a device that is or can be connected to the vehicle and is used for loading material, such as general cargo and/or general cargo. For example, the loading device is an excavator shovel, a tiltable loading trough or a tiltable container.
Mit Ausschütten von Material aus der Ladevorrichtung wird ein Vorgang bezeichnet, bei dem Material, das zuvor in der Ladevorrichtung enthalten war, entfernt wird. Charakteristisch für das Ausschütten ist die Wirkung der Schwerkraft auf das Material. Beim Ausschütten rutscht oder fällt das Material aufgrund seiner eigenen Schwerkraft aus der Ladevorrichtung heraus.Dumping material from the loader means an operation of removing material previously contained in the loader. The effect of gravity on the material is characteristic of dumping. When dumping, the material slips or falls out of the loading device due to its own gravity.
Das Fahrzeug weist mindestens einen bildgebenden Sensor auf. Dies ist ein Sensor, der ausgebildet ist, ein oder mehrere Bilder von Objekten zu erstellen, die sich in seinem Erfassungsbereich befinden. Die Bilder liegen etwa in Gestalt zwei- oder dreidimensionaler Vektor- oder Punktgrafiken vor. Als Sensor eignet sich vorliegend ein Radarsensor.The vehicle has at least one imaging sensor. This is a sensor that is designed to create one or more images of objects that are located in its detection area. The images are in the form of two- or three-dimensional vector or dot graphics. In the present case, a radar sensor is suitable as the sensor.
Der Sensor ist so ausgerichtet, dass er einen Bereich außerhalb der Ladevorrichtung erfasst. Mindestens ein Teil seines Erfassungsbereichs liegt also außerhalb der Ladevorrichtung. Im Einzelnen ist der Sensor so ausgerichtet, dass er das zuvor in der Ladevorrichtung enthaltene Material beim Ausschütten mindestens teilweise erfasst. Das Material passiert also beim Ausschütten mindestens teilweise den Erfassungsbereich des Sensors. Vorzugsweise passiert das Material vollständig den Erfassungsbereich. Dies bedeutet, dass sämtliches aus der Ladevorrichtung ausgeschüttete Material durch den Erfassungsbereich des Sensors rutscht und/oder fällt.The sensor is oriented to cover an area outside the loader. At least part of its detection range is therefore outside the charging device. In detail, the sensor is aligned in such a way that it at least partially detects the material previously contained in the loading device when it is poured out. The material thus at least partially passes the detection range of the sensor when poured out. Preferably, the material completely passes through the detection area. This means that any material spilled from the loader will slip and/or fall through the detection area of the sensor.
Erfindungsgemäß werden ein oder mehrere Geschwindigkeitsgrößen in mindestens einem Bild des Sensors bestimmt. Die Geschwindigkeitsgrößen beschreiben jeweils die Geschwindigkeit eines von dem Sensor erfassten und entsprechend in dem mindestens einen Bild enthaltenen Objekts. Beim Ausschütten von Material aus der Ladevorrichtung werden entsprechend eine oder mehrere Geschwindigkeiten des rutschenden und/oder fallenden Materials bestimmt. Bei den Geschwindigkeitsgrößen kann es sich um skalare oder vektorielle Größen bzw. Geschwindigkeitsvektoren handeln.According to the invention, one or more speed variables are determined in at least one image of the sensor. The speed variables each describe the speed of an object detected by the sensor and correspondingly contained in the at least one image. When material is poured out of the loading device, one or more speeds of the sliding and/or falling material are determined accordingly. The velocity variables can be scalar or vector variables or velocity vectors.
Zur Überwachung des Ausschüttvorgangs wird geprüft, ob die Geschwindigkeitsgrö-ßen mindestens teilweise von null verschieden sind. Handelt es sich bei den Geschwindigkeitsgrößen um Vektoren, wird geprüft, ob eine senkrechte Komponente mindestens eines der Geschwindigkeitsvektoren von null verschieden ist. Sind eine oder mehrere der bestimmten Geschwindigkeitsgrößen von null verschieden bzw. ist eine senkrechte Komponente mindestens eines der Geschwindigkeitsvektoren von null verschieden, so deutet dies auf rutschendes und/oder fallendes Material hin. Dies bedeutet, dass der Ausschüttvorgang im Gange ist.To monitor the dispensing process, it is checked whether the speed variables are at least partially different from zero. If the velocity quantities are vectors, it is checked whether a vertical component of at least one of the velocity vectors is non-zero. If one or more of the speed parameters determined is different from zero or if a vertical component of at least one of the speed vectors is different from zero, this indicates sliding and/or falling material. This means that the dispensing process is in progress.
Das erfindungsgemäße Verfahren ist von Vorteil, da Material, das sich vor einem feststehenden Hintergrund bewegt, besonders einfach anhand seiner Geschwindigkeit von dem Hintergrund zu unterscheiden ist.The method according to the invention is advantageous since material moving in front of a stationary background can be distinguished from the background particularly easily on the basis of its speed.
In einer bevorzugten Weiterbildung wird ein Signal generiert, wenn mindestens eine der Geschwindigkeitsgrößen von null verschieden ist, wenn also davon auszugehen ist, dass Material aus der Ladevorrichtung ausgeschüttet wird.In a preferred development, a signal is generated when at least one of the speed variables is different from zero, ie when it can be assumed that material will be poured out of the loading device.
Ein weiteres Signal wird in einer bevorzugten Weiterbildung generiert, wenn keine der Geschwindigkeitsgrößen von null verschieden ist. Das weitere Signal unterscheidet sich von dem oben beschriebenen Signal. Das weitere Signal deutet darauf hin, dass in der Ladevorrichtung befindliches Material nicht ausgeschüttet wird, etwa weil das Material feststeckt, oder der Ausschüttvorgang abgeschlossen ist.In a preferred development, a further signal is generated if none of the speed variables is different from zero. The further signal differs from the signal described above. The further signal indicates that the material in the loading device is not being poured out, for example because the material is stuck or the pouring process has ended.
Das ausgeschüttete Material bildet in der Regel einen Haufen. Die Geschwindigkeit des in dem Haufen befindlichen Materials beträgt null. Daher lässt sich anhand der Geschwindigkeit das in dem Haufen befindliche Material von fallendem oder rutschendem Material unterscheiden. Eine bevorzugte Weiterbildung macht sich diese Erkenntnis mittels einer Linie oder Fläche zunutze, die in mindestens einem Bild des Sensors bestimmt wird. Handelt es sich bei dem Bild um ein zweidimensionales Bild, so wird eine Linie bestimmt. Eine Fläche wird bei einem dreidimensionalen Bild bestimmt.The spilled material usually forms a heap. The velocity of the material in the heap is zero. Therefore, the speed can be used to distinguish the material in the heap from falling or sliding material. A preferred development makes use of this finding by means of a line or area that is determined in at least one image of the sensor. If the image is a two-dimensional image, a line is determined. An area is determined in a three-dimensional image.
Die Linie oder Fläche trennt die Punkte des Bildes, in denen die Geschwindigkeitsgröße von null verschieden ist, von den Punkten des Bildes, in denen die Geschwindigkeitsgröße null beträgt. Der Verlauf der Linie oder Fläche wird demnach so gewählt, dass sich auf der einen Seite der Linie oder Fläche ausschließlich Punkte befinden, in denen die Geschwindigkeitsgröße von null verschieden ist, und auf der anderen Seite ausschließlich Punkte, in denen die Geschwindigkeitsgröße null beträgt.The line or area separates the points of the image where the velocity magnitude is non-zero from the points of the image where the velocity magnitude is zero. The shape of the line or area is chosen in such a way that on one side of the line or area there are only points where the speed is not zero, and on the other side there are only points where the speed is zero.
Die genannte Linie oder Fläche beschreibt den Verlauf einer Oberfläche des Haufens von ausgeschüttetem Material. In einer bevorzugten Weiterbildung wird eine Höhe des Haufens mit einem vordefinierten Schwellwert verglichen.Said line or area describes the course of a surface of the heap of poured material. In a preferred development, a height of the heap is compared to a predefined threshold value.
Die Höhe des Haufens wird weiterbildungsgemäß anhand einer Höhe der Linie oder Fläche bestimmt. Diese Höhe wird mit einem vordefinierten, das heißt vor Ausführung der beschriebenen Verfahrensschritte festgelegten Schwellwert verglichen. Überschreitet die Höhe den Schwellwert, wird ein Signal generiert. Das Signal kann dazu verwendet werden, den Ausschüttvorgang zu stoppen oder einen Alarm auszulösen.According to the refinement, the height of the heap is determined from a height of the line or area. This level is compared with a predefined threshold value, that is to say a threshold value set before the method steps described are carried out. If the height exceeds the threshold, a signal is generated. The signal can be used to stop the dumping process or trigger an alarm.
Das erfindungsgemäße Steuergerät ist zur Verwendung in dem oben beschriebenen Fahrzeug ausgebildet bzw. eingerichtet. Es ist weiterhin ausgebildet, ein oder mehrere Bilder des Sensors zu empfangen. Bevorzugt ist das Steuergerät zu diesem Zweck signalleitend mit dem Sensor verbunden. Die ein oder mehreren Bilder sind in ein oder mehreren von dem Sensor zu dem Steuergerät übertragenen Signalen enthalten.The control unit according to the invention is designed or set up for use in the vehicle described above. It is also designed to receive one or more images from the sensor. For this purpose, the control device is preferably connected to the sensor in a signal-conducting manner. The one or more images are included in one or more signals transmitted from the sensor to the controller.
Erfindungsgemäß ist das Steuergerät ausgebildet bzw. eingerichtet, anhand der empfangenen Bilder das Steuergerät das Ausschütten von Material aus der Ladevorrichtung zu gemäß dem erfindungsgemäßen Verfahren oder einer bevorzugten Weitebildung zu überwachen. Dies bedeutet, dass das Steuergerät ein Programm aufweist, welches das Steuergerät bei Ausführung des Programms dazu veranlasst, ein solches Verfahren auszuführen.According to the invention, the control unit is designed or set up to use the received images to monitor the pouring out of material from the loading device according to the method according to the invention or a preferred development. This means that the control device has a program which, when the program is executed, causes the control device to carry out such a method.
Das Steuergerät ist bevorzugt weitergebildet, in Abhängigkeit des Ergebnisses der Ausführung des erfindungsgemäßen Verfahrens oder einer bevorzugten Weiterbildung die Ladevorrichtung anzusteuern. So kann das Steuergerät etwa den Ausschüttvorgang stoppen, wenn der Haufen des ausgeschütteten Materials zu hoch geworden ist. Erkennt das Steuergerät, dass kein Material mehr ausgeschüttet wird, so veranlasst das Steuergerät vorzugsweise die Ladevorrichtung, in eine Ruhestellung zu verfahren.The control unit is preferably further developed to control the charging device depending on the result of the execution of the method according to the invention or a preferred further development. For example, the control unit can stop the dumping process if the heap of dumped material has become too high. If the control device recognizes that no more material is being poured out, the control device preferably causes the loading device to move to a rest position.
Ein erfindungsgemäßes Computerprogramm ist ausgebildet, das erfindungsgemäße Steuergerät oder eine bevorzugte Weiterbildung zur Ausführung des erfindungsgemäßen Verfahrens oder einer bevorzugten Weiterbildung zu veranlassen. Dies geschieht etwa, indem das Computerprogramm in einen Arbeitsspeicher des Steuergeräts geladen und dort von einem Prozessor des Steuergeräts eingelesen und ausgeführt wird. Das Computerprogramm kann in Gestalt eines Computerprogrammprodukts oder eines übertragenen Signals vorliegen oder ausführungsbereit auf einem Datenträger gespeichert sein.A computer program according to the invention is designed to cause the control unit according to the invention or a preferred development to execute the method according to the invention or a preferred development. This is done, for example, by the computer program being loaded into a working memory of the control unit and being read in and executed there by a processor of the control unit. The computer program can be in the form of a computer program product or a transmitted signal or it can be stored on a data carrier ready for execution.
Ein bevorzugtes Ausführungsbeispiel der Erfindung ist in
-
1 einen Radlader.
-
1 a wheel loader.
Der in
Wird Schüttgut 109 aus der Schaufel 107 ausgeschüttet, passiert es den Erfassungsbereich 105 des Radarsensors 103 und wird entsprechend von dem Radarsensor 103 erfasst. Anhand seiner Bewegung 109 lässt sich das Schüttgut identifizieren. Insbesondere ist es möglich, das Schüttgut 109 anhand seiner Bewegung von der stillstehenden Umgebung abzugrenzen.If
BezugszeichenlisteReference List
- 101101
- Radladerwheel loader
- 103103
- Radarsensorradar sensor
- 105105
- Erfassungsbereichdetection range
- 107107
- Schaufelshovel
- 109109
- Schüttgutbulk goods
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102021214119.6A DE102021214119B3 (en) | 2021-12-10 | 2021-12-10 | Supervision of the dumping of material |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102021214119.6A DE102021214119B3 (en) | 2021-12-10 | 2021-12-10 | Supervision of the dumping of material |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102021214119B3 true DE102021214119B3 (en) | 2023-02-16 |
Family
ID=85039745
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102021214119.6A Active DE102021214119B3 (en) | 2021-12-10 | 2021-12-10 | Supervision of the dumping of material |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102021214119B3 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050028604A1 (en) | 2003-08-04 | 2005-02-10 | Fathi Saigh | Sensor system for monitoring load displacements in a freight vehicle |
EP2167346B1 (en) | 2007-07-11 | 2013-10-30 | Volvo Construction Equipment AB | A method and a device for controlling a vehicle comprising a dump body |
DE112013000947T5 (en) | 2012-02-10 | 2015-02-05 | Zachary T. Bonefas | System and method for material transport with one or more imaging devices on the transferring vehicle and the receiving vehicle for controlling the distribution of material in the hold of the receiving vehicle |
-
2021
- 2021-12-10 DE DE102021214119.6A patent/DE102021214119B3/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050028604A1 (en) | 2003-08-04 | 2005-02-10 | Fathi Saigh | Sensor system for monitoring load displacements in a freight vehicle |
EP2167346B1 (en) | 2007-07-11 | 2013-10-30 | Volvo Construction Equipment AB | A method and a device for controlling a vehicle comprising a dump body |
DE112013000947T5 (en) | 2012-02-10 | 2015-02-05 | Zachary T. Bonefas | System and method for material transport with one or more imaging devices on the transferring vehicle and the receiving vehicle for controlling the distribution of material in the hold of the receiving vehicle |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3289853A1 (en) | Method and control device for operating an agricultural transport vehicle and transport vehicle | |
DE112015004478B4 (en) | driving support device | |
DE10247993B4 (en) | Method and device for determining the center of gravity of a motor vehicle | |
EP1851157A2 (en) | Device and method for loading and/or unloading a cargo space or storage space | |
EP2102678B1 (en) | Method for detecting a vertical misalignment of a radar sensor | |
DE112017001945T5 (en) | System and method for monitoring a cargo space of a vehicle | |
EP3451313A1 (en) | Method for identifying a collision hazard | |
DE112014001633T5 (en) | Method for determining when a loading trough of a carrier is empty | |
DE102021214119B3 (en) | Supervision of the dumping of material | |
DE102016221422A1 (en) | Device and method for monitoring a storage room | |
DE102020206374A1 (en) | Method for controlling a loading process of a loading area of a transport vehicle for the transport of bulk goods | |
DE102018220841B4 (en) | Method for determining a change in the mass of a vehicle | |
EP3059560A1 (en) | Monitoring device for the loading status of a bulk material vehicle | |
DE102011088156A1 (en) | Method and device for reporting a loading anomaly of a tipper trailer | |
EP3095315B1 (en) | Method and control device for operating an agricultural loader wagon | |
DE19841570C2 (en) | Quay crane for loading and unloading containers | |
DE102013012314B4 (en) | Use of a vehicle-mounted image acquisition and analysis device for detecting a loading height of a load of the vehicle | |
AT518254B1 (en) | Arrangement for sorting bulk material | |
DE102019216951B4 (en) | Determining the tipping criticality of a vehicle based on a plurality of independent estimates | |
DE102017119202A1 (en) | Industrial truck, in particular tractor vehicle | |
EP2944513A2 (en) | Slidable roll-off tipper | |
DE102019212893A1 (en) | Device and method for displaying an unloading area of a commercial vehicle | |
DE102022205673A1 (en) | Device for determining the optimal position of a timber transporter in relation to a storage target | |
EP3324206A1 (en) | Motor vehicle and method for determining trailer information | |
DE102004006858A1 (en) | Loaded space loading/unloading method for e.g. forklift truck, involves calculating cargo position based on positional alteration of space due to initial loading/unloading of cargos, and loading/unloading cargos at calculated position |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication | ||
R018 | Grant decision by examination section/examining division | ||
R020 | Patent grant now final |