DE102021118273A1 - Agricultural working machine - Google Patents
Agricultural working machine Download PDFInfo
- Publication number
- DE102021118273A1 DE102021118273A1 DE102021118273.5A DE102021118273A DE102021118273A1 DE 102021118273 A1 DE102021118273 A1 DE 102021118273A1 DE 102021118273 A DE102021118273 A DE 102021118273A DE 102021118273 A1 DE102021118273 A1 DE 102021118273A1
- Authority
- DE
- Germany
- Prior art keywords
- camera
- images
- assistance system
- driver assistance
- working
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01B—SOIL WORKING IN AGRICULTURE OR FORESTRY; PARTS, DETAILS, OR ACCESSORIES OF AGRICULTURAL MACHINES OR IMPLEMENTS, IN GENERAL
- A01B69/00—Steering of agricultural machines or implements; Guiding agricultural machines or implements on a desired track
- A01B69/001—Steering by means of optical assistance, e.g. television cameras
-
- A—HUMAN NECESSITIES
- A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
- A01B—SOIL WORKING IN AGRICULTURE OR FORESTRY; PARTS, DETAILS, OR ACCESSORIES OF AGRICULTURAL MACHINES OR IMPLEMENTS, IN GENERAL
- A01B76/00—Parts, details or accessories of agricultural machines or implements, not provided for in groups A01B51/00 - A01B75/00
Abstract
Die Erfindung betrifft eine landwirtschaftliche Arbeitsmaschine mit mindestens einem Arbeitsaggregat (2) und mit einem Fahrerassistenzsystem (3), wobei die landwirtschaftliche Arbeitsmaschine (1) eine Kameraanordnung (4) mit mindestens einer Kamera (5) aufweist, wobei die Kamera (5) in einer Arbeitsausrichtung (6) der Kamera (5) Kamerabilder (7) zur Steuerung und/oder Überwachung eines einen Arbeitsprozess durchführenden Arbeitsaggregats (2) aufnimmt, wobei die Kamerabilder (7) das Arbeitsaggregat (2) und/oder ein Objekt des Arbeitsprozesses zumindest teilweise abbilden. Es wird vorgeschlagen, dass das Fahrerassistenzsystem (3) in einer Personenerkennungsroutine in den in der Arbeitsausrichtung (6) der Kamera (5) aufgenommenen Kamerabildern (7) Personen (9) detektiert und bei Detektion einer Person (9) in einem vorbestimmten Gefahrbereich (10) eine Notroutine durchführt.The invention relates to an agricultural working machine with at least one working assembly (2) and with a driver assistance system (3), the agricultural working machine (1) having a camera arrangement (4) with at least one camera (5), the camera (5) being in a Working alignment (6) of the camera (5) captures camera images (7) for controlling and/or monitoring a work unit (2) carrying out a work process, the camera images (7) at least partially depicting the work unit (2) and/or an object of the work process . It is proposed that the driver assistance system (3) detect persons (9) in a person recognition routine in the camera images (7) recorded in the working orientation (6) of the camera (5) and, upon detection of a person (9) in a predetermined danger area (10 ) performs an emergency routine.
Description
Die vorliegende Erfindung betrifft eine landwirtschaftliche Arbeitsmaschine gemäß dem Oberbegriff von Anspruch 1.The present invention relates to an agricultural working machine according to the preamble of
Der Begriff „landwirtschaftliche Arbeitsmaschine“ ist vorliegend weit zu verstehen. Darunter fallen nicht nur Erntemaschinen wie Mähdrescher und Feldhäcksler, sondern auch Zugmaschinen wie Traktoren o. dgl.The term “agricultural work machine” is to be understood broadly in the present case. This includes not only harvesting machines such as combine harvesters and forage harvesters, but also tractors such as tractors or the like.
Im Rahmen der zunehmenden Automatisierung landwirtschaftlicher Arbeitsmaschinen werden diese inzwischen häufig mit Kameraanordnungen und anderen Sensoranordnungen ausgestattet, um den Bediener beim Fahren und bei der Verrichtung landwirtschaftlicher Arbeit zu unterstützen. Insbesondere können landwirtschaftliche Arbeitsaggregate der landwirtschaftlichen Arbeitsmaschine, d. h. Komponenten und Geräte, insbesondere Anbaugeräte, die zur Verrichtung oder Unterstützung landwirtschaftlicher Arbeit dienen, auf diese Weise überwacht und gesteuert werden.As part of the increasing automation of agricultural working machines, these are now often equipped with camera arrangements and other sensor arrangements in order to support the operator when driving and when carrying out agricultural work. In particular, agricultural working units of the agricultural working machine, d. H. Components and devices, in particular attachments that are used to perform or support agricultural work, are monitored and controlled in this way.
Der bekannte Stand der Technik (
Aus der
Im landwirtschaftlichen Bereich können schwere Unfälle geschehen, wenn eine Person sich in der Nähe eines Arbeitsaggregats oder im Fahrweg der landwirtschaftlichen Arbeitsmaschine aufhält. Grundsätzlich sind Kamerasysteme bekannt, die nicht einsehbare Bereiche abdecken sollen. Diese sind jedoch ein zusätzlicher Kostenfaktor. Die bekannte Doppelnutzung einer bereits vorhandenen Kamera hingegen hat das Problem, dass die Kamera während eines Arbeitsvorgangs nicht zur Personendetektion verschwenkt werden kann.Serious accidents can happen in the agricultural sector if a person is in the vicinity of a working unit or in the path of the agricultural working machine. In principle, camera systems are known which are intended to cover non-visible areas. However, these are an additional cost factor. The well-known dual use of an existing camera, on the other hand, has the problem that the camera cannot be swiveled to detect persons during a work process.
Eine Herausforderung beim bekannten Stand der Technik ist daher, die Personendetektion kostengünstiger umzusetzen.A challenge in the known prior art is therefore to implement person detection more cost-effectively.
Der Erfindung liegt das Problem zugrunde, die bekannte landwirtschaftliche Arbeitsmaschine derart auszugestalten und weiterzubilden, dass hinsichtlich der genannten Herausforderung eine weitere Optimierung erreicht wird.The invention is based on the problem of designing and developing the known agricultural working machine in such a way that further optimization is achieved with regard to the challenge mentioned.
Das obige Problem wird durch die Merkmale von Anspruch 1 gelöst.The above problem is solved by the features of
Es wurde erkannt, dass sich Gefahren vor allem im Bereich beweglicher Arbeitsaggregate ergeben und dort häufig bereits Kameras vorhanden sind. Diese zeigen üblicherweise einem Benutzer in einer Fahrerkabine in Nahansicht den Ablauf des Arbeitsvorgangs. In diesen sind sich nähernde Personen nicht oder zu spät sichtbar.It was recognized that dangers arise primarily in the area of mobile work units and cameras are often already present there. These usually show a user in a driver's cab the course of the work process in close-up. In these, approaching people are not visible or are visible too late.
Wesentlich ist die grundsätzliche Überlegung, diese Kameras dennoch zur Personendetektion zu verwenden. Dies ist zum einen möglich, wenn die landwirtschaftliche Arbeitsmaschine automatisch auf eine Gefahr reagiert, indem sie das betroffene Arbeitsaggregat beispielsweise sofort abschaltet. Aufgrund der schnellen Reaktionszeit bei einer automatischen Reaktion kann auch eine späte Detektion noch ausreichend sein. Zum anderen besteht die Möglichkeit, ein Kamerabild in ein Arbeitsbild und ein Umgebungsbild zu trennen. Das Arbeitsbild kann wie gewohnt zur Überwachung und/oder Steuerung des Arbeitsvorgangs verwendet werden, während das Umgebungsbild zur Personendetektion verwendet wird.The basic consideration of using these cameras for person detection is essential. On the one hand, this is possible if the agricultural working machine reacts automatically to a hazard, for example by immediately switching off the affected working unit. Due to the fast reaction time with an automatic reaction, late detection can still be sufficient. On the other hand, there is the possibility of separating a camera image into a working image and an environment image. The work image can be used as usual to monitor and/or control the work process, while the environment image is used to detect people.
Es wird somit sogar möglich, diverse bereits vorhandene Kameras mittels eines einfachen Softwareupdates nachzurüsten.It is thus even possible to retrofit various existing cameras with a simple software update.
Im Einzelnen wird vorgeschlagen, dass das Fahrerassistenzsystem in einer Personenerkennungsroutine in den in der Arbeitsausrichtung der Kamera aufgenommenen Kamerabildern Personen detektiert und bei Detektion einer Person in einem vorbestimmten Gefahrbereich eine Notroutine durchführt.Specifically, it is proposed that the driver assistance system detect people in a person detection routine in the camera images recorded in the working orientation of the camera and carry out an emergency routine when a person is detected in a predetermined danger zone.
Besonders bevorzugte Ausgestaltungen sind Gegenstand der Unteransprüche.Particularly preferred configurations are the subject matter of the dependent claims.
Im Folgenden wird die Erfindung anhand einer lediglich ein Ausführungsbeispiel darstellenden Zeichnung näher erläutert. In der Zeichnung zeigt
-
1 eine als Traktor ausgestaltete landwirtschaftliche Arbeitsmaschine bei einem Ankopplungsvorgang und -
2 ein Arbeitsbild und ein Umgebungsbild.
-
1 an agricultural working machine designed as a tractor during a coupling process and -
2 a working image and an environment image.
Die vorschlagsgemäße Lösung lässt sich auf einen weiten Bereich landwirtschaftlicher Arbeitsmaschinen 1, insbesondere selbstfahrender landwirtschaftlicher Arbeitsmaschinen 1, anwenden. Dazu gehören Zugmaschinen, insbesondere Traktoren, und Erntemaschinen, insbesondere Mähdrescher, Feldhäcksler o.dgl. Bei dem dargestellten und insoweit bevorzugten Ausführungsbeispiel handelt es sich bei der landwirtschaftlichen Arbeitsmaschine 1 um einen Traktor, der in an sich üblicher Weise mit einem landwirtschaftlichen Arbeitsaggregat 2 in Form eines Anbaugeräts ausgestattet ist. Bei dem landwirtschaftlichen Arbeitsaggregat 2 handelt es sich hier beispielsweise um eine mechanische Hacke oder um einen Grubber. Die Ausführungen zu einem Traktor bzw. zu einem solchen landwirtschaftlichen Arbeitsaggregat 2 gelten für alle anderen Arten von landwirtschaftlichen Arbeitsmaschinen 1 bzw. landwirtschaftlichen Arbeitsaggregaten 2 entsprechend.The proposed solution can be applied to a wide range of
Das in den Figuren dargestellte und insoweit bevorzugte Ausführungsbeispiel betrifft eine landwirtschaftliche Arbeitsmaschine 1 mit mindestens einem Arbeitsaggregat 2 und mit einem Fahrerassistenzsystem 3, wobei die landwirtschaftliche Arbeitsmaschine 1 eine Kameraanordnung 4 mit mindestens einer Kamera 5 aufweist, wobei die Kamera 5 in einer Arbeitsausrichtung 6 der Kamera 5 Kamerabilder 7 zur Steuerung und/oder Überwachung eines einen Arbeitsprozess durchführenden Arbeitsaggregats 2 aufnimmt, wobei die Kamerabilder 7 das Arbeitsaggregat 2 und/oder ein Objekt des Arbeitsprozesses zumindest teilweise abbilden.The exemplary embodiment illustrated in the figures and preferred in this respect relates to an
Derartige Kameras 5 sind bei landwirtschaftlichen Arbeitsmaschinen 1 üblich. Es kann sich beispielsweise um eine Kamera 5 an einem Auswurf zur Überwachung eines Überladens, um eine Kamera 5 im Bereich eines vorderen oder hinteren Anbaugeräts oder Anhängers 8 zur Überwachung des Anbaugeräts oder eines Ankoppelvorgangs oder um eine Kamera 5 zur Darstellung von Querverkehr an einem vorderen Anbaugerät handeln. Grundsätzlich kann die Kameraanordnung 4 auch mehrere Kameras 5 aufweisen. Auf alle Ausführungen zu der einen Kamera 5 wird dann verwiesen.Such cameras 5 are common in
Wesentlich ist nun, dass das Fahrerassistenzsystem 3 in einer Personenerkennungsroutine in den in der Arbeitsausrichtung 6 der Kamera 5 aufgenommenen Kamerabildern 7 Personen 9 detektiert und bei Detektion einer Person 9 in einem vorbestimmten Gefahrbereich 10 eine Notroutine durchführt.It is now essential that the
Weiter ist hier und vorzugsweise vorgesehen, dass die Kamera 5 Arbeitsbilder 13 und Umgebungsbilder 12 als Kamerabilder 7 aufnimmt, oder, dass das Fahrerassistenzsystem 3 die Kamerabilder 7 in Arbeitsbilder 13 und Umgebungsbilder 12 teilt, vorzugsweise, dass in den Umgebungsbilder 12 ein Warnbereich 11 und ein Gefahrbereich 10 definiert sind, und/oder, dass die Umgebungsbilder 12 einen Bereich seitlich und/oder über und/oder unter den Arbeitsbildern 13 umfassen.It is also preferably provided here that the camera 5 records working images 13 and surroundings images 12 as camera images 7, or that the
Die Arbeitsbilder 13 und Umgebungsbilder 12 können mittels einer Optik aufgenommen und digital getrennt werden oder mittels mehrerer Optiken aufgenommen werden. Hier und vorzugsweise handelt es sich den Arbeitsbildern 13 und den Umgebungsbildern 12 jeweils um einen unterschiedlichen, gegebenenfalls überlappenden, Ausschnitt eines Gesamtbildes. Die Arbeitsbilder 13 und die Umgebungsbilder 12 können gleichzeitig oder alternierend aufgenommen werden.The working images 13 and environmental images 12 can be recorded using one lens and separated digitally, or recorded using a plurality of lenses. Here, and preferably, the working images 13 and the environmental images 12 are each a different, optionally overlapping, section of an overall image. The working images 13 and the environmental images 12 can be recorded simultaneously or alternately.
Der Warnbereich 11 ist vorzugsweise weiter von der landwirtschaftlichen Arbeitsmaschine 1 und/oder dem Arbeitsaggregat 2 entfernt, als der Gefahrbereich 10.The
Weiter ist hier und vorzugsweise vorgesehen, dass das Fahrerassistenzsystem 3 einem Benutzer 14 die Arbeitsbilder 13 zur Steuerung und/oder Überwachung des Arbeitsaggregats 2, insbesondere digital gezoomt, auf einem Display 15 anzeigt und dass die Umgebungsbilder 12 dem Benutzer 14 zumindest teilweise nicht gleichzeitig mit den Arbeitsbildern 13 angezeigt werden, und/oder, dass die Personenerkennungsroutine während des Arbeitsprozesses durchgeführt wird.Provision is also made here and preferably for the
Die Personenerkennungsroutine kann auch durchgeführt werden, wenn kein Arbeitsprozess durchgeführt wird. Dann ist diese jedoch dennoch in der Arbeitsausrichtung 6 der Kamera 5 durchführbar. Für den Benutzer 14 ist wichtig, dass er auf dem Display 15 den Arbeitsprozess ausreichend gut erkennen kann. Für die Personenerkennung hingegen ist es vorteilhaft, wenn die Umgebungsbilder 12 möglichst viel Raum abdecken. Ein digitaler Zoom bietet hier die Lösung. Auf Hardwareebene wird ein relativ weitwinkliges Bild aufgenommen, dem Benutzer 14 wird jedoch dennoch ein vergrößerter Ausschnitt als Arbeitsbild 13 angezeigt. Dies verdeutlicht
Weiter ist hier und vorzugsweise vorgesehen, dass das Fahrerassistenzsystem 3 in der Notroutine das den Arbeitsprozess durchführende Arbeitsaggregat 2 und/oder die landwirtschaftliche Arbeitsmaschine 1 ansteuert, um die Person 9 zu schützen, und/oder, dass das Fahrerassistenzsystem 3 in der Notroutine den Benutzer 14 und/oder die Person 9 in dem Gefahrbereich 10, insbesondere akustisch, warnt, vorzugsweise, dass das Fahrerassistenzsystem 3 den Benutzer 14 und/oder die Person 9 in dem Gefahrbereich 10 warnt, wenn das Fahrerassistenzsystem 3 die Person 9 in dem Warnbereich 11 detektiert und dass das Fahrerassistenzsystem 3 das den Arbeitsprozess durchführende Arbeitsaggregat 2 und/oder die landwirtschaftliche Arbeitsmaschine 1 ansteuert, um die Person 9 zu schützen, wenn das Fahrerassistenzsystem 3 die Person 9 in dem Gefahrbereich 10 detektiert.Provision is also made here and preferably for the
Das Fahrerassistenzsystem 3 kann in der Notroutine den Fahrweg ändern und/oder das Arbeitsaggregat 2 abschalten. Beispielsweise kann beim Ankoppeln, wie beispielhaft in
Weiter ist hier und vorzugsweise vorgesehen, dass das Fahrerassistenzsystem 3 die Notroutine bei einer vorbestimmten Benutzereingabe abbricht und/oder temporär unterbricht und/oder rückgängig macht, und/oder, dass der Benutzer 14 den Gefahrbereich 10 und/oder Warnbereich 11 verändern und/oder ein- und ausschalten und/oder definieren kann.It is also preferably provided here that the
Dieses Vorgehen ist sinnvoll, wenn eine Person 9 sich in dem Gefahrbereich 10 aufhalten soll. Der Benutzer 14 kann dann die Reaktion des Fahrerassistenzsystems 3 unterdrücken oder bestimmte Bereiche in der Umgebung des Arbeitsaggregats 2 und/oder der landwirtschaftlichen Arbeitsmaschine 1 von der Personenerkennung bzw. der Reaktion darauf ausnehmen.This procedure makes sense if a person 9 is to be in the
BezugszeichenlisteReference List
- 11
- Landwirtschaftliche ArbeitsmaschineAgricultural working machine
- 22
- Arbeitsaggregatworking unit
- 33
- Fahrerassistenzsystemdriver assistance system
- 44
- Kameraanordnungcamera arrangement
- 55
- Kameracamera
- 66
- Arbeitsausrichtungwork orientation
- 77
- Kamerabildercamera images
- 88th
- Anhängerfollower
- 99
- Personperson
- 1010
- Gefahrbereichhazardous area
- 1111
- Warnbereichwarning area
- 1212
- Umgebungsbildenvironment picture
- 1313
- Arbeitsbildworking picture
- 1414
- Benutzeruser
- 1515
- Displayscreen
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of documents cited by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturPatent Literature Cited
- EP 3409097 B1 [0004]EP 3409097 B1 [0004]
- EP 3145290 B1 [0005]EP 3145290 B1 [0005]
- EP 3165406 B1 [0005]EP 3165406 B1 [0005]
Claims (5)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102021118273.5A DE102021118273A1 (en) | 2021-07-15 | 2021-07-15 | Agricultural working machine |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102021118273.5A DE102021118273A1 (en) | 2021-07-15 | 2021-07-15 | Agricultural working machine |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102021118273A1 true DE102021118273A1 (en) | 2023-01-19 |
Family
ID=84546797
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102021118273.5A Pending DE102021118273A1 (en) | 2021-07-15 | 2021-07-15 | Agricultural working machine |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102021118273A1 (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3145290B1 (en) | 2014-05-21 | 2018-05-09 | CNH Industrial Belgium nv | Security sensor |
EP3165406B1 (en) | 2015-11-06 | 2018-08-15 | SAME DEUTZ-FAHR ITALIA S.p.A. | Tractor with vision system |
EP3409097B1 (en) | 2017-06-02 | 2020-07-22 | CLAAS E-Systems GmbH | Agricultural working machine |
-
2021
- 2021-07-15 DE DE102021118273.5A patent/DE102021118273A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3145290B1 (en) | 2014-05-21 | 2018-05-09 | CNH Industrial Belgium nv | Security sensor |
EP3165406B1 (en) | 2015-11-06 | 2018-08-15 | SAME DEUTZ-FAHR ITALIA S.p.A. | Tractor with vision system |
EP3409097B1 (en) | 2017-06-02 | 2020-07-22 | CLAAS E-Systems GmbH | Agricultural working machine |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1674324B2 (en) | Agricultural working machine | |
EP2484558B1 (en) | Display device for fields of vision of a commercial vehicle | |
DE10037129B4 (en) | Parking and / or Rangierhilfeeinrichtung | |
DE202012103730U1 (en) | Harvesting machine with a transfer device | |
EP3401167A1 (en) | Mirror replacement system as camera display system of a motor vehicle, in particular a commercial vehicle | |
DE102011079913A1 (en) | Visual assistance system for a driver and vehicle with such a system | |
EP3833575B1 (en) | Surveillance camera system | |
DE102017117287A1 (en) | VISIBILITY SYSTEM WITH DRIVING SITUATION-ORIENTED VIEW FIELD / VIEW AREA INSIGHT | |
DE102008046544A1 (en) | Vehicle e.g. passenger car, surrounding monitoring method, utilized for passenger transportation, involves displaying section of complete image for positioning of vehicle, and selecting section as function of vehicle movement direction | |
DE102015115883A1 (en) | Agricultural working machine | |
EP3794927A1 (en) | Agricultural machine | |
EP2996327B1 (en) | Surround view system for vehicles with attachments | |
EP3622799B1 (en) | Method for operation of a self-propelled harvester | |
DE102021118273A1 (en) | Agricultural working machine | |
EP3421674B1 (en) | Method and device for imaging areas | |
EP3833576B1 (en) | Surveillance camera system | |
DE1555360A1 (en) | Motor vehicle, in particular agricultural tractor or construction vehicle | |
DE202006010960U1 (en) | Video monitoring device for motor vehicle, has emphasizing unit emphasizing moving object and packing smooth image into frame, which tracks movement of object within detection areas of cameras | |
EP3369697B1 (en) | Industrial truck | |
DE112018007768T5 (en) | PERIPHERAL INFORMATION CAPTURE DEVICE AND VEHICLE | |
DE102019105790A1 (en) | Motor vehicle with a plurality of sensor devices for detecting the surroundings | |
DE102012005468B4 (en) | Method and device for displaying signal light information for a vehicle | |
EP3922495B1 (en) | Agricultural work vehicle | |
EP1460383B1 (en) | Camera system for a vehicle | |
DE102021005513A1 (en) | Method for monitoring the surroundings of a vehicle with a camera-based mirror replacement system and vehicle |