DE102017220005A1 - Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine - Google Patents

Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine Download PDF

Info

Publication number
DE102017220005A1
DE102017220005A1 DE102017220005.7A DE102017220005A DE102017220005A1 DE 102017220005 A1 DE102017220005 A1 DE 102017220005A1 DE 102017220005 A DE102017220005 A DE 102017220005A DE 102017220005 A1 DE102017220005 A1 DE 102017220005A1
Authority
DE
Germany
Prior art keywords
work machine
image information
working
route
machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102017220005.7A
Other languages
English (en)
Inventor
Marcus Hiemer
Mark Mohr
Mauro Cesar Zanella
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZF Friedrichshafen AG
Original Assignee
ZF Friedrichshafen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZF Friedrichshafen AG filed Critical ZF Friedrichshafen AG
Priority to DE102017220005.7A priority Critical patent/DE102017220005A1/de
Priority to PCT/EP2018/078323 priority patent/WO2019091725A1/de
Publication of DE102017220005A1 publication Critical patent/DE102017220005A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A01AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01BSOIL WORKING IN AGRICULTURE OR FORESTRY; PARTS, DETAILS, OR ACCESSORIES OF AGRICULTURAL MACHINES OR IMPLEMENTS, IN GENERAL
    • A01B69/00Steering of agricultural machines or implements; Guiding agricultural machines or implements on a desired track
    • A01B69/001Steering by means of optical assistance, e.g. television cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/005Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 with correlation of navigation data from several sources, e.g. map or contour matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Soil Sciences (AREA)
  • Environmental Sciences (AREA)
  • Guiding Agricultural Machines (AREA)

Abstract

Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine entlang einer Route, welches Regeln einer Bewegung der Arbeitsmaschine entlang der Route aufweist, mit Erfassen von Bildinformation mit mindestens einem Sensor, Visualisieren der Bildinformation mit dem Anzeigegerät, wobei die Bildinformation eine Information zur Umgebung um die Arbeitsmaschine aufweist und wobei die Arbeitsmaschine mit der Bildinformation regelbar ist.

Description

  • Bekannte Verfahren zum Führen einer Arbeitsmaschine entlang einer Route weisen ein Regeln einer Bewegung der Arbeitsmaschine entlang der Route auf.
  • Ein Führen einer Arbeitsmaschine kann eine benutzergeführte Maschinenführung sein. Das Führen der Arbeitsmaschine kann auch ein Steuern oder ein Regeln der Arbeitsmaschine durch einen Benutzer aufweisen oder als solches verstanden werden.
  • Eine Arbeitsmaschine kann grundsätzlich jedes für eine Arbeit einsetzbare Fahrzeug, beispielsweise eine Landmaschine, sein.
  • Eine Route kann auch als ein Weg oder eine Strecke definiert werden, entlang derer die Arbeitsmaschine bewegt werden soll. Die Route kann eine zwei- oder dreidimensionale Trajektorie mit oder ohne Höheninformation umfassen. Eine Bewegung der Arbeitsmaschine kann auch als eine Fahrt mit der Arbeitsmaschine bezeichnet werden.
  • Bekannte Anzeigegerät zum Führen einer Arbeitsmaschine entlang einer Route sind für ein Regeln einer Bewegung der Arbeitsmaschine entlang der Route ausgebildet.
  • In 1 ist schematisch eine Ansicht eines derart bekannten Anzeigegeräts gezeigt. Das Anzeigegerät kann perspektivisch eine abzufahrende Route 101 auf einem Modell eines Arbeitsgeländes 102 zeigen. Die abzufahrende Route 101 kann auch als eine künstliche Route bezeichnet werden. Ferner können die Arbeitsmaschine 1 und optional ein Arbeitsgerät 103, welches an der Arbeitsmaschine 1 angebaut sein kann, symbolhaft gezeigt werden. Ein gemäß der abzufahrenden Route 101 von der Arbeitsmaschine 1 oder dem Arbeitsgerät 103 abgefahrenes Gelände 104 kann ebenfalls angezeigt werden.
  • Aus der WO 2010/083949 A1 ist ein Spurführungssystem bekannt, mit dem ein Fahrzeug entlang einer vorgegebenen Fahrspur bewegt wird. Zum Abfahren der Fahrspur und zum Durchführen von Arbeiten wird einem Fahrer des Fahrzeugs die vorgegebene Fahrspur und die Position des Fahrzeugs angezeigt.
  • Es werden Lösungen bereitgestellt, bekannte Verfahren und Anzeigegeräte zum Führen einer Arbeitsmaschine zu verbessern.
  • Eine derartige Lösung für ein Verfahren zum Führen einer Arbeitsmaschine besteht in einem Erfassen von Bildinformation mit mindestens einem Sensor, einem Visualisieren der Bildinformation mit einem Anzeigegerät, wobei die Bildinformation eine Information zur Umgebung um die Arbeitsmaschine aufweist und wobei die Arbeitsmaschine mit der Bildinformation regelbar ist. Bildinformation können Bilddaten sein.
  • Das Erfassen von Bildinformation kann auch als Detektieren oder Aufnehmen von Bildinformation definiert werden.
  • Als Bildinformation kann grundsätzlich jede visualisierbare Information verstanden werden, welche in einem zweidimensionalen Bildkoordinatensystem als ein Bild darstellbar ist. Bildinformation kann grundsätzlich mittels Photogrammetrie, mittels Fernerkundung oder mittels Scanning erfasst werden. Bildinformation kann auch von einer externen Quelle stammen, beispielsweise von einem Satellitenbild oder von einem mit einer Drohne erfassten Bild.
  • Grundsätzlich kann ein beliebiger Sensor zum Erfassen von Bildinformation vorgesehen sein. Als Sensor kann eine Kamera vorgesehen sein. Die Kamera kann ein photographisches Bild der Umgebung als Bildinformation erzeugen. Alternativ oder zusätzlich kann als Sensor eine Temperaturkamera, welche ein Temperaturbild als Bildinformation erzeugt, oder eine 3D-Kamera, welche ein Tiefenbild als Bildinformation erzeugt, vorgesehen sein. Mit derartigen Kameras können flächenhafte Informationen zur Umgebung pixelartig und gleichzeitig erfasst werden.
  • Unter Visualisieren von Bildinformation kann auch Anzeigen, Darstellen oder Zeigen von Bildinformation verstanden werden. Für das Visualisieren kann mindestens eine Koordinatentransformation, insbesondere eine Transformation von einem globalen Koordinatensystem in ein lokales Bildkoordinatensystem oder von einem Kamerasystem in ein Bildsystem notwendig sein.
  • Das Visualisieren kann auch als Anzeigen, Darstellen oder Veranschaulichen definiert werden.
  • Ein Anzeigegerät kann beispielsweise ein Display, ein Monitor oder ein Bildschirm sein. Das Anzeigegerät kann tragbar, beispielsweise ein Tablet, oder fest mit der Arbeitsmaschine verbunden sein. Das Anzeigegerät kann in der Arbeitsmaschine, insbesondere in einem Führungsstand der Arbeitsmaschine, installiert sein.
  • Information zur Umgebung um die Arbeitsmaschine kann Information zu sichtbarem Licht aufweisen. Es kann ein Bild der Umgebung um die Arbeitsmaschine im sichtbaren Spektrum visualisiert werden. Ein Bild kann ein Foto sein. Alternativ oder zusätzlich kann ein Infrarotbild oder ein Tiefenbild der Umgebung der Arbeitsmaschine erfasst werden. Bei einem Infrarotbild kann Information zur Umgebung Infrarotstrahlung aufweisen. In einem Tiefenbild können Distanzen von der Arbeitsmaschine zu Objekten in der Umgebung pixelartig oder voxelartig dargestellt sein.
  • Die Umgebung um die Arbeitsmaschine kann auch als Szene oder Szenerie definiert werden. Ferner kann als Umgebung auch die Peripherie oder das Umfeld der Arbeitsmaschine gemeint sein.
  • Den bereitgestellten Lösungen liegt die Erkenntnis zugrunde, dass ein automatisiertes, insbesondere ein lediglich positionsgenaues, Führen einer Arbeitsmaschine entlang einer abzuarbeitenden Route nicht ausreichend sein kann um entsprechende Arbeitsaufgaben entlang der Route bestmöglich auszuführen.
  • Eine Grundidee kann darin gesehen werden, während dem Arbeiten mit einer Arbeitsmaschine entlang einer Arbeitsroute reale Umgebungsinformation einem Benutzer visuell in Echtzeit bereitzustellen, um tatsächliche Zustände der Umgebung in die auszuführenden Arbeiten miteinbeziehen zu können. Umgebungsinformation kann so als Echtzeitdarstellung der Umgebung um die Arbeitsmaschine zum Regeln derselben herangezogen werden, wobei das Regeln benutzergeführt oder autonom erfolgen kann.
  • Eine weitere Grundidee kann darin gesehen werden, dass die Bewegung einer bereits mittels Satellitennavigation führbaren oder regelbaren Arbeitsmaschine durch zusätzliches Hinzuziehen einer Echtzeitbilderfassung der Arbeitsumgebung an die tatsächliche Lage von zu bearbeitenden Objekten, als eine Zusatzfunktionalität zur Regelung des Bewegungsverhaltens der Arbeitsmaschine, angepasst werden kann. Es kann bewusst von einer vorgegebenen Sollroute abgewichen werden um das Ausführen der Arbeitsaufgabe objektspezifisch zu verbessern
  • Beispielweise können so mit einer Landmaschine bei zu erledigenden Feldarbeiten entlang eines Fahrweges der Landmaschine Informationen zum Feld, zu Pflanzen oder zu Erntegut während den auszuführenden Arbeiten entlang einer Arbeitsroute in Echtzeit berücksichtigt werden. Ein Traktor, ein Mähdrescher oder eine Erntemaschine kann so auch unter Berücksichtigung tatsächlicher Gegebenheiten, zum Beispiel einer vorhandenen Pflanzen- oder Getreideschnittkante oder der Lage eines Schwads, geregelt und bewegt werden.
  • Die Arbeitsmaschine kann (teil-)automatisiert entlang der Arbeitsroute als vorgegebene Bewegungstrajektorie fahren. Grundlage für die Trajektorie können globale Koordinatendaten, beispielsweise GPS-Koordinaten, sein. Es kann auch eine zuvor durch einen Menschen gefahrene Route wiederholt abgefahren wird, wobei dies als eine „Playback-Funktion“ zur Bewegung der Arbeitsmaschine bezeichnet werden kann.
  • Eine Ausführungsform besteht in Regeln der Bewegung der Arbeitsmaschine mit der Bildinformation und/oder mit einer Arbeitsposition der Arbeitsmaschine. Die Arbeitsmaschine kann auf Basis der Bildinformation in ihrer Querdynamik und/oder Längsdynamik geregelt werden. Die Arbeitsmaschine kann optional anhand ihrer Arbeitsposition in ihrer Längsdynamik und anhand der Bildinformation in ihrer Querdynamik geregelt werden.
  • Grundsätzlich kann als Sensor nur eine Kamera vorgesehen sein. Die Bildinformation kann einen mit der Kamera erfassten oder daraus ausgewählten Bereich der Umgebung visualisieren. Um einen möglichst großen Bereich der Umgebung zu erfassen kann die Kamera ein Weitwinkelobjektiv oder ein Fisheye-Objektiv aufweisen. Dies hat den Vorteil, dass der Blickwinkel und somit die Größe der erfassten Umgebung gesteigert werden kann.
  • Eine weitere Ausführungsform besteht darin, dass ein Bereitstellen einer Vielzahl von Kameras auf der Arbeitsmaschine und ein Erfassen der Bildinformation mit der Vielzahl von Kameras vorgesehen ist, wobei die von der Vielzahl von Kameras erfasste Bildinformation mindestens teilweise redundant ist. Die Kameras können auf der Arbeitsmaschine angeordnet sein. Eine Kamera kann ein in Bewegungsrichtung der Arbeitsmaschine nach vorne ausgerichtetes Sichtfeld haben. Eine andere Kamera kann ein in Bewegungsrichtung der Arbeitsmaschine nach hinten ausgerichtetes Sichtfeld haben. Eine andere Kamera kann ein in Bewegungsrichtung der Arbeitsmaschine seitlich nach links oder rechts ausgerichtetes Sichtfeld haben.
  • Ein Sichtfeld einer Kamera kann einen Bildwinkel aufweisen. Der Bildwinkel kann insbesondere mit einem Objektiv veränderbar sein. Das Sichtfeld oder der Bildwinkel der Kamera kann auch als Blickfeld bezeichnet werden.
  • Eine weitere Ausführungsform besteht darin, dass die Information zur Umgebung der Arbeitsmaschine ein Panoramabild ist. Von mindestens einer Kamera aufgenommene Bilder können sich überlappen, wobei sich die Sichtfelder der Kameras zumindest teilweise überlappen können. In entsprechenden Überlappungsbereichen kann redundante Bildinformation vorliegen. Mittels eines Stichings können Einzelbilder von einer oder mehreren Kameras zu dem Panoramabild kombiniert werden. Das Panoramabild kann auch als eine Rundumansicht bezeichnet werden. Bei einem Berechnen eines Panoramabildes können Helligkeitsunterschiede oder Kontrastunterscheide ausgeglichen werden. Bei dem Berechnen eines Panoramabildes können auch Verzerrungen reduziert werden. Es können auch Störgegenstände aus den Bildern entfernt werden. Beispielsweise kann ein Spiegel, ein Kamin oder ein Auspuff einer Arbeitsmaschine entfernt werden. Mit einem Panoramabild kann die Arbeitsmaschine unter Berücksichtigung eines vollständiges 360°-Blickfeldes geregelt werden.
  • Eine weitere Ausführungsform besteht darin, dass ein Erfassen und/oder Visualisieren der Bildinformation in Echtzeit vorgesehen ist. Echtzeit kann insbesondere als nahe Echtzeit definiert werden. Das Erfassen der Bildinformation in Echtzeit kann ein Echtzeitbild der Umgebung um die Arbeitsmaschine liefern. Ein Echtzeitbild kann kontinuierlich erfasst und visualisiert werden. Das Echtzeitbild kann von einem Anzeigegerät in Echtzeit angezeigt werden. Zum Regeln der Arbeitsmaschine kann somit in Echtzeit Bildinformation zur Verfügung stehen, um die Bewegung der Arbeitsmaschine fortlaufend an Umgebungsbedingungen anzupassen und somit die Bewegung in Echtzeit zu korrigieren.
  • Eine weitere Ausführungsform besteht darin, dass die Bildinformation in verschiedenen Perspektiven visualisierbar ist. Perspektiven können auch als Ansichten oder Echtzeitansichten bezeichnet werden. Die Bildinformation kann einen Bereich der Umgebung im Sichtfeld einer Kamera perspektivisch darstellen. Alternativ oder zusätzlich kann die Bildinformation als Rundumsicht oder in Vogelperspektive („Bird Eye View“) visualisiert sein. Es kann auch eine Trajektorienansicht um die Arbeitsmaschine visualisiert werden. Die Perspektiven können wahlweise separat oder nebeneinander visualisiert werden. Eine dargestellte Bildinformation kann auch in umschaltbaren, änderbaren oder sich wechselnden Perspektiven visualisiert werden. Unterschiedliche Perspektiven haben den Vorteil, dass ein Benutzer die Darstellung der Umgebung auf einem Anzeigegerät wählen kann und sich somit auf bestimmte Bereiche der Umgebung konzentrieren kann, um das Bewegungsverhalten der Arbeitsmaschine zu beeinflussen.
  • Das Regeln einer Bewegung der Arbeitsmaschine entlang der Route kann bereits ausschließlich basierend auf der Bildinformation geschehen. Eine weitere Ausführungsform besteht darin, dass ein Erfassen einer Arbeitsposition der Arbeitsmaschine, ein Visualisieren einer Arbeitsroute und ein Visualisieren der Arbeitsposition vorgesehen ist, wobei die Arbeitsmaschine mit einem Vergleichen der Arbeitsposition mit der Arbeitsroute regelbar ist. Ein Regeln der Arbeitsmaschine basierend auf einem Vergleichen der Arbeitsposition mit der Arbeitsroute kann optional oder dauerhaft unterstützend vorgesehen sein. Die Arbeitsmaschine kann temporär oder dauerhaft auch mit der erfassten Arbeitsposition selbst regelbar sein.
  • Das Regeln einer Bewegung der Arbeitsmaschine entlang der Route kann zunächst in einem ersten Schritt in Abhängigkeit eines visuellen Vergleichens der Arbeitsposition mit der Arbeitsroute erfolgen. Die visuelle Abweichung einer aktuellen Arbeitsposition von einer vorgegebenen Arbeitsroute kann berücksichtigt werden, um die Arbeitsmaschine weiter auf oder wieder zu der Arbeitsroute zu bewegen.
  • Das Regeln der Bewegung der Arbeitsmaschine entlang der Route kann dann in einem zweiten Schritt in Abhängigkeit der visualisierten Bildinformation erfolgen. Es kann von der im ersten Schritt gefolgten Arbeitsroute gewollt abgewichen werden, um die Arbeitsaufgaben effizient und präzise durchzuführen. Eine für das Erledigen der Arbeitsaufgabe tatsächlich zu folgenden Spur kann so abweichend von der Arbeitsroute mit der Arbeitsmaschine oder einem daran angebauten Arbeitsgerät abgefahren werden, wobei die vorgegebene Arbeitsroute verlassen werden kann.
  • Der erste Regelungsschritt kann auch als Grobregelung bezeichnet werden, bei dem die Arbeitsmaschine entlang einer vorgegebenen Arbeitsroute bewegt wird, und der zweite Regelungsschritt kann auch als Feinregelung bezeichnet werden, bei dem die entlang der Arbeitsroute auszuführende Arbeitsaufgabe in Abhängigkeit der tatsächlichen Umgebungsbedingungen positionsgenau ausgeführt werden kann.
  • Das Erfassen der Arbeitsposition kann mittels Satellitennavigation oder Satellitenpositionierung ausgeführt werden. Ein hierfür nutzbares Satellitennavigationssystem kann insbesondere GPS, GLONASS und/oder GALILEO Satelliten nutzen. Ein Empfänger für entsprechende Satellitensignale kann auf der Landmaschine vorgesehen sein und die Arbeitspositionen der Arbeitsmaschine erfassen. Die Genauigkeit von Positionsdaten oder Arbeitspositionen kann durch Verwenden einer Referenzstation erhöht werden, beispielsweise kann differentielles GPS verwendet werden. Ein schnelles und hochfrequentes Verfügbarmachen von Positionsinformation kann somit in Echtzeit bereitgestellt werden.
  • Grundsätzlich kann eine Vielzahl von Anzeigegeräten zum Visualisieren von verschiedenen Informationen auf der Arbeitsmaschine vorgesehen sein. Eine weitere Ausführungsform besteht darin, dass ein Visualisieren der Bildinformation, der Arbeitsroute, und/oder der Arbeitsposition mit einem einzigen Anzeigegerät vorgesehen ist. Auf einem Anzeigegerät oder Display kann die aktuelle Arbeitsposition der Arbeitsmaschine bezüglich einer vorgegebenen Arbeitsroute visualisiert werden und zusätzlich Bildinformation der Umgebung angezeigt werden. Die Bildinformation kann auf ein Geländemodell um die Arbeitsroute projiziert werden und auf dem Anzeigegerät visualisiert werden. Es kann auch die Position eines Arbeitswerkzeuges visualisiert werden. Es kann ein visuelles Nachregeln der Bewegung der Arbeitsmaschine auf Basis der Bildinformation erfolgen. Beispielswese kann so ein Mähbalken eines Traktors präzise auf einem Feld bewegt werden.
  • Eine weitere Ausführungsform besteht darin, dass das Regeln der Bewegung der Arbeitsmaschine entlang der Route ein Abweichen von der Arbeitsroute aufweist. Das Regeln der Bewegung der Arbeitsmaschine kann so gerade nicht als möglichst präzises Abfahren einer vorgegebenen Arbeitsroute verstanden werden, sondern vielmehr als ein an die tatsächlichen Umgebungsbedingungen angepasstes gezieltes Abweichen von einer vorgegebenen Arbeitsroute aufgefasst werden. Das Regeln kann insbesondere ein Querabweichen entlang der Arbeitsroute aufweisen. Dies hat den Vorteil, dass auf sich ändernde Umgebungsbedingungen oder auf Hindernisse flexibel reagiert werden kann.
  • Eine Lösung für eine Anzeigegerät zum Führen einer Arbeitsmaschine besteht darin, dass das Anzeigegerät derart ausgebildet ist, von einem Sensor erfasste Bildinformation zu visualisieren, wobei die Bildinformation eine Information zur Umgebung um die Arbeitsmaschine aufweist und wobei die auf dem Anzeigegerät anzeigbare Bildinformation zum Regeln der Arbeitsmaschine vorgesehen ist. Eine weitere Lösung besteht in einer Arbeitsmaschine, welche ein derartiges Anzeigegerät aufweist.
  • Das Anzeigegerät kann auch derart ausgebildet sein, eine Arbeitsroute und eine von einem Sensor erfasste Arbeitsposition der Arbeitsmaschine zu visualisieren. Das Anzeigegerät kann kombinierte Daten visualisieren, welche Bildinformation, die Arbeitsposition und/oder die Arbeitsroute aufweisen. Derart kombinierte Daten können auch als fusionierte Daten bezeichnet werden. Mit dem Anzeigegerät werden so zusätzlich zu der in 1 gezeigten Darstellung neben der absoluten oder relativen Position der Arbeitsmaschine auch Information zur Umgebung als Echtzeitszenerie angezeigt. Eine Echtzeitansicht der Umgebung kann auf dem Anzeigegerät als Vollbild mit kombinierten Daten oder als Trajektorienansicht wie in 1 gezeigt dargestellt sein.
  • Ausführungsformen werden nachfolgend anhand der schematischen 2 bis 4 weiter erläutert.
    • 1 zeigt eine Anzeige einer Route und einer Position einer Arbeitsmaschine zum Führen derselben aus dem Stand der Technik.
    • 2 zeigt in einem schematischen Ablaufdiagramm Verfahrensschritte für ein Verfahren zum Führen einer Arbeitsmaschine.
    • 3 zeigt eine Draufsicht auf eine Arbeitsmaschine mit vier Kameras zum Visualisieren der Umgebung um die Arbeitsmaschine.
    • 4 zeigt eine Darstellung von Komponenten zum Visualisieren von Bildinformation und einer Arbeitsposition einer Arbeitsmaschine.
  • In 2 sind Verfahrensschritte für ein Führen einer Arbeitsmaschine 1 dargestellt. Ein Regeln S3 der Arbeitsmaschine 1 erfolgt auf Basis eines Visualisierens S22 von Bildinformation 11. Die Bildinformation 11 wird in einem vorangehenden Schritt eines Erfassens S12 der Bildinformation 11 erzeugt und dem Regeln S3 zugrunde gelegt.
  • Das Regeln S3 der Arbeitsmaschine 1 erfolgt optional auf Basis eines Visualisierens S23 der Arbeitsposition 12. Die Arbeitsposition 12 wird in einem vorangehenden Schritt eines Erfassens S11 der Arbeitsposition 12 erzeugt und dem Regeln S3 so zugrunde gelegt.
  • Das Regeln S3 der Arbeitsmaschine 1 erfolgt optional auf Basis eines Visualisierens S21 der Arbeitsroute 14. Die Arbeitsroute 14 wird in einem vorangehenden Schritt eines Erfassens (nicht gezeigt) der Arbeitsroute 14 erzeugt.
  • 3 zeigt einen Traktor als Landmaschine oder Arbeitsmaschine 1 in Draufsicht mit vier Kameras 2, 3, 4, 5, einem elektronisches Steuergerät 6 und einem Satellitennavigationssystem 7.
  • Die Kameras 2, 3, 4, 5 sind mit Verbindungen 10 mit dem Steuergerät 6 verbunden, beispielsweise CAN-Verbindungen, Ethernet-Verbindungen, LVDS-Verbindungen. Die Verbindungen 10 übertragen von den Kameras 2, 3, 4, 5 erfasste Rohdaten an das Steuergerät 6. Das Steuergerät 6 kommuniziert über die Verbindungen 10 oder elektrische Anbindungen mit den Kameras 2, 3, 4, 5, wobei die Bildaufnahme angesteuert und Parameter der Bildaufnahme eingestellt werden.
  • Die Kameras 2, 3, 4 und 5 auf der Arbeitsmaschine 1 haben vier Sichtfelder 20, 30, 40 und 50.
  • Ein erstes Sichtfeld 20 der ersten Kamera 2 ist in Fahrtrichtung der Arbeitsmaschine 1 nach hinten ausgerichtet. Die erste Kamera 2 nimmt in Abhängigkeit des ersten Sichtfelds 20 ein erstes Bild auf. Ein zweites Sichtfeld 30 der zweiten Kamera 3 ist in Fahrtrichtung der Arbeitsmaschine 1 seitlich nach links ausgerichtet. Die zweite Kamera 3 nimmt in Abhängigkeit des zweiten Sichtfelds 30 ein zweites Bild auf. Ein drittes Sichtfeld 40 der dritten Kamera 4 ist in Fahrtrichtung der Arbeitsmaschine 1 nach vorne ausgerichtet. Die dritte Kamera 4 nimmt in Abhängigkeit des dritten Sichtfelds 40 ein drittes Bild auf. Ein viertes Sichtfeld 50 der vierten Kamera 5 ist in Fahrtrichtung der Arbeitsmaschine 1 seitlich nach rechts ausgerichtet. Die vierte Kamera 5 nimmt in Abhängigkeit des vierten Sichtfelds 50 ein viertes Bild auf.
  • Die Kameras 2, 3, 4 und 5 sind derart angeordnet und ausgerichtet, dass die Sichtfelder 20, 30, 40, 50 paarweise Überlappungsbereiche 60, 70, 80 und 90 erzeugen.
  • Bereiche der Umgebung in den Überlappungsbereichen 60, 70, 80 und 90 sind so in jeweils zwei Bildern von zwei Kameras aufgenommen.
  • Ein Überlappungsbereich 70 resultiert aus einem Überlappen des dritten Sichtfelds 40 und des vierten Sichtfelds 50, welche die Bilderfassung mit der dritten Kamera 4 und der vierten Kamera 5 definieren. Ein Überlappungsbereich 60 resultiert aus einem Überlappen des vierten Sichtfelds 50 und des ersten Sichtfelds 20, welche die Bilderfassung mit der vierten Kamera 5 und der ersten Kamera 2 definieren. Ein Überlappungsbereich 90 resultiert aus einem Überlappen des ersten Sichtfelds 20 und des zweiten Sichtfelds 30, welche die Bilderfassung mit der ersten Kamera 2 und der zweiten Kamera 3 definieren. Ein Überlappungsbereich 80 resultiert aus einem Überlappen des zweiten Sichtfelds 30 und des dritten Sichtfelds 40, welche die Bilderfassung mit der zweiten Kamera 3 und der dritten Kamera 4 definieren. Auf Basis der in den Sichtfeldern 20, 30,40, 50 aufgenommenen Einzelbildern wird eine Rundumansicht errechnet.
  • In 4 sind die Komponenten zum Visualisieren von Bildinformation und einer Arbeitsposition der Arbeitsmaschine mit einem Anzeigegerät 8 dargestellt.
  • Mit dem Anzeigegerät 8 werden Bildinformation 11, eine Arbeitsposition 12 und/oder eine Arbeitsroute 14 der Arbeitsmaschine 1 visuell dargestellt.
  • Bildinformation 11 wird von dem Steuergerät 6, welches mit den Kameras 2, 3, 4 und 5 verbunden ist, an das Anzeigegerät 8 übertragen. Das Steuergerät 6 hat optional N Eingänge für N Kameras.
  • Die Arbeitsmaschine 1 hat ein Satellitennavigationssystem 7. Das Satellitennavigationssystem 7 weist eine Antenne (nicht gezeigt) auf, welche Satellitensignale empfängt, beispielsweise ist ein GPS-Empfänger auf der Arbeitsmaschine 1 angeordnet. Das Satellitennavigationssystem 7 verwendet zur Erzeugung von Positionsdaten zusätzlich ein erdgebundenes Positionierungssystem 9, beispielsweise ein RTK-Positionierungssystem (Real Time Kinematic).
  • Die Arbeitsposition 12 wird mit einem Satellitennavigationssystem 7 und einem damit in Beziehung stehenden optionalen Positionierungssystem 9 erzeugt. Die Arbeitsposition 12 wird über eine Leitung, zum Beispiel CAN oder Ethernet, an das Anzeigegerät 8 übertragen.
  • Kombinierte Daten 13 werden auf einem Speichermedium 15, beispielsweise auf einem USB-Stick oder einer SD-Card abgespeichert werden, um später durch den Anwender oder Benutzer der Arbeitsmaschine 1 offline ausgewertet zu werden.
  • Bezugszeichenliste
  • 1
    Arbeitsmaschine
    2
    erste Kamera
    3
    zweite Kamera
    4
    dritte Kamera
    5
    vierte Kamera
    6
    Steuergerät
    7
    Satellitennavigationssystem
    8
    Anzeigegerät
    9
    Positionierungssystem
    10
    Verbindungen
    11
    Bildinformation
    12
    Arbeitsposition
    13
    Kombinierte Daten
    14
    Arbeitsroute
    15
    Speichermedium
    20
    Sichtfeld erste Kamera
    30
    Sichtfeld zweite Kamera
    40
    Sichtfeld dritte Kamera
    50
    Sichtfeld vierte Kamera
    60
    erster Überlappungsbereich
    70
    zweiter Überlappungsbereich
    80
    dritter Überlappungsbereich
    90
    vierter Überlappungsbereich
    101
    Route
    102
    Arbeitsgelände
    103
    Arbeitsgerät
    104
    überfahrenes Gelände
    S11
    Erfassen Arbeitsposition
    S12
    Erfassen Bildinformation
    S21
    Visualisieren Arbeitsroute
    S22
    Visualisieren Bildinformation
    S23
    Visualisieren Arbeitsposition
    S3
    Regeln Arbeitsmaschine
  • ZITATE ENTHALTEN IN DER BESCHREIBUNG
  • Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.
  • Zitierte Patentliteratur
    • WO 2010/083949 A1 [0007]

Claims (11)

  1. Verfahren zum Führen einer Arbeitsmaschine (1) entlang einer Route, welches Regeln (S3) einer Bewegung der Arbeitsmaschine (1) entlang der Route aufweist, gekennzeichnet durch Erfassen (S12) von Bildinformation (11) mit mindestens einem Sensor, Visualisieren (S22) der Bildinformation (11) mit einem Anzeigegerät (8), wobei die Bildinformation (11) eine Information zur Umgebung um die Arbeitsmaschine (1) aufweist und wobei die Arbeitsmaschine (1) mit der Bildinformation (11) regelbar ist.
  2. Verfahren nach Anspruch 1, gekennzeichnet durch Regeln (S3) der Bewegung der Arbeitsmaschine (1) mit der Bildinformation (11) und/oder mit einer Arbeitsposition (12) der Arbeitsmaschine (1).
  3. Verfahren nach Anspruch 1 oder 2, gekennzeichnet durch Bereitstellen einer Vielzahl von Kameras (2, 3, 4, 5) auf der Arbeitsmaschine (1) und Erfassen (S12) der Bildinformation (11) mit der Vielzahl von Kameras (2, 3, 4, 5), wobei die von der Vielzahl von Kameras (2, 3, 4, 5) erfasste Bildinformation (11) mindestens teilweise redundant ist.
  4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass die Information zur Umgebung der Arbeitsmaschine (1) ein Panoramabild ist.
  5. Verfahren nach einem der Ansprüche 1 bis 4, gekennzeichnet durch Erfassen (S12) und Visualisieren (S22) der Bildinformation (11) in Echtzeit.
  6. Verfahren nach einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass die Bildinformation (11) in verschiedenen Perspektiven visualisierbar ist.
  7. Verfahren nach einem der Ansprüche 1 bis 6, gekennzeichnet durch Erfassen (S11) einer Arbeitsposition (12) der Arbeitsmaschine (1), Visualisieren (S23) der Arbeitsposition (12) und Visualisieren (S21) einer Arbeitsroute (14), wobei die Arbeitsmaschine (1) mit Vergleichen der Arbeitsposition (12) mit der Arbeitsroute (14) regelbar ist.
  8. Verfahren nach einem der Ansprüche 1 bis 7, gekennzeichnet durch Visualisieren (S22, S21, S23) der Bildinformation (11), der Arbeitsroute (14), und/oder der Arbeitsposition (12) der Arbeitsmaschine (1) mit einem einzigen Anzeigegerät (8).
  9. Verfahren nach einem der Ansprüche 1 bis 8, dadurch gekennzeichnet, dass das Regeln (S3) der Bewegung der Arbeitsmaschine (1) entlang der Route ein Abweichen von der Arbeitsroute (14) aufweist.
  10. Anzeigegerät (8) zum Führen einer Arbeitsmaschine (1) entlang einer Route, welches für ein Regeln einer Bewegung der Arbeitsmaschine (1) entlang der Route ausgebildet ist, dadurch gekennzeichnet, dass das Anzeigegerät (8) derart ausgebildet ist, von einem Sensor erfasste Bildinformation (11) zu visualisieren, wobei die Bildinformation (11) eine Information zur Umgebung um die Arbeitsmaschine (1) aufweist und wobei die auf dem Anzeigegerät (8) anzeigbare Bildinformation (11) zum Regeln der Arbeitsmaschine (1) vorgesehen ist.
  11. Arbeitsmaschine (1), welche ein Anzeigegerät (8) nach Anspruch 10 aufweist.
DE102017220005.7A 2017-11-10 2017-11-10 Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine Withdrawn DE102017220005A1 (de)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102017220005.7A DE102017220005A1 (de) 2017-11-10 2017-11-10 Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine
PCT/EP2018/078323 WO2019091725A1 (de) 2017-11-10 2018-10-17 Verfahren und anzeigegerät zum führen einer arbeitsmaschine

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017220005.7A DE102017220005A1 (de) 2017-11-10 2017-11-10 Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine

Publications (1)

Publication Number Publication Date
DE102017220005A1 true DE102017220005A1 (de) 2019-05-16

Family

ID=63896179

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017220005.7A Withdrawn DE102017220005A1 (de) 2017-11-10 2017-11-10 Verfahren und Anzeigegerät zum Führen einer Arbeitsmaschine

Country Status (2)

Country Link
DE (1) DE102017220005A1 (de)
WO (1) WO2019091725A1 (de)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020193158A1 (de) * 2019-03-27 2020-10-01 Zf Friedrichshafen Ag Verfahren und system zur linienerfassung auf einer landwirtschaftlichen nutzfläche
DE102019209526A1 (de) * 2019-06-28 2020-12-31 Zf Friedrichshafen Ag Überwachen einer Anbaufläche

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11846947B2 (en) 2021-05-11 2023-12-19 Cnh Industrial Canada, Ltd. Systems and methods for an implement imaging system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010083949A1 (de) 2009-01-21 2010-07-29 Amazonen-Werke H. Dreyer Gmbh & Co. Kg Elektronisches routensystem
US20110106422A1 (en) * 2009-10-30 2011-05-05 Teejet Technologies Illinois, Llc Method and apparatus for guiding a vehicle
US20140324272A1 (en) * 2013-04-29 2014-10-30 Claas Agrosystems Kgaa Mbh & Co Kg Operating system for and method of operating an automatic guidance system of an agricultural vehicle
DE102014201203A1 (de) * 2014-01-23 2015-07-23 Deere & Company Landwirtschaftliches Arbeitsfahrzeug mit einem Fluggerät und zugehöriger Stromversorgung

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105682446B (zh) * 2013-10-01 2018-06-08 洋马株式会社 联合收割机
CN106687877A (zh) * 2014-07-16 2017-05-17 株式会社理光 系统,机械,控制方法和程序
JP6662762B2 (ja) * 2016-12-19 2020-03-11 株式会社クボタ 作業車

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010083949A1 (de) 2009-01-21 2010-07-29 Amazonen-Werke H. Dreyer Gmbh & Co. Kg Elektronisches routensystem
US20110106422A1 (en) * 2009-10-30 2011-05-05 Teejet Technologies Illinois, Llc Method and apparatus for guiding a vehicle
US20140324272A1 (en) * 2013-04-29 2014-10-30 Claas Agrosystems Kgaa Mbh & Co Kg Operating system for and method of operating an automatic guidance system of an agricultural vehicle
DE102014201203A1 (de) * 2014-01-23 2015-07-23 Deere & Company Landwirtschaftliches Arbeitsfahrzeug mit einem Fluggerät und zugehöriger Stromversorgung

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020193158A1 (de) * 2019-03-27 2020-10-01 Zf Friedrichshafen Ag Verfahren und system zur linienerfassung auf einer landwirtschaftlichen nutzfläche
DE102019209526A1 (de) * 2019-06-28 2020-12-31 Zf Friedrichshafen Ag Überwachen einer Anbaufläche

Also Published As

Publication number Publication date
WO2019091725A1 (de) 2019-05-16

Similar Documents

Publication Publication Date Title
EP2612110B1 (de) Verfahren zur erfassung von agrarflächen durch abfliegen mit georeferenzierter optischer aufzeichnung
DE102013209415A1 (de) Dynamische Hinweisüberlagerung mit Bildbeschneidung
DE102018215344A1 (de) System und verfahren für fahrzeugkonvois
EP3413155B1 (de) Verfahren zum erfassen mindestens eines abschnitts eines begrenzungsrands einer zu bearbeitenden fläche, verfahren zum betreiben eines autonomen mobilen grünflächenbearbeitungsroboters, erfassungssystem und grünflächenbearbeitungssystem
EP2922384B1 (de) Autonomes fortbewegungsgerät
DD228096A5 (de) Verfahren und vorrichtung zur automatischen fuehrung von fahzeugen, insbesondere von fahrerlosen elektrokarren
DE102009023896A1 (de) Vorrichtung und Verfahren zum Erfassen einer Pflanze
DE10308525A1 (de) Vermessungssystem
DE102011075703A1 (de) Verfahren und Vorrichtung zur Kalibrierung einer Projektionseinrichtung eines Fahrzeugs
WO2019091725A1 (de) Verfahren und anzeigegerät zum führen einer arbeitsmaschine
DE102012111345B4 (de) Mobiles Handgerät zur Ausrichtung eines Sensors
EP2930466B1 (de) Handhaltbares Beobachtungsgerät mit einem digitalen Magnetkompass
DE112016000689T5 (de) Kameraparametereinstellvorrichtung
DE102016209437A1 (de) Selbsttätiges Lenksystem zur Führung eines landwirtschaftlichen Fahrzeugs über ein Feld und entsprechendes Verfahren
DE102015112605A1 (de) System zum bestimmen eines kupplungswinkels
EP2350977B1 (de) Verfahren zur bildfusion von zumindest zwei bildern zu einem panoramabild
EP3575912A1 (de) Mähroboter
DE102016114693A1 (de) Verfahren zum Unterstützen eines Fahrers eines Kraftfahrzeugs beim Führen des Kraftfahrzeugs, Fahrerassistenzsystem sowie Kraftfahrzeug
EP3584536A1 (de) Terrestrisches beobachtungsgerät mit lagebestimmungsfunktionalität
DE102017114450B4 (de) Vorrichtung und Verfahren zum Abbilden von Bereichen
DE102010034127A1 (de) Verfahren zum Anzeigen von Bildern auf einer Anzeigeeinrichtung in einem Kraftfahrzeug, Fahrerassistenzsystem und Kraftfahrzeug
WO2022135632A1 (de) Vorrichtung und verfahren zur flächenkartierung
DE102021110287A1 (de) Verfahren und System zum automatisierten Kalibrieren von Sensoren
DE102015215573A1 (de) Verfahren zur eingabe eines weges für ein fahrzeug und einen anhänger
DE102015201642B4 (de) Vorrichtung und Verfahren zur Darstellung einer Umgebung eines Fahrzeuges

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee