WO2020260427A1 - Verfahren zur beobachtung von arbeitsprozessen einer landwirtschaftlichen maschine, digitales videosystem und landwirtschaftliche maschine - Google Patents

Verfahren zur beobachtung von arbeitsprozessen einer landwirtschaftlichen maschine, digitales videosystem und landwirtschaftliche maschine Download PDF

Info

Publication number
WO2020260427A1
WO2020260427A1 PCT/EP2020/067760 EP2020067760W WO2020260427A1 WO 2020260427 A1 WO2020260427 A1 WO 2020260427A1 EP 2020067760 W EP2020067760 W EP 2020067760W WO 2020260427 A1 WO2020260427 A1 WO 2020260427A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
unit
machine
images
image display
Prior art date
Application number
PCT/EP2020/067760
Other languages
English (en)
French (fr)
Inventor
Markus Witte
Original Assignee
Grimme Landmaschinenfabrik Gmbh & Co. Kg
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Grimme Landmaschinenfabrik Gmbh & Co. Kg filed Critical Grimme Landmaschinenfabrik Gmbh & Co. Kg
Priority to US17/622,016 priority Critical patent/US11963477B2/en
Priority to EP20742171.0A priority patent/EP3986112A1/de
Priority to JP2021576700A priority patent/JP2022538241A/ja
Priority to CN202080046757.8A priority patent/CN114096146A/zh
Priority to AU2020303258A priority patent/AU2020303258A1/en
Priority to CA3145156A priority patent/CA3145156A1/en
Publication of WO2020260427A1 publication Critical patent/WO2020260427A1/de
Priority to IL289361A priority patent/IL289361A/en
Priority to JP2024014851A priority patent/JP2024050768A/ja

Links

Classifications

    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01D—HARVESTING; MOWING
    • A01D13/00—Diggers, e.g. potato ploughs
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01D—HARVESTING; MOWING
    • A01D34/00—Mowers; Mowing apparatus of harvesters
    • A01D34/001—Accessories not otherwise provided for
    • A—HUMAN NECESSITIES
    • A01—AGRICULTURE; FORESTRY; ANIMAL HUSBANDRY; HUNTING; TRAPPING; FISHING
    • A01D—HARVESTING; MOWING
    • A01D33/00—Accessories for digging harvesters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Definitions

  • the present invention relates to a method for monitoring work processes of an agricultural machine, a digital video system for monitoring work processes of an agricultural machine and an agricultural work machine.
  • Analog video systems have been used as an assistance system for the machine operator for years to monitor crop processing and / or processing work processes of an agricultural machine, in particular a towed or self-propelled harvesting machine, preferably for clearing potatoes or beets.
  • a feature of these video systems is that exactly the video image is always displayed on the monitor that the camera assigned to this monitor is recording. Depending on the positioning of the camera, parts of the machine that are not relevant for the driver are also displayed. If the user wants to see a larger image section, the camera has to be laboriously repositioned.
  • various manufacturers now offer video systems in which a maximum of four cameras per monitor can be connected and then displayed at the same time.
  • EP 3 437 929 A1 discloses a vision system for a vehicle in which a driving situation-related field of vision / field of vision of a relevant area located in the near field around a tractor is shown on the monitor of an operator.
  • a method for observing crop processing and / or processing work processes of an agricultural machine, in particular a harvesting machine, which has a digital video system with a plurality of digital image acquisition units, with at least one display unit, and with a network coupling element, preferably designed as a switch, via which the image capture units are connected to the display unit, the image capture units record image data for images, in particular of a video stream.
  • At least one of the images, in particular the video stream is reproduced at least partially in one of in particular several configurable shapes comprising one or more image reproduction areas on the display unit, in particular designed as a touch screen, of an EDP unit, preferably designed as a panel PC.
  • the image data is transferred from the respective image acquisition unit via the switch, in particular via an Ethernet switch, to the EDP unit.
  • the respective elements of the digital video system are connected in particular via network cables (Ethernet cables).
  • the physical connection of the image capture units to the at least one display unit is thus carried out indirectly via the EDP unit to which the display unit is connected or which the display unit has.
  • the display unit thus comprises at least one display and the electronics belonging to it.
  • the image acquisition units are here geared to work processes of the machine that process and / or process harvested material and thus in particular to machine elements, for example to conveyor belts conveying harvested material, steps or the like. Individual cameras can also be aimed at cutting devices for separating crops and debris such as stones or earth or at steps. Likewise, digital image acquisition units can, for example, be directed to crop collection areas (bunkers), transfer areas or receiving areas.
  • the image capture units are in particular digital video cameras that output individual images, for example in RAW format, or also send a complete, already compressed video stream into the system in MPEG or other video format.
  • the cameras are preferably high-resolution cameras with a sensor resolution of at least 1280 x 720 points, preferably at least 1280 x 800 points, in particular at least a 1.3 megapixel sensor, for example at least 1280 x 1024 points (pixels ).
  • the data for the images of a video stream can also only be available as deviations from a previously transmitted image. As described, they are forwarded in particular wired to the network coupling element, which is preferably designed as an Ethernet switch and which forward the data from the image acquisition units to a data processing EDP unit, preferably a panel PC, via one or more network coupling elements.
  • the data are provided in accordance with a configuration for the display unit, with the configuration being able to be preset in a standardized manner by the operator or by the program.
  • the image data for the images of a video stream are processed in the EDP unit in such a way that they can be reproduced on the display unit, especially designed as a touch screen, of the EDP unit, especially designed as a panel PC, in the respective image reproduction area of a defined shape.
  • the arrangement of one or more image display areas on the available screen surface of the display unit is referred to as the shape.
  • connection cables are in particular Ethernet lines, for example in the form of 100 BASE-TX or 1000 BASE-TX lines, over which sufficient amounts of data are transmitted.
  • Individual components of the video system in particular the Ethernet switch and the EDP unit, are preferably provided with a Gigabit Ethernet interface in order to transfer the amount of data to be processed as efficiently as possible.
  • the display areas of a shape can be configured in such a way that they display identical images, i.e. the same video stream. Overall, up to eight image display areas can be displayed in one shape, which means that up to eight video streams can be displayed simultaneously.
  • the EDP unit is in particular equipped with correspondingly powerful graphics and / or micro processors.
  • the EDP unit has the usual means for storing and processing data, in particular work and data storage devices, controllers, network and possibly communication interfaces. Further possible details of the EDP unit are also described below for the respective developments according to the invention.
  • the configuration of the shapes and the image display areas can be stored in the EDP unit and can be called up accordingly so that the preferably at least 12-inch visible area of the display unit can be configured personally for a machine operator, service technician or other operating personnel.
  • information on the machine type can be transmitted via an interface to the machine control, which can also be linked to the switch and also to the EDP unit.
  • This then leads to a preselection or provision of corresponding shapes, which can be stored in advance configured.
  • a standardized shape can also be made available for unknown machine types not stored in the EDP unit. It is also possible through an existing one in the EDP unit Interface and read in individual shape configurations using a portable storage medium or export them to this storage medium.
  • the operating personnel now has the option, according to the invention, of displaying exactly the video images that they want to see.
  • a machine operator can set different priorities in the observation of the work processes, especially with different ground conditions. For example, areas of a harvesting machine that are prone to clogging can be specifically monitored in heavy, moist soil conditions, while in finer, dry and light soil conditions, for example, more emphasis can be placed on separating the harvested material into different batch sizes.
  • the processes observed by the digital video system are, in particular, processes that take place "within” the machine, so it is not just a matter of image capturing units aimed at the external environment of the machine, but rather image capturing units aimed at machine elements handling and processing the crop. solution units. Crop processing is also understood to mean storage in a bunker of the machine.
  • the images of one of the image capture units are at least partially reproduced in several image reproduction areas of a shape at the same time, with different regions of interest of the image acquisition unit being able to be defined in advance and each reproduced in a separate reproduction area of this shape.
  • a video stream could only ever be played in one playback area of the screen.
  • the simultaneous sending of data packets to several participants (multicast) in the EDP unit means that the data are now made available for at least two playback areas.
  • the video streams can be calculated in a further high-performance image processing unit.
  • the definition of the reproduced areas of a video stream can be done according to the invention via the touchscreen during operation of the system or in a configuration mask using a still image.
  • Image areas can be selected as regions of interest using a one- or two-finger gesture, for example, in a manner similar to that known from cell phones, and image areas are then displayed accordingly, in particular in a separate image display area.
  • the system is technically designed so that the selected Image section (region of interest) is shown enlarged.
  • the images of the image capturing unit (or their representation) within the respective image reproduction area of a shape can thus be zoomed.
  • the selection of the region of interest is then accompanied by zooming in on the respective image sections, in particular via two-finger input.
  • the different video streams can thus be displayed in a targeted manner and, if necessary, enlarged in sections, so that an even better view of particularly critical work areas is possible.
  • an entrance area and an exit area can be zoomed in and displayed in the same shape, enlarged in a total of three image display areas (overall view, entrance area, exit area).
  • the images or image details selected within the respective image reproduction area can preferably be stored in a memory unit.
  • This can be present locally in the EDP unit, for example in the form of a volatile permanent memory; it can also be a portable storage medium that can be connected via a corresponding interface of the EDP unit.
  • the system is preferably configured in such a way that a selection menu is displayed by means of a touch-screen input on the corresponding image display area, via which the video stream can be stored (in particular also zoomed and thus partially displayed). As an alternative or in addition, this process can also be triggered via the general settings menu with any submenus.
  • the system is preferably configured in such a way that two or more image display areas, in particular all image display areas, and the video streams displayed in these are stored at the same time, preferably also in the arrangement visible on the screen, in particular on a portable medium, in order to access simultaneously work processes that are present at various points on the machine can also be viewed at the same time later without having to pay attention to the simultaneous playback of separate video streams.
  • the EDP unit thus offers the convenient creation of a common video stream based on the content shown on the display unit.
  • the term “portable medium” is understood to mean storage media that can be temporarily connected to the EDP unit via a hardware interface and that are not necessary for the operation of the EDP unit and, in particular, are only used for data transport. For example, these are USB sticks. However, it can also be a cloud storage, which is preferably made available by the machine manufacturer and is available via interfaces of the machine and / or the tractor.
  • the viewing and monitoring of the work processes is improved in particular when the images of the video stream of an image acquisition unit, which are temporarily stored in a preferably volatile or semi-permanent buffer memory, are reproduced more slowly in at least one image display area, in particular with the same video stream completely or zoomed in another image display area the same shape or slowed down differently will give.
  • the incoming video stream is slowed down to 25% of real-time, with a jump in the playback to the current image after a particularly predeterminable time, for example after 4 seconds, and the subsequent video stream is then played back slowly again . This enables very good monitoring in particular of fast moving, in particular rotating machine parts.
  • the system is designed in such a way that slowed video streams are reproduced in at least two image reproduction areas of a shape.
  • the images of one or more image display areas and / or image capture units, which are in particular formed as a video stream, are preferably transmitted wirelessly to a remote, in particular mobile, terminal or user terminal by means of a communication unit connected in particular via an additional switch, e.g. an Ethernet switch.
  • a communication unit connected in particular via an additional switch, e.g. an Ethernet switch.
  • the terminal user preferably connects his mobile terminal to a WLAN, which is made available to the machine via a communication unit.
  • the terminal user can then display individual shapes adapted to the terminal with at least one video stream of one of the multiple image acquisition units in a program that starts on the mobile terminal.
  • the digital can be accessed on a website of the digital, preferably hosted on the IT unit.
  • len video system via which an in particular configurable shape is made available for a remote, in particular mobile user terminal, with the image display areas also preferably being predefined and / or configurable on the server side.
  • the images of one or more image display areas of a shape are stored in such a way that successive clips each have a preferably adjustable length. stand or be saved.
  • the associated limitation of the size of the resulting clips which are preferably automatically provided with the time stamps in their names, makes it easier to subsequently edit and view individual clips that were created at certain, for example critical times.
  • the switches By cascading the switches, the system can be expanded, in particular also easily expanded at a later date, if corresponding ports are kept free for at least one additional switch on the respective switches.
  • the bandwidth required in the network of the digital video system is preferably reduced by only streaming the cameras displayed in the currently active shape.
  • a corresponding screen signal is displayed overlaying the previous image display areas and / or reproduces at least one associated machine element in an image display area.
  • a shape can be changed automatically for this purpose.
  • an interface to the machine control is again required, which is also provided via the Ethernet switch, another Ethernet switch or a direct connection to the EDP unit.
  • the respective screen signal can in particular be reproduced in a shape configured only for this configuration.
  • a control terminal is typically found in the driver's cab and, for example, on a picking table of a potato tractor on the picking table.
  • an automated switchover from one or more video streams to a shape configured for this takes place.
  • one or more image sections are then displayed, preferably in the form of regions of interest of one or more video streams, so that the operating personnel is informed of the possibly critical situation and can initiate countermeasures or checks based on this.
  • Colored highlighting is preferably carried out at the same time, particularly when there is a deviation from normal operation or in critical operating states, for example when individual areas are too busy.
  • a slower playback of the relevant video stream can take place in such a shape. It is also advantageous according to the invention if such an overlay or display of a shape can be hidden again by a screen input, in particular in the form of a swipe movement, in order to return to the previous view or the previous shape.
  • the video streams have to be displayed with the lowest possible latency (delay time) from the camera lens to the display unit.
  • Delay times ⁇ 100ms are desirable.
  • a time is preferably assigned to individual images.
  • at least several of the images on one component can be provided with a time stamp and the time on another component of the (digital video) system can be recorded and / or the time when a recognizable image is received is recorded on various components of the system in order to identify the associated image display area if the time delay is too great, for example to make it black and / or to provide it with a red exclamation mark.
  • An animated graphic for example rotating gear
  • the shapes have at least one and preferably up to eight, in particular rectangular, image reproduction areas, with an arrangement of the image reproduction areas depending on the size and shape of the selected regions of interest and / or the position of the image acquisition units in the
  • the crop flow of the crop is proposed by means of an algorithm available on the EDP unit. This is a simple optimization problem for optimal utilization and arrangement of the available area, if the operating personnel want to leave this to the system.
  • a further exemplary embodiment of the invention is advantageous if the shapes are automatically switched over, in particular at predefinable time intervals, in order to sequentially view different
  • predetermined shapes are also used as a function of signals transmitted to the machine control for the operating states driving on the road, field work and driving backwards.
  • a shape can be displayed that shows the view of any machine parts to be folded in or to be lifted, while the desired work processes that vary the crop flow are considered for field work. The same applies to the shape views when driving backwards.
  • the images of at least one image acquisition unit are also displayed as a web video stream via a remote connection, in particular with the resolution of the shape view or the repetition frequency being adapted to the connection bandwidth reported by a mobile device, for example.
  • This system can also be implemented on the EDP unit completely independently of the display on the display unit in order to avoid disrupting the operator.
  • the system is not designed for machine control, that is, it does not intervene in the control of the machine, but only serves to monitor the processes.
  • a digital video system for observing harvested crop and / or working processes of an agricultural machine, in particular a harvesting machine, which has a plurality of digital image acquisition units and at least one as touch screen formed display unit of an EDP unit formed in particular as a panel PC, and which is provided with a network coupling element, preferably formed as a switch, in particular an Ethernet switch, via which the image acquisition units are connected to the display unit.
  • the system is designed to carry out a method according to one of the preceding claims, as described above, by means of one or more computer programs.
  • the system For scalability of the system, it is preferably provided with a plurality of network coupling elements in the form of (Ethernet) switches, at least one image acquisition unit being connected to the EDP unit via the switches networked in series.
  • network coupling elements in the form of (Ethernet) switches, at least one image acquisition unit being connected to the EDP unit via the switches networked in series.
  • a camera When a camera is exchanged, it is preferably automatically recognized, configured and put back into operation by the system, especially if it is an exchange of original parts.
  • the transmission of the desired signals from a machine control system can then be improved in particular when the switch, which is directly connected to the EDP unit, is connected to an interface for a CAN bus and / or a communication unit of the machine.
  • a CAN-BUS or a communication unit can also be connected directly to the EDP unit if it is provided with appropriate interfaces.
  • the object set out above is also achieved by an agricultural work machine, in particular a harvesting machine, which has a video system written before or after.
  • Fig. 1 an object according to the invention in the form of a drawn Ern temaschine,
  • Fig. 2 Components of the object according to the invention according to Fig. 1,
  • Fig. 4 nine variants of shapes
  • Fig. 5 Program levels of a computer program enabling the method according to the invention
  • FIG. 7 an associated configuration view for the shape according to FIG. 6.
  • a device is designed according to FIG. 1 as a harvesting machine 2 pulled by a tractor 1 and designed as a potato harvester.
  • An EDP unit belonging to the harvesting machine 2 according to the invention is arranged with a display unit 3 configured as a touchscreen in a driver's cab 5 of the tractor 1. This is connected to a switch on the harvesting machine side via an Ethernet cable (not shown).
  • the image data recorded by digital image acquisition units 4, which in the present case are schematically assigned to individual processing stages for the harvested crop, are reproduced on the display unit 3.
  • the image acquisition units 4 are digital cameras, which generally in systems according to the invention transmit the data via Ethernet cables 6 to a
  • Switch 7 which is designed as an Ethernet switch, transmit. From there, the data are then transmitted to an EDP unit designed as a panel PC 8, likewise preferably again via Ethernet cable 6.
  • Another Panel PC 8 can optionally be connected, on whose display unit a number of configurable shapes can also be displayed.
  • a main panel PC master
  • it can then be selected which of the card ras on this and which are displayed on the subordinate, optional Panel PC (slave, connected via a data line in the form of a dashed Ethernet cable 6).
  • a CAN to Ethernet gateway 9 This gives access to WLAN and to a machine control unit 12 connected via a CAN BUS line 11.
  • a corresponding bus system can still be accessed via an ISO-BUS line 13 (shown in dashed lines).
  • the gateway 9 also includes a corresponding ISOBUS interface.
  • the digital image acquisition units 4 are connected to only one Ethernet switch 7, which is preferably arranged on the harvesting machine side in a trailed harvesting machine 2
  • the embodiment variant according to FIG. 3 has a total of four switches 7, of which the upper in the figure is assigned to the tractor 1, while the switches 7 connected directly to the digi tal image acquisition units 4 on the side of the harvesting machine 2 are arranged.
  • a dashed line 14 indicates the separation of the two tractor 1 and harvesting machine 2 shown as boxes in the figure.
  • the optical image acquisition units 4 arranged on the right, harvesting machine-side switch 7 in FIG. 4 are then via a total of four switches 7 with a master panel PC 8 on the left in the figure and a further panel PC next to it on the right in the figure (Slave) 8 connected.
  • this This embodiment example has an ISO-BUS interface 15. Machine signals or control signals are received via this which, depending on the type of signal, lead to an automated call-up of a shape that attracts the attention of the machine operator, via which a video stream of an optical image acquisition unit 4 assigned to the control signals is displayed on the display unit.
  • a CAN to Ethernet gateway 10 This is stored in the settings of the program running on the EDP unit.
  • a router that can be connected via the gateway 10 provides a WLAN connection 16 to a remote and mobile user terminal 17 on which shapes can also be configured or accessed via a web server running on the master panel PC.
  • a diagnostic interface 18 and one or more additional control signals can be connected to the tractor-side Ethernet switch 7 via transmitting devices 20.
  • a configuration program section i. the settings of a software program running on the master panel PC 8, for example, the nine shapes shown in FIG. 4 can be configured.
  • image reproduction areas 19 can be equipped with video streams from the optical image processing units 4.
  • levels of an associated computer program are shown for the embodiment shown.
  • a working view 21 for the respective shapes from which individual images Output areas 19 can be edited according to box 22.
  • the working view 21 is assigned an input option on the touch screen, via which the operating personnel can access a setting level 23 from which a shape management 24, a camera management 25, a sequence management 26 and a web server management 27 and user settings 28 can be reached.
  • the shapes are configured in the shape management 24.
  • settings of the image capture units 4 can be made, if available, for example the color design, compression or resolution.
  • the sequence management 26 enables the storage of individual image reproduction sections 19 or the management of the individual video streams.
  • a website display for individual shapes is configured accordingly, in particular an access administration can be configured with which third parties log on to the web server of the EDP unit only with a password from a preferably mobile user terminal, which is at least remote from the harvesting machine can.
  • the user profile can be saved or called up in the user administration 28. You can also set whether the system always starts with the last used user profile or with a standard configuration.
  • a shape for the reproduction of five video streams is formed on the basis of the five image reproduction areas 19.
  • the associated configuration interface of the shape can be called up directly by means of a correspondingly assigned icon 29.
  • image display areas 19 are formed, which are reduced in size but otherwise correspond to those of FIG.
  • the top image display area 19 shows, reduced in size, the video stream of the image display area at the top left in FIG. 6, the image display area 19 in FIG. 7 below the image display area in the second line shows the second video stream from the left in FIG. etc ..
  • the occupancy of the image reproduction area 4 with the available optical image acquisition units 4 is carried out via the field 31 which can be operated by finger.
  • Tapping this field or the other fields 31 shows a drop-down list via which the cameras known in the system can then be selected.
  • the areas of the touchscreen located at the bottom left in FIG. 7 are a key for jumping back to the previous dialog (key 32), a help key 33 and an information key 34.

Abstract

Verfahren zur Beobachtung von Erntegut ver- und/oder bearbeitenden Arbeitsprozessen einer landwirtschaftlichen Maschine, insbesondere einer Erntemaschine (2), die ein digitales Videosystem mit einer Mehrzahl von digitalen Bilderfassungseinheiten (4), mit wenigstens einer Anzeigeeinheit (3), sowie mit wenigstens einem vorzugsweise als Switch (7) ausgebildeten Netzwerkkopplungselement, über das die Bilderfassungseinheiten (4) mit der Anzeigeeinheit (3) verbunden sind, aufweist, wobei die Bilderfassungseinheiten (4) Bilddaten für Bilder insbesondere eines Videostreams, aufnehmen und zumindest eines der Bilder, insbesondere der Videostream, wenigstens teilweise in einem von insbesondere mehreren konfigurierbaren Shapes umfassend ein oder mehrere Bildwiedergabebereiche (19) der insbesondere als Touch-Screen ausgebildeten Anzeigeeinheit (3) einer vorzugsweise als Panel- PC (8) ausgebildeten EDV-Einheit wiedergegeben wird sowie ein digitales Videosystem zur Beobachtung von Erntegut ver- und/oder bearbeitenden Arbeitsprozessen einer landwirtschaftlichen Maschine, sowie eine landwirtschaftliche Arbeitsmaschine mit einem digitalem Videosystem.

Description

Verfahren zur Beobachtung von Arbeitsprozessen einer landwirtschaftlichen Maschine, digitales Videosystem und landwirtschaftliche Maschine
Die vorliegende Erfindung betrifft ein Verfahren zur Beobachtung von Arbeitsprozes sen einer landwirtschaftlichen Maschine, ein digitales Videosystem zur Beobachtung von Arbeitsprozessen einer landwirtschaftlichen Maschine sowie eine landwirtschaft liche Arbeitsmaschine.
Zur Beobachtung von Erntegut ver- und/oder -bearbeitenden Arbeitsprozessen einer landwirtschaftlichen Maschine, insbesondere einer gezogenen oder selbstfahrenden Erntemaschine, vorzugsweise für die Kartoffel- oder Rübenrodung, dienen seit Jah ren analoge Videosysteme als Assistenzsystem für den Maschinenführer. Merkmal dieser Videosysteme ist, dass immer genau das Videobild auf dem Monitor ange zeigt wird, dass die diesem Monitor zugeordnete Kamera aufnimmt. Je nach Positio nierung der Kamera werden auch Teile der Maschine angezeigt, die für den Fahrer nicht relevant sind. Möchte der Nutzer einen Bildausschnitt größer angezeigt be kommen, muss hierfür umständlich die Kamera neu platziert werden. Weiterhin bie ten inzwischen verschiedene Hersteller Videosysteme an, bei denen maximal vier Kameras pro Monitor angeschlossen und dann auch gleichzeitig angezeigt werden können. Auch bei diesen Kameras ist eine genauere Betrachtung der jeweiligen Ma schinenbereiche mit einer Neupositionierung der jeweiligen Kamera verbunden. Darüber hinaus ist aus der EP 3 437 929 A1 ein Sichtsystem für ein Fahrzeug be kannt, bei dem auf dem Monitor einer Bedienperson eine fahrsituationsbedingte Sichtfeld-/Sichtbereichseinblendung eines relevanten, im Nahfeld um einen Schlep per herum befindlichen Bereiches erfolgt.
Vor diesem Hintergrund ist es Aufgabe der vorliegenden Erfindung, die Überwa chung der Arbeitsprozesse einer Erntemaschine zu verbessern.
Die Aufgabe wird gelöst durch die Gegenstände der Ansprüche 1 , 20 und 23. Vor teilhafte Ausgestaltungen der Erfindung sind den auf diese Ansprüche rückbezoge nen Unteransprüchen sowie der nachfolgenden Beschreibung zu entnehmen.
Bei einem erfindungsgemäßen Verfahren zur Beobachtung von Erntegut ver- und/oder -bearbeitenden Arbeitsprozessen einer landwirtschaftlichen Maschine, ins besondere einer Erntemaschine, die ein digitales Videosystem mit einer Mehrzahl von digitalen Bilderfassungseinheiten, mit wenigstens einer Anzeigeeinheit, sowie mit einem vorzugsweise als Switch ausgebildeten Netzwerkkopplungselement, über das die Bilderfassungseinheiten mit der Anzeigeeinheit verbunden sind, aufweist, nehmen die Bilderfassungseinheiten Bilddaten für Bilder insbesondere eines Video- streams auf. Zumindest eines der Bilder, insbesondere der Videostream, wird we nigstens teilweise in einem von insbesondere mehreren konfigurierbaren Shapes umfassend ein oder mehrere Bildwiedergabebereiche auf der insbesondere als Touch-Screen ausgebildeten Anzeigeeinheit einer vorzugsweise als Panel-PC aus gebildeten EDV-Einheit wiedergegeben. Die Übertragung der Bilddaten erfolgt von der jeweiligen Bilderfassungseinheit über den Switch, insbesondere über einen Ethernet-Switch, hin zur EDV-Einheit. Die jeweiligen Elemente des digitalen Video systems sind insbesondere über Netzwerkkabel (Ethernet-Kabel) verbunden. Die physikalische Verbindung der Bilderfassungseinheiten mit der zumindest einen An zeigeeinheit erfolgt somit mittelbar über die EDV-Einheit, mit der die Anzeigeeinheit verbunden ist, bzw. die die Anzeigeeinheit aufweist. Die Anzeigeeinheit umfasst so mit zumindest ein Display und die zu diesem gehörende Elektronik.
Die Bilderfassungseinheiten sind hierbei auf Erntegut ver- und/oder-bearbeitende Arbeitsprozesse der Maschine und damit insbesondere auf Maschinenelemente ausgerichtet, beispielsweise auf erntegutfördernde Transportbänder, Fallstufen oder dergleichen. Ebenfalls können einzelne Kameras zum Beispiel auf Trenngeräte zum Trennen von Erntegut und Beimengungen wie Steinen oder Erde oder auf Fallstufen gerichtet sein. Ebenfalls können digitale Bilderfassungseinheiten beispielsweise auf Erntegut-Sammelbereiche (Bunker), -übergabebereiche oder -aufnahmebereiche gerichtet sein. Die Bilderfassungseinheiten sind insbesondere digitale Videokame ras, die Einzelbilder beispielsweise im RAW-Format ausgeben oder auch einen kompletten, bereits komprimierten Videostream im MPEG- oder anderen Videofor mat in das System senden. Vorzugsweise handelt es sich um hochauflösende Ka meras mit einer Sensor-Auflösung von zumindest 1280 x 720 Punkten, vorzugswei se von wenigstens 1280 x 800 Punkten, insbesondere zumindest um einen 1 ,3 Me- gapixel-Sensor von beispielsweise zumindest 1280 x 1024 Punkten (Pixeln). Die Daten für die Bilder eines Videostreams können auch lediglich als Abweichun gen eines vorab übermittelten Bildes vorliegen. Sie werden wie beschrieben insbe sondere kabelgebunden zu dem vorzugsweise als Ethernet-Switch ausgebildeten Netzwerkkopplungselement weitergeleitet, welches die Daten der Bilderfassungs einheiten über ein oder mehrere Netzwerkkopplungselemente an eine die Daten verarbeitende EDV-Einheit, vorzugsweise einen Panel-PC weiterleiten. Dort werden die Daten gemäß einer Konfiguration für die Anzeigeeinheit bereitgestellt, wobei die Konfiguration durch den Bediener oder auch programmseitig standardisiert vorein gestellt sein kann. Die Bilddaten für die Bilder eines Videostreams werden in der EDV-Einheit dergestalt aufbereitet, dass sie auf der insbesondere als Touch-Screen ausgebildeten Anzeigeeinheit der insbesondere als Panel-PC ausgebildeten EDV- Einheit und zwar im jeweiligen Bildwiedergabebereich eines definierten Shapes wie dergegeben werden können. Als Shape wird die Anordnung einer oder mehrerer Bildwiedergabebereiche auf der zur Verfügung stehenden Bildschirmfläche der An zeigeeinheit bezeichnet.
Bei den Verbindungskabeln handelt es sich insbesondere um Ethernet-Leitungen, beispielsweise in Form von 100 BASE-TX- oder 1000 BASE-TX-Leitungen, über die ausreichende Datenmengen übertragen werden. Einzelne Komponenten des Video systems, insbesondere der Ethernet-Switch und die EDV-Einheit sind vorzugsweise mit einer Gigabit Ethernet Schnittstelle versehen, um die Menge der zu verarbeiten den Daten möglichst effizient zu übertragen. Die Wiedergabebereiche eines Shapes sind so konfigurierbar, dass sie identische Bilder, das heißt denselben Videostream wiedergeben. Insgesamt sind vorzugswei se bis zu acht Bildwiedergabebereiche in einem Shape darstellbar, das heißt es können bis zu acht Videostreams gleichzeitig wiedergegeben werden. Hierfür ist die EDV-Einheit insbesondere mit entsprechend leistungsfähigen Grafik- und/oder Mik roprozessoren ausgerüstet. Darüber hinaus weist die EDV-Einheit übliche Mittel zur Speicherung und Bearbeitung von Daten auf, insbesondere Arbeits- und Datenspei cher, Controller, Netzwerk- und ggf. Kommunikationsschnittstellen. Weitere mögliche Details der EDV-Einheit sind darüber hinaus im Nachfolgenden bei jeweiligen erfin dungsgemäßen Weiterbildungen beschrieben.
Die Konfiguration der Shapes und der Bildwiedergabebereiche ist abspeicherbar in der EDV-Einheit hinterlegbar und entsprechend aufrufbar ausgebildet, so dass für einen Maschinenführer, einen Servicetechniker oder anderes Bedienpersonal der vorzugsweise zumindest 12 Zoll große sichtbare Bereich der Anzeigeeinheit persön lich konfigurierbar ist.
In einer Weiterbildung der Erfindung können über eine Schnittstelle zur Maschinen steuerung, die ebenfalls an den Switch und darüber hinaus an die EDV-Einheit an gebunden werden kann, Informationen zum Maschinentyp übermittelt werden. Die führt dann zu einer Vorauswahl bzw. Bereitstellung entsprechender Shapes, die vor konfiguriert hinterlegt sein können. Ebenso kann für unbekannte, nicht in der EDV- Einheit hinterlegte Maschinentypen ein standardisiertes Shape zur Verfügung ge stellt werden. Ebenfalls ist es möglich, durch eine in der EDV-Einheit vorhandene Schnittstelle und mittels eines tragbaren Speichermediums einzelne Shape- Konfigurationen einzulesen bzw. auf dieses Speichermedium zu exportieren.
Aus der Vielzahl von möglichen Fensteranordnungen, insbesondere mit Hoch- und Querformatdarstellung auf der Anzeigeeinheit bzw. deren Display, hat das Bedien personal nun erfindungsgemäß die Möglichkeit, genau die Videobilder angezeigt zu bekommen, die es sehen möchte. So kann ein Maschinenführer insbesondere bei unterschiedlichen Bodenverhältnissen unterschiedliche Schwerpunkte in der Be obachtung der Arbeitsprozesse setzen. Beispielsweise können bei schweren, feuch ten Bodenverhältnissen verstopfungsanfällige Bereiche einer Erntemaschine gezielt überwacht werden, während bei feineren, trockenen und leichten Bodenverhältnis sen beispielsweise verstärkt auf die Trennung des Ernteguts in unterschiedliche Losgrößen gelegt werden kann.
Durch diese Schwerpunktsetzung ist das Bedienpersonal schneller in der Lage, kriti sche Maschinenzustände zu erkennen und dann über die insbesondere nicht mit dem digitalen Videosystem verbundene Maschinensteuerung zu beheben. Das digi tale Videosystem ist dadurch einfacher in bestehende Maschinen nachrüstbar.
Die von dem digitalen Videosystem betrachteten Prozesse sind insbesondere "in nerhalb" der Maschine stattfindende Prozesse, es handelt sich somit nicht um auf lediglich das äußere Umfeld der Maschine gerichtete Bilderfassungseinheiten, son dern auf Erntegut be- und verarbeitende Maschinenelemente gerichtete Bilderfas- sungseinheiten. Als Erntegutbearbeitung wird auch die Lagerung in einem Bunker der Maschine verstanden.
Vorzugsweise werden die Bilder einer der Bilderfassungseinheiten zumindest jeweils teilweise in mehreren Bildwiedergabebereichen eines Shapes gleichzeitig wiederge geben, wobei verschiedene Regions of Interest der Bilderfassungseinheit vorab de finiert und jeweils in einem eigenen Wiedergabebereich dieses Shapes wiedergege ben werden können. Bislang konnte ein Videostream immer nur in einem Wiederga bebereich des Bildschirms wiedergegeben werden. Durch den gleichzeitigen Ver sand von Datenpaketen an mehrere Teilnehmer (Multicast) in der EDV-Einheit wer den die Daten nun für zumindest zwei Wiedergabebereiche bereitgestellt. Dabei können die Videostreams in einer weiteren performanten Bildverarbeitungseinheit weiterberechnet werden.
Die Definition der wiederzugebenden Bereiche eines Videostreams kann erfin dungsgemäß über den Touchscreen während des Betriebs des Systems oder in ei ner Konfigurationsmaske anhand eines Still-Bildes erfolgen. Hierbei können bei spielsweise über eine Ein- oder Zwei-Finger-Geste Bildbereiche ähnlich wie dies von Mobiltelefonen bekannt ist, Bildbereiche als Region of Interest ausgewählt werden, die dann entsprechend insbesondere in einem eigenen Bildwiedergabebereich dar gestellt werden.
Falls ein entsprechender Ausschnitt in dem identischen Bildwiedergabebereich dar gestellt werden soll, ist das System technisch so ausgelegt, dass der ausgewählte Bildausschnitt (Region of Interest) vergrößert dargestellt wird. Die Bilder der Bilder fassungseinheit (bzw. deren Darstellung) innerhalb des jeweiligen Bildwiedergabe bereiches eines Shapes sind somit zoombar. Die Auswahl der Region of Interest geht dann einher mit einem Heranzoomen der jeweiligen Bildausschnitte, insbeson dere über eine Zwei-Finger-Eingabe. Die unterschiedlichen Videostreams können somit gezielt und gegebenenfalls abschnittsweise vergrößert dargestellt werden, so dass eine noch bessere Betrachtung besonders kritischer Arbeitsbereiche möglich ist. So kann beispielsweise bei einer insgesamt auf eine Trennstufe gerichteten Bil derfassung ein Eingangsbereich und ein Ausgangsbereich gezielt herangezoomt und im selben Shape jeweils vergrößert in dann insgesamt drei Bildwiedergabebe reichen (Gesamtansicht, Eingangsbereich, Ausgangsbereich) dargestellt werden.
Vorzugsweise können die innerhalb des jeweiligen Bildwiedergabebereiches ge wählten Bilder oder Bildausschnitte in einer Speichereinheit gespeichert werden. Diese kann lokal in der EDV-Einheit, beispielsweise in Form eines flüchtigen Perma- nent-Speichers, vorhanden sein, es kann sich auch um ein über eine entsprechende Schnittstelle der EDV-Einheit anschließbares, tragbares Speichermedium handeln.
Weiterhin ist das System vorzugsweise dergestalt konfiguriert, dass durch eine Touch-Screen-Eingabe auf den entsprechenden Bildwiedergabebereich ein Aus wahlmenü angezeigt wird, über das eine Speicherung des jeweils angezeigten (ins besondere auch gezoomten und somit teilweise dargestellten) Videostreams, ange stoßen werden kann. Alternativ oder ergänzend ist dieser Prozess ebenfalls über allgemeines Einstellungsmenü mit etwaigen Untermenüs anstoßbar. Weiterhin ist das System vorzugsweise dergestalt konfiguriert, dass zwei oder mehr Bildwiedergabebereiche, insbesondere alle Bildwiedergaberbereiche, und die in die sen dargestellten Videostreams gleichzeitig, vorzugweise ebenfalls in der auf dem Bildschirm sichtbaren Anordnung, insbesondere auf einem tragbaren Medium, ab gespeichert werden, um gleichzeitig an verschiedenen Stellen der Maschine vor handene Arbeitsprozesse auch nachträglich gleichzeitig betrachtet werden können, ohne dass hierfür auf das gleichzeitige Abspielen separater Videostreams nebenei nander geachtet werden muss. Die EDV-Einheit bietet somit die komfortable Erstel lung eines gemeinsamen Videostreams ausgehend von den auf der Anzeigeeinheit dargestellten Inhalten an. Als„tragbares Medium“ werden temporär über eine Hard ware-Schnittstelle mit der EDV-Einheit verbindbare Speichermedien verstanden, die für den Betrieb der EDV-Einheit nicht notwendig und insbesondere nur zum Daten transport verwendet werden. Beispielsweise handelt es sich hierbei um USB-Sticks. Es kann sich allerdings auch um einen Cloud-Speicher handeln, der vorzugsweise vom Maschinen-Hersteller zur Verfügung gestellt wird und über Schnittstellen der Maschine und/oder des Schleppers zur Verfügung steht.
Die Betrachtung und Überwachung der Arbeitsprozesse ist insbesondere dann ver bessert, wenn in zumindest einem Bildwiedergabebereich die in einem vorzugsweise flüchtigen oder semi-permanenten Pufferspeicher zwischengespeicherten Bilder des Videostreams einer Bilderfassungseinheit verlangsamt wiedergegeben werden, ins besondere wobei derselbe Videostream vollständig oder gezoomt in einem weiteren Bildwiedergabebereich des selben Shapes nicht oder anders verlangsamt wiederge- geben wird. Hierbei wird der ankommende Videostream insbesondere bis auf 25 % der Echtzeit verlangsamt, wobei nach einer insbesondere vorgebbaren Zeit, bei spielsweise nach 4 Sekunden, ein Sprung in der Wiedergabe zu dem dann aktuellen Bild erfolgt, und dann der nachfolgende Videostream entsprechend wiederum ver langsamt wiedergegeben wird. Dies ermöglicht eine sehr gute Überwachung insbe sondere schnell bewegter, insbesondere drehender Maschinenteile.
Das System ist insbesondere dergestalt ausgelegt, dass in zumindest zwei Bildwie dergabebereichen eines Shapes verlangsamte Videostreams wiedergegeben wer den.
Vorzugsweise werden die insbesondere als Videostream ausgebildeten Bilder eines oder mehrerer Bildwiedergabebereiche und/oder Bilderfassungseinheiten drahtlos mittels einer insbesondere über einen zusätzlichen Switch, bspw. einem Ethernet- Switch, verbundenen Kommunikationseinheit auf ein entferntes, insbesondere mobi les Endgerät bzw. Benutzer-Endgerät übertragen. Neben der Bildübertragung auf den Monitor bzw. die Anzeigeeinheit in der Traktor- oder Selbstfahrer-Kabine ist es so möglich, das Videobild auf ein mobiles Endgerät zu übertragen. Hierfür verbindet der Endgerätebenutzer sein mobiles Endgerät vorzugsweise mit einem WLAN, das über eine Kommunikationseinheit der Maschine zur Verfügung gestellt wird. Der Endgerätebenutzer kann sich dann in einem auf dem mobilen Endgerät startenden Programm einzelne, auf das Endgerät angepasste Shapes mit zumindest einem Vi deostream einer der mehreren Bilderfassungseinheiten anzeigen lassen. Alternativ kann er auf eine vorzugsweise auf der EDV-Einheit gehostete Webseite des digita- len Videosystems zugreifen, über die ein insbesondere konfigurierbares Shape für ein entferntes, insbesondere mobiles Benutzer-Endgerät zur Verfügung gestellt wird, wobei vorzugsweise ebenfalls die Bildwiedergabebereiche serverseitig vordefiniert und/oder konfigurierbar sind.
Somit ist es beispielsweise für die Fahrer von Abfuhrfahrzeugen einfach, sich einen Bildwiedergabeausschnitt in einem Shape anzeigen zu lassen, der den Videostream einer Bunkerbefüllung zeigt. Ebenfalls kann hierüber bei Kartoffelrodern eine Steige rung der Arbeitssicherheit und des Komforts für das Verlesepersonal, das während einer Ernte an einem Verlesetisch arbeitet erfolgen, indem das Verlesepersonal auf dem Roder das Videobild der Trenngeräte angezeigt bekommt, die vom Verlesetisch nicht einsehbar sind. Etwaige Einstellungen können dann von dem Bedienpersonal direkt vom Verlesetisch-Bedienterminal am vorgenommen werden, wobei auf dem mobilen Benutzer-Endgerät das Ergebnis der Verstellung direkt eingesehen werden kann. Der Fahrer ist damit von Überwachungs- sowie Regelungsaufgaben entlastet und kann sich dadurch auf das Fahren des Roders konzentrieren. Ebenfalls können beispielsweise Verwalter von landwirtschaftlichen Betrieben während der Ernte ohne die Maschine zu besteigen deren Funktionsweise überprüfen. Die Wiedergabe auf einem entfernten, insbesondere mobilen Benutzer-Endgerät erfolgt insbesondere ohne Störung der Wiedergabe auf der Anzeigeeinheit im Fahrerstand.
Vorteilhafter Weise werden die Bilder eines oder mehrerer Bildwiedergabebereiche eines Shapes, insbesondere aller Bildwiedergabebereiche dergestalt abgespeichert, das jeweils aufeinanderfolgende Clips einer vorzugsweise einstellbaren Länge ent- stehen bzw. abgespeichert werden. Durch die hiermit einhergehende Begrenzung der Größe der entstehenden Clips, die vorzugsweise automatisiert mit den Zeit stempeln im Namen versehen werden, ist die nachträgliche Bearbeitung und Ein- sehnahme in einzelne Clips, die zu bestimmten, beispielsweise kritischen Zeitpunk ten entstanden sind, vereinfacht möglich.
Es versteht sich, dass die vor- und nachbeschriebenen Verfahrensschritte mittels eines Computerprogrammes realisiert werden können, welches in einem Arbeits speicher der EDV-Einheit läuft. Es könnte sich ebenfalls auch um mehrere ineinan- dergreifende Programme handeln, die auf derselben EDV-Einheit bzw. in demselben Speicher oder unterschiedliche Speichern der EDV-Einheit, beispielsweise einer CPU und einer GPU, laufen.
Vorzugsweise werden in einem Konfigurationsschritt für einen Bildwiedergabebe reich eine von bis zu zumindest 24 Bilderfassungseinheiten, insbesondere Digital kameras, vorzugsweise bis zu maximal 48 Bilderfassungseinheiten ausgewählt, die über mehrere hintereinandergeschaltete Switche miteinander verbunden sind. Durch die Kaskadierung der Switche ist das System erweiterbar, insbesondere auch nach träglich einfach erweiterbar, wenn auf den jeweiligen Switchen entsprechende Ports für zumindest einen weiteren Switch freigehalten werden. Zur Vermeidung von Da tenengpässen auf der Übertragungsleitung, wird vorzugsweise die im Netzwerk des digitalen Videosystems benötigte Bandbreite reduziert, indem auch nur die im gera de aktiven Shape angezeigten Kameras streamen. Vorzugsweise wird in Abhängigkeit einer von ein Maschinensteuerung erkannten Abweichung vom Normalbetrieb, der Aktivierung von Maschinenfunktionen und/oder bei Veränderungen von Maschineneinstellungen über ein Bedienterminal ein ent sprechendes Bildschirmsignal die vorherigen Bildwiedergabebereiche überlagernd und/oder zumindest ein zugehöriges Maschinenelement in einem Bildwiedergabebe reich wiedergebend abgebildet. Hierfür kann automatisiert ein Shape gewechselt werden. Für dieses Verfahren ist wiederum eine Schnittstelle zur Maschinensteue rung notwendig, die ebenfalls über den Ethernet-Switch, einen weiteren Ethernet- Switch oder auch eine direkte Verbindung mit der EDV-Einheit bereitgestellt wird. Das jeweilige Bildschirmsignal kann insbesondere in einem nur für dieses konfigu rierten Shape wiedergegeben werden. Ein Bedienterminal findet sich typischerweise in der Fahrerkabine sowie beispielsweise an einem Verlesetisch eines Kartoffelro ders am Verlesetisch.
Vorzugsweise erfolgt bei einer Abweichung vom Normalbetrieb, der Aktivierung von Maschinenfunktionen und/oder bei Veränderungen von Maschineneinstellungen so mit eine automatisierte Umschaltung von einem oder mehreren Videostreams in ein dafür konfiguriertes Shape. In diesem werden dann ein oder mehrere Bildausschnit te vorzugsweise in Form von Regions of Interest eines oder mehrerer Videostreams angezeigt, so dass das Bedienpersonal zielgerichtet über die gegebenenfalls kriti sche Situation informiert wird und hierauf basierend Gegenmaßnahmen bzw. Über prüfungen einleiten kann. Vorzugsweise erfolgt gleichzeitig eine farbliche Hervorhe bung insbesondere bei Abweichung vom Normalbetrieb oder in kritischen Betriebs zuständen, beispielsweise bei einer zu hohen Auslastung einzelner Bereiche. Insbe- sondere bei schnell bewegten bzw. sich drehenden Maschinenteilen kann in einem solchen Shape auch eine verlangsamte Wiedergabe des relevanten Videostreams erfolgen. Ebenfalls ist es erfindungsgemäß von Vorteil, wenn eine solche Überlage rung oder Darstellung eines Shapes durch eine Bildschirmeingabe, insbesondere in Form einer Swipe-Bewegung, wieder ausgeblendet werden kann, um zur vorherigen Ansicht bzw. zum vorherigen Shape zurückzugelangen.
Die Videostreams müssen mit einer möglichst geringen Latenzzeit (Verzögerungs zeit) von der Kameralinse bis zur Anzeigeeinheit dargestellt werden. Erstrebenswert sind Verzögerungszeiten < 100ms. Vorzugsweise ist dafür einzelnen Bildern eine Zeit zugeordnet. Es können hierfür zumindest mehrere der Bilder an einer Kompo nente mit einem Zeitstempel versehen werden und die Zeit an einer weiteren Kom ponente des (digitalen Video-) Systems genommen werden und/oder die Zeit beim Empfang eines wiedererkennbaren Bildes wird an verschiedenen Komponenten des Systems aufgenommen, um bei einer zu großen Zeitverzögerung den zugehörigen Bildwiedergabebereich zu kennzeichnen, beispielsweise schwarz werden zu lassen und/oder mit einem roten Ausrufezeichen zu versehen.
Vorzugsweise ist auf der Anzeigeeinheit, die auch gleichzeitig die Bedieneinheit dar stellt, eine animierte Graphik eingeblendet (beispielsweise drehendes Zahnrad), um zu erkennen, dass das System ordnungsgemäß arbeitet und sich nicht im Stillstand (eingefroren) befindet. Ebenfalls wird in vorteilhafter Weise für die Konfiguration eines der Bildwiedergabe bereiches zunächst ein Pop-Up-Dialog geöffnet, der den aktiven Bildwiedergabebe reich in verkleinerter Form darstellt, vorzugsweise bevor Einstellungen vorgenom men werden können. Dies dient der Rückversicherung und Überprüfung der ge wünschten und durchzuführenden Änderungen, damit nicht versehentlich ein ande rer Bildwiedergabebereich konfiguriert wird. Die oftmals bei der Feldarbeit auftreten den Vibrationen führen somit nicht bzw. weniger zu unerwünschten Eingaben auf einer als Touchscreen ausgebildeten Anzeigeeinheit.
Gemäß einer weiteren vorteilhaften Ausgestaltung der Erfindung weisen die Shapes zumindest einen und vorzugsweise bis zu acht insbesondere rechteckige Bildwie dergabebereiche auf, wobei vorzugsweise eine Anordnung der Bildwiedergabebe reiche in Abhängigkeit von der Größe und Form der gewählten Regions of Interest und/oder der Position der Bilderfassungseinheiten im Gutfluss des Erntegutes mit tels eines auf der EDV-Einheit verfügbaren Algorithmus vorgeschlagen wird. Hierbei handelt es sich um ein einfaches Optimierungsproblem zur optimalen Ausnutzung und Anordnung der zur Verfügung stehenden Fläche, falls das Bedienpersonal die ses dem System überlassen möchte.
Bei einer Mehrzahl von Shapes gereicht es einem weiteren Ausführungsbeispiel der Erfindung zum Vorteil, wenn die Shapes in insbesondere vordefinierbaren Zeitinter vallen automatisch umgeschaltet werden, um sequentiell Einblick in verschiedene
Maschinenbereiche zu erhalten. Vorteilhafterweise werden weiterhin vorgegebene Shapes in Abhängigkeit von einer die Maschinensteuerung für die Betriebszustände Straßenfahrt, Feldarbeit und Rückwärtsfahrt übermittelten Signale verwendet. So kann beispielsweise bei einer Straßenfahrt ein Shape dargestellt werden, der die Ansicht etwaiger einzuklappen der oder auszuhebender Maschinenteile zeigt, während für die Feldarbeit entspre chend die gewünschten Arbeitsprozesse, die den Gutfluss variieren, betrachtet wer den. Ähnliches gilt für die Shape-Ansichten bei einer Rückwärtsfahrt.
Vorteilhafterweise werden die Bilder zumindest einer Bilderfassungseinheit auch als Web-Videostream über eine Remoteverbindung angezeigt, insbesondere wobei die Auflösung der Shape-Ansicht oder die Wiederholfrequenz auf die Verbindungsband breite, die beispielsweise von einem mobilen Endgerät gemeldet wird, angepasst wird. Dieses System kann auf der EDV-Einheit auch völlig unabhängig von der An zeige auf der Anzeigeeinheit realisiert werden, um eine Störung des Bedienperso nals zu vermeiden.
Insbesondere ist das System nicht zur Maschinensteuerung ausgebildet, das heißt es greift nicht in die Steuerung der Maschine ein, sondern dient lediglich der Über wachung der Prozesse.
Die eingangs gestellte Aufgabe wird auch durch ein digitales Videosystem zur Be obachtung von Erntegut ver- und/oder bearbeitenden Arbeitsprozessen einer land wirtschaftlichen Maschine, insbesondere einer Erntemaschine gelöst, welches eine Mehrzahl von digitalen Bilderfassungseinheiten sowie wenigstens eine als Touch- screen ausgebildete Anzeigeeinheit einer insbesondere als Panel-PC ausgebildeten EDV-Einheit aufweist, sowie welches mit einem vorzugsweise als Switch, insbeson dere einem Ethernet-Switch, ausgebildeten Netzwerkkopplungselement versehen ist, über das die Bilderfassungseinheiten mit der Anzeigeeinheit verbunden sind. Hierbei ist das System zur Durchführung eines Verfahrens nach einem der vorheri gen Ansprüche, wie vorbeschrieben mittels eines oder mehrerer Computerpro gramme, ausgebildet.
Zur Skalierbarkeit des Systems ist dieses vorzugsweise mit einer Mehrzahl von Netzwerkkopplungselementen in Form von (Ethernet-) Switchen versehen, wobei wenigstens eine Bilderfassungseinheit über die in Reihe vernetzten Switche mit der EDV-Einheit verbunden ist.
Vorzugsweise wird beim Austausch einer Kamera diese, insbesondere wenn es sich um einen Orginalteile-Tausch handelt, automatisch vom System erkannt, konfiguriert und wieder in Betrieb genommen werden.
Die Übertragung der gewünschten Signale einer Maschinensteuerung ist insbeson dere dann verbessert dann realisierbar, wenn der unmittelbar mit der EDV-Einheit verbundene Switch mit einer Schnittstelle für einen CAN-BUS und/oder einer Kom munikationseinheit der Maschine verbunden ist. Alternativ kann ein CAN-BUS oder eine Kommunikationseinheit auch an die EDV-Einheit direkt angebunden werden, wenn diese mit entsprechenden Schnittstellen versehen ist. Ebenfalls wird die eingangs gestellte Aufgabe durch eine landwirtschaftliche Ar beitsmaschine, insbesondere eine Erntemaschine gelöst, die ein vor- oder nachbe schriebenes Videosystem aufweist.
Weitere Vorteile und Einzelheiten der Erfindung sind der nachfolgenden Figurenbe schreibung zu entnehmen. Schematisch dargestellt zeigt:
Fig. 1 : einen erfindungsgemäßen Gegenstand in Form einer gezogenen Ern temaschine,
Fig. 2: Komponenten des erfindungsgemäßen Gegenstandes nach Fig. 1 ,
Fig. 3: einen weiteren erfindungsgemäßen Gegenstand,
Fig. 4: neun Varianten von Shapes,
Fig. 5: Programmebenen eines das erfindungsgemäße Verfahren ermög lichenden Computerprogrammes,
Fig. 6: ein weiteres Shape,
Fig. 7: eine zugehörige Konfigurationsansicht für das Shape nach Fig. 6. Einzelne technische Merkmale der nachbeschriebenen Ausführungsbeispiele kön nen auch in Kombination mit vorbeschriebenen Ausführungsbeispielen sowie den Merkmalen der unabhängigen Ansprüche und etwaiger weiterer Ansprüche zu erfin dungsgemäßen Gegenständen kombiniert werden. Sofern sinnvoll werden funktional gleichwirkende Elemente mit identischen Bezugsziffern versehen.
Eine erfindungsgemäße Vorrichtung ist gemäß Fig. 1 als von einem Schlepper 1 gezogene und als Kartoffelroder ausgebildete Erntemaschine 2 ausgebildet. Eine zur erfindungsgemäßen Erntemaschine 2 gehörende EDV-Einheit ist mit einer als Touchscreen ausgebildeten Anzeigeeinheit 3 in einer Fahrerkabine 5 des Schlep pers 1 angeordnet. Diese ist über nicht dargestellte Ethernet-Kabel mit einem Switch auf der Erntemaschinenseite verbunden. Auf der Anzeigeeinheit 3 werden die von digitalen Bilderfassungseinheiten 4, die vorliegend schematisch einzelnen Bearbei tungsstufen für das Erntegut zugeordnet sind, aufgenommen Bilddaten wiedergege ben.
Bei den Bilderfassungseinheiten 4 handelt es sich um Digitalkameras, die allgemein bei erfindungsgemäßen Systemen die Daten über Ethernet-Kabel 6 an einen
Switch 7, der als Ethernet-Switch ausgebildet ist, übertragen. Von dort werden die Daten dann an eine als Panel-PC 8 ausgebildete EDV-Einheit ebenfalls bevorzugt wieder per Ethernet-Kabel 6 übertragen. Optional ist ein weiterer Panel-PC 8 an schließbar, auf dessen Anzeigeeinheit ebenfalls eine Reihe von konfigurierbaren Shapes angezeigt werden können. In einem zugehörigen Konfigurationsprogramm eines Flaupt-Panel-PCs (Master) kann dann ausgewählt werden, welche der Karne- ras auf diesem und welche auf dem untergeordneten, optionalen Panel-PC (Slave, angeschlossen über eine Datenleitung in Form eines gestrichelten Ethernet-Kabel 6) angezeigt werden.
Ebenfalls ist eine Schnittstelle zur Maschinensteuerung in Form eines CAN to Ether net-Gateways 9 vorhanden. Hierüber ist der Zugriff auf WLAN sowie auf eine über eine CAN-BUS-Leitung 1 1 angeschlossene Maschinensteuerungseinheit 12 gege ben. Parallel kann beispielsweise noch über eine ISO-BUS-Leitung 13 (gestrichelt dargestellt) auf ein entsprechendes Bus-System zugegriffen werden. In diesem Fall umfasst das Gateway 9 zusätzlich eine entsprechende ISOBUS-Schnittstelle.
Während gemäß dem Ausführungsbeispiel der Fig. 2 die digitalen Bilderfassungs einheiten 4 an lediglich einem Ethernet-Switch 7 angebunden sind, der vorzugswei se bei einer gezogenen Erntemaschine 2 erntemaschinenseitig angeordnet ist, weist die Ausführungsvariante gemäß Fig. 3 insgesamt vier Switche 7 auf, von denen der in der Figur obere dem Schlepper 1 zugeordnet ist, während die direkt mit den digi talen Bilderfassungseinheiten 4 verbundenen Switche 7 auf Seiten der Erntemaschi ne 2 angeordnet sind. Eine gestrichelte Linie 14 indiziert die Trennung der beiden in der Figur als Box dargestellten Schlepper 1 und Erntemaschine 2.
Die in der Fig. 4 an dem rechten, erntemaschinenseitigen Switch 7 angeordneten optischen Bilderfassungseinheiten 4 sind somit über dann insgesamt vier Switche 7 mit einem in der Figur linken Master-Panel-PC 8 sowie einem in der Figur rechts da neben befindlichen weiteren Panel-PC (Slave) 8 verbunden. Zusätzlich ist bei die- sem Ausführungsbeispiel eine ISO-BUS-Schnittstelle 15 vorhanden. Über diese werden Maschinensignale bzw. Steuersignale empfangen, die je nach Art des Sig nals zum automatisierten Aufruf eines die Aufmerksamkeit des Maschinenführers erregenden Shapes führen, über den auf der Anzeigeeinheit ein Videostream einer den Steuersignalen zugeordneten optischen Bilderfassungseinheit 4 angezeigt wird. Gleiches gilt für ein CAN to Ethernet-Gateway 10. Dieses ist in den Einstellungen des auf der EDV-Einheit laufenden Programms hinterlegt.
Ein über das Gateway 10 anbindbarer Router stellt eine WLAN-Verbindung 16 zu einem entfernten und mobilen Benutzer-Endgerät 17 bereit, auf welchem ebenfalls Shapes konfigurierbar bzw. über einen auf dem Master-Panel-PC laufenden Webs erver abrufbar sind. Zusätzlich können an den schlepperseitigen Ethernet-Switch 7 eine Diagnoseschnittstelle 18 sowie ein oder mehrere weitere, Steuersignale über mittelnde Geräte 20 angeschlossen sein.
In einem Konfigurationsprogrammabschnitt, d.h. den Einstellungen eines auf dem Master-Panel-PC 8 ablaufenden Softwareprogramms können beispielsweise die in Fig. 4 abgebildeten neun Shapes konfiguriert werden. So sind zwischen einem und acht Bildwiedergabebereiche 19 mit Videostreams der optischen Bildbearbeitungs einheiten 4 ausstattbar.
Im Ausführungsbeispiel der Fig. 5 sind für das dargestellte Ausführungsbeispiel Ebenen eines zugehörigen Computerprogramms dargestellt. Links oben befindet sich eine Arbeitsansicht 21 für die jeweiligen Shapes, von der aus einzelne Bildwie- dergabebereiche 19 gemäß Box 22 bearbeitet werden können. Darüber hinaus ist der Arbeitsansicht 21 eine Eingabemöglichkeit auf dem Touch-Screen zugeordnet, über die das Bedienpersonal zu einer Einstellungsebene 23 gelangt, von der aus eine Shapeverwaltung 24, eine Kameraverwaltung 25, eine Sequenzverwaltung 26 sowie eine Webserververwaltung 27 und Nutzereinstellungen 28 erreichbar sind.
In der Shapeverwaltung 24 werden die Shapes konfiguriert. Bei der Kameraverwal tung 25 können soweit vorhanden Einstellungen der Bilderfassungseinheiten 4 vor genommen werden, beispielsweise die Farbgestaltung, Komprimierung oder Auflö sung. Die Sequenzverwaltung 26 ermöglicht das Abspeichern einzelner Bildwieder gabeabschnitte 19 bzw. die Verwaltung der einzelnen Videostreams. In der Webser ververwaltung 27 wird entsprechend eine Webseitendarstellung für einzelne Shapes konfiguriert, insbesondere ist hierüber eine Zugangsverwaltung konfigurierbar, mit der sich Dritte von einem vorzugsweise mobilen, zumindest jedoch von der Ernte maschine entfernten Benutzer-Endgerät nur passwortgestützt auf dem Webserver der EDV-Einheit anmelden können. Schließlich ist in der Nutzerverwaltung 28 das Nutzerprofil abspeicher- bzw. aufrufbar. Ebenfalls ist einstellbar, ob das System im mer mit dem zuletzt verwendeten Nutzerprofil oder mit einer Standardkonfiguration startet.
Gemäß dem Ausführungsbeispiel nach Fig. 6 ist ein Shape zur Wiedergabe von fünf Videostreams aufgrund der fünf Bildwiedergabebereiche 19 ausgebildet. Mittels ei nes entsprechend belegten Icons 29 kann die zugehörige Konfigurationsoberfläche des Shapes direkt aufgerufen werden. Hierbei sind gemäß Fig. 7 zunächst wiederum eigene Bildwiedergabebereiche 19 ausgebildet, die zwar verkleinert sind, aber an sonsten denjenigen der Fig. 6 entsprechen. Beispielsweise zeigt der oberste Bild wiedergabebereich 19 verkleinert den Videostream des in der Fig. 6 oberen linken Bildwiedergabebereiches, der in der Fig. 7 unter dem Bildwiedergabebereich in der zweiten Zeile befindlichen Bildwiedergabebereich 19 den gemäß Fig. 6 von links zweiten Videostream in der Reihe oben, etc.. Die Belegung der Bildwiedergabebe reiche 4 mit den zur Verfügung stehenden optischen Bilderfassungseinheiten 4 er folgt über das per Finger bedienbare Feld 31 . Ein Antippen dieses Feldes bzw. der weiteren Felder 31 zeigt eine Drop-Down-Liste, über die dann die im System be kannten Kameras ausgewählt werden können. Die in der Fig. 7 links unten befindli chen Bereiche des Touchscreens sind eine Taste zum Zurückspringen in den vorhe rigen Dialog (Taste 32), eine Hilfetaste 33 sowie eine Infotaste 34.

Claims

Patentansprüche
1. Verfahren zur Beobachtung von Erntegut ver- und/oder bearbeitenden Ar beitsprozessen einer landwirtschaftlichen Maschine, insbesondere einer Erntema schine (2), die ein digitales Videosystem mit einer Mehrzahl von digitalen Bilderfas sungseinheiten (4), mit wenigstens einer Anzeigeeinheit (3), sowie mit wenigstens einem vorzugsweise als Switch (7) ausgebildeten Netzwerkkopplungselement, über das die Bilderfassungseinheiten (4) mit der Anzeigeeinheit (3) verbunden sind, auf weist, wobei die Bilderfassungseinheiten (4) Bilddaten für Bilder insbesondere eines Videostreams, aufnehmen und zumindest eines der Bilder, insbesondere der Video- stream, wenigstens teilweise in einem von insbesondere mehreren konfigurierbaren Shapes umfassend ein oder mehrere Bildwiedergabebereiche (19) der insbesondere als Touch-Screen ausgebildeten Anzeigeeinheit (3) einer vorzugsweise als Panel PC (8) ausgebildeten EDV-Einheit wiedergegeben wird.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die Bilder einer der Bilderfassungseinheiten (4) zumindest jeweils teilweise in mehreren Bildwieder gabebereichen (19) eines Shapes gleichzeitig wiedergegeben werden, insbesondere wobei verschiedene Regions of Interest der Bilderfassungseinheit (4) vorab definiert und jeweils in einem eigenen Bildwiedergabebereich (19) wiedergegeben werden.
3. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die Bilder der Bil derfassungseinheit (4) innerhalb des jeweiligen Bildwiedergabebereiches (19) eines Shapes zoombar sind, insbesondere über eine Zwei-Fingereingabe.
4. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die innerhalb des jeweiligen Bildwiedergabebereiches (19) gewählten Bilder oder Bildausschnitte in einer Speichereinheit gespeichert werden.
5. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass in zumindest einem Bildwiedergabebereich (19) die in einem vorzugsweise flüchtigen oder semi-permanenten Pufferspeicher zwischengespeicherten Bilder des Videostreams einer Bilderfassungseinheit verlangsamt wiedergegeben werden, ins besondere wobei derselbe Videostream in einem weiteren Bildwiedergabebereich (19) desselben Shapes nicht oder anders verlangsamt wiedergegeben wird.
6. Verfahren nach Anspruch 5, dadurch gekennzeichnet, dass in zumindest zwei Bildwiedergabebereichen (19) verlangsamte Videostreams wiedergegeben werden.
7. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die insbesondere als Videostream ausgebildeten Bilder eines oder mehrerer Bildwiedergabebereiche (19) und/oder Bilderfassungseinheiten (4) drahtlos mittels einer insbesondere über einen zusätzlichen Switch (7) verbundenen Kommunikati onseinheit auf ein mobiles Endgerät (17) übertragen werden.
8. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Bilder eines oder mehrerer Bildwiedergabebereiche (19) eines Shapes, ins besondere alle Bildwiedergabebereiche (19) auf einem insbesondere tragbaren Me dium abgespeichert werden, welches über eine Hardware-Schnittstelle mit dem Sys tem verbunden ist, wobei jeweils aufeinander folgende Clips einer vorzugsweise ein stellbaren Länge entstehen.
9. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass in einem Konfigurationsschritt für einen Bildwiedergabebereich (19) eine von bis zu zumindest 24 Bilderfassungseinheiten (4) ausgewählt wird, die über mehrere hintereinander geschalte Switche (7) miteinander verbunden sind.
10. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass in Abhängigkeit einer von einer Maschinensteuerung erkannten Abweichung vom Normalbetrieb, der Aktivierung von Maschinenfunktionen und/oder bei Verände rungen von Maschineneinstellungen über ein Bedienterminal ein entsprechendes Bildschirmsignal die vorherigen Bildwiedergabebereiche überlagernd und/oder zu mindest ein zugehöriges Maschinenelement in einem Bildwiedergabebereich (19) abgebildet wird.
1 1 . Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet dass bei einer Abweichung vom Normalbetrieb, der Aktivierung von Maschinenfunk tionen und/oder bei Veränderungen von Maschineneinstellungen eine automatisierte Umschaltung von einem oder mehreren Videostreams in ein dafür konfiguriertes Shape erfolgt.
12. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass zumindest mehrere der Bilder mit einem Zeitstempel versehen werden oder die Zeit beim Empfang eines jeweiligen Bildes an verschiedenen Komponenten des Systems aufgenommen wird, um bei einer zu großen Zeitverzögerung den zugehöri gen Bildwiedergabebereich (19) zu kennzeichnen.
13. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass für die Konfiguration eines der Bildwiedergabebereiches (19) zunächst ein Po- pup-Dialog geöffnet wird, der den aktiven Bildwiedergabebereich (19) in verkleinerter Form darstellt.
14. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Shapes zumindest ein und vorzugsweise bis zu 8 insbesondere rechteckige Bildwiedergabebereiche (19) aufweisen, vorzugsweise wobei eine Anordnung der Bildwiedergabebereiche in Abhängigkeit von gewählten Regions of Interest und/oder der Position der Bilderfassungseinheiten (4) im Gutfluss mittels eines auf der EDV- Einheit verfügbaren Algorithmus vorgeschlagen wird.
15. Verfahren nach einem der vorherigen Ansprüche mit mehreren Shapes, dadurch gekennzeichnet, dass die Shapes in insbesondere vordefinierbaren Zeitin tervallen automatisch umgeschaltet werden.
16. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass vorgegebene Shapes in Abhängigkeit der von einer Maschinensteuerung für die Betriebszustände Straßenfahrt, Feldarbeit und Rückwärtsfahrt übermittelten Sig nale verwendet werden.
17. Verfahren insbesondere nach einem der vorherigen Ansprüche, dadurch ge kennzeichnet, dass über eine vorzugsweise auf der EDV-Einheit gehostete Web seite des digitalen Videosystems ein insbesondere konfigurierbares Shape für ein entferntes Benutzer-Endgerät (17) zur Verfügung gestellt wird, wobei vorzugsweise die Bildwiedergabebereiche (19) konfigurierbar sind.
18. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass die Bilder zumindest einer Bilderfassungseinheit (4) als Web-Videostream über eine Remote-Verbindung angezeigt werden.
19. Verfahren nach einem der vorherigen Ansprüche, dadurch gekennzeichnet, dass das System nicht zur Maschinensteuerung ausgebildet ist.
20. Digitales Videosystem zur Beobachtung von Erntegut ver- und/oder bearbei tenden Arbeitsprozessen einer landwirtschaftlichen Maschine, insbesondere einer Erntemaschine (2), mit einer Mehrzahl von digitalen Bilderfassungseinheiten (4), we nigstens einer insbesondere als Touch-Screen ausgebildeten Anzeigeeinheit (3) ei ner insbesondere als Panel-PC (8) ausgebildeten EDV-Einheit, sowie mit einem vor- zugsweise als Switch (7) ausgebildetem Netzwerkkopplungselement, über das die Bilderfassungseinheiten (4) mit der Anzeigeeinheit (3) verbunden sind, wobei das System zur Durchführung eines Verfahrens nach einem der vorherigen Ansprüche ausgebildet ist.
21. Digitales Videosystem nach Anspruch 20, gekennzeichnet über eine Mehrzahl von Switchen (7), wobei wenigstens eine Bilderfassungseinheit (4) über die in Reihe vernetzten Switche (7) mit der EDV-Einheit verbunden ist.
22. Digitales Videosystem nach Anspruch 20 oder 21 , dadurch gekennzeichnet, dass der unmittelbar mit der EDV-Einheit verbundene Switch (7) mit einer Schnitt stelle für einen CAN-Bus und/oder einer Kommunikationseinheit verbunden ist.
23. Landwirtschaftliche Arbeitsmaschine, insbesondere Erntemaschine (2), ge kennzeichnet durch ein digitales Videosystem nach einem der vorherigen Ansprüche
20 bis 22.
PCT/EP2020/067760 2019-06-24 2020-06-24 Verfahren zur beobachtung von arbeitsprozessen einer landwirtschaftlichen maschine, digitales videosystem und landwirtschaftliche maschine WO2020260427A1 (de)

Priority Applications (8)

Application Number Priority Date Filing Date Title
US17/622,016 US11963477B2 (en) 2019-06-24 2020-06-24 Method for observing working processes of an agricultural machine, digital video system and agricultural machine
EP20742171.0A EP3986112A1 (de) 2019-06-24 2020-06-24 Verfahren zur beobachtung von arbeitsprozessen einer landwirtschaftlichen maschine, digitales videosystem und landwirtschaftliche maschine
JP2021576700A JP2022538241A (ja) 2019-06-24 2020-06-24 農業機械の作業プロセスを観察するための方法、デジタルビデオシステム、および農業機械
CN202080046757.8A CN114096146A (zh) 2019-06-24 2020-06-24 用于观察农业机器工作过程的方法、数字视频系统及农业机器
AU2020303258A AU2020303258A1 (en) 2019-06-24 2020-06-24 Method for monitoring working processes of an agricultural machine, digital video system, and agricultural machine
CA3145156A CA3145156A1 (en) 2019-06-24 2020-06-24 Method for observing working processes of an agricultural machine, digital video system and agricultural machine
IL289361A IL289361A (en) 2019-06-24 2021-12-23 A method for monitoring work processes of an agricultural machine, a digital video system and an agricultural machine
JP2024014851A JP2024050768A (ja) 2019-06-24 2024-02-02 農業機械の作業プロセスを観察するための方法、デジタルビデオシステム、および農業機械

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102019116961.5 2019-06-24
DE102019116961.5A DE102019116961A1 (de) 2019-06-24 2019-06-24 Verfahren zur Beobachtung von Arbeitsprozessen einer landwirtschaftlichen Maschine, digitales Videosystem und landwirtschaftliche Maschine

Publications (1)

Publication Number Publication Date
WO2020260427A1 true WO2020260427A1 (de) 2020-12-30

Family

ID=71661808

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2020/067760 WO2020260427A1 (de) 2019-06-24 2020-06-24 Verfahren zur beobachtung von arbeitsprozessen einer landwirtschaftlichen maschine, digitales videosystem und landwirtschaftliche maschine

Country Status (9)

Country Link
US (1) US11963477B2 (de)
EP (1) EP3986112A1 (de)
JP (2) JP2022538241A (de)
CN (1) CN114096146A (de)
AU (1) AU2020303258A1 (de)
CA (1) CA3145156A1 (de)
DE (1) DE102019116961A1 (de)
IL (1) IL289361A (de)
WO (1) WO2020260427A1 (de)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014117243A (ja) * 2012-12-18 2014-06-30 Yanmar Co Ltd コンバイン
US20140240506A1 (en) * 2013-02-22 2014-08-28 Caterpillar Inc. Display System Layout for Remote Monitoring of Machines
DE102015115883A1 (de) * 2015-09-21 2017-03-23 Claas E-Systems Kgaa Mbh & Co Kg Landwirtschaftliche Arbeitsmaschine
JP2019004841A (ja) * 2017-06-28 2019-01-17 三菱マヒンドラ農機株式会社 コンバイン
EP3437929A1 (de) 2017-07-31 2019-02-06 MEKRA Lang GmbH & Co. KG Sichtsystem mit fahrsituationsbedingter sichtfeld-/sichtbereicheinblendung
EP3494773A1 (de) * 2017-12-05 2019-06-12 Deere & Company Mähdreschersteuerungsinformationen für einen entfernten benutzer mit visuellem feed

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3162898B2 (ja) * 1992-12-28 2001-05-08 三洋電機株式会社 多分割画面表示装置
JP2005175701A (ja) * 2003-12-09 2005-06-30 Hitachi Building Systems Co Ltd 遠隔映像監視システム
JP4514778B2 (ja) * 2004-01-22 2010-07-28 株式会社日立国際電気 映像配信装置
JP4349412B2 (ja) * 2006-12-12 2009-10-21 ソニー株式会社 監視装置及び監視方法
US7677169B2 (en) * 2007-09-06 2010-03-16 Cnh America Llc Apparatus and method using imaging in building a cotton module
JP4991506B2 (ja) * 2007-12-07 2012-08-01 キヤノン株式会社 画像編集装置及び画像編集方法
DE202008009834U1 (de) * 2008-07-22 2009-12-10 Liebherr-Elektronik Gmbh Kamera zum Einsatz in einem digitalen Netzwerk
US20110119716A1 (en) * 2009-03-12 2011-05-19 Mist Technology Holdings, Inc. System and Method for Video Distribution Management with Mobile Services
JP2010278757A (ja) * 2009-05-28 2010-12-09 Canon Inc 放送受信装置、放送受信装置の制御方法、及びそのコンピュータプログラム
JP5465488B2 (ja) * 2009-08-20 2014-04-09 ヤンマー株式会社 コンバイン
US9345194B2 (en) 2009-09-30 2016-05-24 Cnh Industrial America Llc Automatic display of remote camera image
JP5155279B2 (ja) 2009-10-29 2013-03-06 株式会社日立製作所 複数監視カメラによる集中監視システムおよび集中監視方法
US8451139B2 (en) * 2010-02-22 2013-05-28 Cnh America Llc System and method for coordinating harvester and transport vehicle unloading operations
JP5521690B2 (ja) * 2010-03-26 2014-06-18 日本電気株式会社 画面データ配信システム、サーバ、画面データ配信方法、及びプログラム
JP5829824B2 (ja) * 2011-03-29 2015-12-09 セコム株式会社 監視装置およびプログラム
JP5920702B2 (ja) 2012-02-07 2016-05-18 株式会社熊平製作所 デジタル録画装置
DE102012107550A1 (de) 2012-08-17 2014-05-15 Claas Selbstfahrende Erntemaschinen Gmbh Anzeigenvorrichtung für Landmaschinen
WO2014050180A1 (ja) 2012-09-26 2014-04-03 株式会社日立国際電気 映像表示システム、操作端末、操作方法およびプログラム
EP2798939B1 (de) * 2013-04-29 2018-06-20 CLAAS E-Systems KGaA mbH & Co KG Betriebssystem und Verfahren zum Betreiben einer steuerbaren Übertragungsvorrichtung für Erntegut
US9527211B2 (en) * 2013-05-10 2016-12-27 Cnh Industrial America Llc Control architecture for multi-robot system
JP2015100075A (ja) * 2013-11-20 2015-05-28 株式会社東芝 画像処理装置、システムおよび方法
JP6364838B2 (ja) * 2014-03-14 2018-08-01 日本電気株式会社 映像処理装置および映像処理方法
JP6134301B2 (ja) * 2014-09-29 2017-05-24 日立建機株式会社 建設機械の遠隔操縦用映像伝送システム
RU2568695C1 (ru) 2014-11-12 2015-11-20 Общество с ограниченной ответственностью "Научно-производственное предприятие "Резонанс" Индикаторное устройство рабочей машины
US10172285B2 (en) * 2015-10-23 2019-01-08 Carnegie Mellon University System for evaluating agricultural material
PL3251484T3 (pl) * 2016-06-03 2019-03-29 Kverneland Group Kerteminde A/S Sposób oraz urządzenie do obsługi maszyny rolniczej
DE102016118244A1 (de) * 2016-09-27 2018-03-29 Claas Selbstfahrende Erntemaschinen Gmbh Gutflussüberwachung einer Erntegutaufnahmevorrichtung
CN106888370A (zh) * 2017-03-31 2017-06-23 江苏大学 一种基于嵌入式与物联网技术的联合收割机视频监控系统
JP7039938B2 (ja) * 2017-06-27 2022-03-23 ソニーグループ株式会社 情報処理装置および方法、並びに、情報処理システム
JP7077557B2 (ja) * 2017-09-26 2022-05-31 ソニーグループ株式会社 表示制御装置および表示制御方法
CN113038823B (zh) * 2018-10-31 2023-05-30 克莱米特有限责任公司 自动化样本采集和跟踪系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014117243A (ja) * 2012-12-18 2014-06-30 Yanmar Co Ltd コンバイン
US20140240506A1 (en) * 2013-02-22 2014-08-28 Caterpillar Inc. Display System Layout for Remote Monitoring of Machines
DE102015115883A1 (de) * 2015-09-21 2017-03-23 Claas E-Systems Kgaa Mbh & Co Kg Landwirtschaftliche Arbeitsmaschine
JP2019004841A (ja) * 2017-06-28 2019-01-17 三菱マヒンドラ農機株式会社 コンバイン
EP3437929A1 (de) 2017-07-31 2019-02-06 MEKRA Lang GmbH & Co. KG Sichtsystem mit fahrsituationsbedingter sichtfeld-/sichtbereicheinblendung
EP3494773A1 (de) * 2017-12-05 2019-06-12 Deere & Company Mähdreschersteuerungsinformationen für einen entfernten benutzer mit visuellem feed

Also Published As

Publication number Publication date
DE102019116961A1 (de) 2020-12-24
CN114096146A (zh) 2022-02-25
AU2020303258A1 (en) 2022-01-27
CA3145156A1 (en) 2020-12-30
IL289361A (en) 2022-02-01
US20220337785A1 (en) 2022-10-20
US11963477B2 (en) 2024-04-23
EP3986112A1 (de) 2022-04-27
JP2022538241A (ja) 2022-09-01
JP2024050768A (ja) 2024-04-10

Similar Documents

Publication Publication Date Title
DE102017130566B4 (de) Sichtsystem zur Erfassung einer Fahrzeugumgebung und Spiegelersatzsystem für ein Fahrzeug mit einem Sichtsystem
DE69727095T2 (de) Kamerasteuerung durch Steuerung eines Kamerasymbols auf einem Hintergrundbild
DE102005018773B4 (de) Vorrichtung zur Sicht der Umgebung eines Fahrzeugs
EP2220588B1 (de) Konfigurationsmodul für ein überwachungssystem, überwachungssystem, verfahren zur konfiguration des überwachungssystems sowie computerprogramm
EP0843960A1 (de) Vorrichtung zur Überwachung der Überladung von Gütern einer Arbeitsmaschine in einem Transportfahrzeug
DE112014006597T5 (de) Fahrzeugmontierte Vorrichtung
EP3877903A1 (de) Verfahren zur regelung des betriebs einer maschine zum ernten von hackfrüchten
WO2020260427A1 (de) Verfahren zur beobachtung von arbeitsprozessen einer landwirtschaftlichen maschine, digitales videosystem und landwirtschaftliche maschine
EP3421674B1 (de) Vorrichtung und verfahren zum abbilden von bereichen
EP2433424A1 (de) Digitale videokamera
WO2018133996A1 (de) Verfahren zum kombinieren einer vielzahl von kamerabildern
EP1137285A1 (de) Fernsteuerbare Kamera und Verfahren zu ihrem Betrieb
DE102012212923A1 (de) Steuerungsmodul für einen Signalgeber zur Remote-Client-Darstellung einer medizinischen Bildfolge
DE19811286A1 (de) Kamerabewegungssteuerung
EP2312525A2 (de) Verfahren und Kamerasystem zur Erzeugung von Bildern zur Übermittlung an eine externe Steuereinheit
DE102020213288A1 (de) Anzeigevorrichtung für ein Videoüberwachungssystem, Videoüberwachungssystem sowie Verfahren
BE1026709B1 (de) Verfahren zur Regelung des Betriebs einer Maschine zum Ernten von Hackfrüchten
EP1168030A2 (de) Verfahren und Anordnung zur Anpassung der lateralen und zeitlichen Auflösung eines Mikroskopbildes
AT506412B1 (de) Verfahren und anordnung zur detektion von veränderungen einer aufgenommenen szene
DE10132929B4 (de) Verfahren und Vorrichtung zur Steuerung von Schwenk-Neige-Bewegungen einer Kamera
EP4175300A1 (de) Bearbeitung von videodaten
WO2023118154A1 (de) Computerimplementiertes verfahren zur wahlweisen oder gleichzeitigen anzeige zumindest zweier videos
DE102010008687A1 (de) Verfahren zum Darstellen von Information in einem Operationssaal
DE202022100540U1 (de) Gerichtssaal-Mediensystem
DE102005034561A1 (de) Beobachtungsverfahren mittels einer digitalen Videokamera

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20742171

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021576700

Country of ref document: JP

Kind code of ref document: A

Ref document number: 3145156

Country of ref document: CA

ENP Entry into the national phase

Ref document number: 2020303258

Country of ref document: AU

Date of ref document: 20200624

Kind code of ref document: A

ENP Entry into the national phase

Ref document number: 2020742171

Country of ref document: EP

Effective date: 20220124