EP2805210A1 - Verfahren zum überwachen eines fahrzeugumfeldes - Google Patents

Verfahren zum überwachen eines fahrzeugumfeldes

Info

Publication number
EP2805210A1
EP2805210A1 EP12810124.3A EP12810124A EP2805210A1 EP 2805210 A1 EP2805210 A1 EP 2805210A1 EP 12810124 A EP12810124 A EP 12810124A EP 2805210 A1 EP2805210 A1 EP 2805210A1
Authority
EP
European Patent Office
Prior art keywords
environment
mobile device
vehicle
assistance system
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP12810124.3A
Other languages
English (en)
French (fr)
Inventor
Henning Von Zitzewitz
Karsten Muehlmann
Jan Egelhaaf
Raphael Cano
Leo VEPA
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of EP2805210A1 publication Critical patent/EP2805210A1/de
Withdrawn legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
    • G05D1/0038—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with simple or augmented images from one or more cameras located onboard the vehicle, e.g. tele-operation
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning

Definitions

  • Typical mobile devices are for example simple mobile phones or as a smartphone, personal digital assistant (PDA), tablet computer or tablet PC with additional
  • the displayed detail on the display device of the receiver substantially coincides with the field of view of the mobile device in the current orientation and comprises at least part of the vehicle environment.
  • the displayed section on the display device of the receiver comprises at least a part of the field of view of the mobile device.
  • the extent of the field of view may vary and be adjustable depending on the function or also by the user. This makes the information easy to understand for the user (not too small, too big, too distorted, etc.). .).
  • the orientation of the mobile device can thus define a field of view, which may for example be orthogonal to the display device of the mobile display.
  • the display device serves as the image plane of a virtual camera, which in its imaging properties can also deviate from the physical camera integrated in the mobile device.
  • environment data that are acquired with environment sensors of the mobile device can be transmitted via an interface from the mobile device to the driver assistance system.
  • the mobile device can in particular provide video views of the camera system with at least one camera of the interfaces, wherein the video views reproduce a section of the environment of the mobile device.
  • the reproduced section of the environment of the mobile device can be chosen arbitrarily due to its location independence.
  • the reproduced section of the environment of the mobile device may include at least a part of the vehicle environment.
  • Environment data recorded with a camera system of the mobile device can thus be transmitted to a driver assistance system of the vehicle.
  • the environment data in particular video views, so selected be that they reflect the vehicle environment.
  • the environment data can furthermore be displayed on a display device of the driver assistance system, for example a display assigned to the HMI.
  • the transmission of environmental data which is detected with environment sensors of the driver assistance system, can be made to the mobile device.
  • the driver assistance system can provide environment data of the interface, the environment data representing a section of the vehicle environment.
  • multiple cameras installed at different locations on the vehicle can provide video views representing different sections of the vehicle environment.
  • Environment data can be made a pre-selection concerning the section to be transmitted.
  • the driver assistance system can transmit environment data to the mobile device and the selection of the section take place in the mobile device.
  • Display device of the mobile device such as a display
  • Display device of the mobile device are displayed.
  • different methods can be considered.
  • Examples of such features may be mirror or console parts in the interior of the vehicle. Furthermore, markers can be provided in the interior of the vehicle. If the location of such features in the vehicle is known, the orientation of the mobile device relative to the system vehicle can be determined. Further,
  • Environment data recorded with environment sensors of the driver assistance system, take place either on the mobile device or on the driver assistance system. This processing involves balancing the orientation of the mobile device with the resulting portion of the vehicle environment that is to be displayed. If the environment data is processed directly on the driver assistance system, the representations are immediately transmitted to the mobile device for display. Alternatively, environmental data from the
  • Driver assistance system are transmitted to the mobile device to be processed there for display on a display device.
  • environmental data recorded with environment sensor of the mobile device can be processed on the driver assistance system or the mobile device for display on a display device.
  • Driving assistance system 14 installed application, the received environment data for display on the display 15 of the driving assistance system 15.
  • the displayed section of environment data can be selected so that it reproduces the section of the vehicle environment, with the field of view of the mobile device 16 in the current orientation. Consequently, the section of the vehicle environment indicated on the driver assistance system corresponds to the field of view 27 of the mobile device 16 on the vehicle environment.
  • the inventive method allows the user of a mobile device 16, the driver 13 environment cutouts, recorded with the mobile device 16, on the

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Mechanical Engineering (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

Es wird ein Verfahren zum Überwachen eines Fahrzeugumfeldes vorgeschlagen, das folgende Schritte umfasst: • Erfassen von Umfelddaten mit Umfeldsensorik eines Senders; • Übertragen der Umfelddaten von dem Sender an einen Empfänger • Anzeigen zumindest eines Ausschnitts des erfassten Fahrzeugumfeldes auf einer Anzeigevorrichtung des Empfängers, wobei der Sender oder der Empfänger als mobiles Gerät ausgestaltet ist und der angezeigte Ausschnitt durch eine Ausrichtung des mobilen Geräts bestimmt wird. Zudem wird ein Fahrassistenzsystem vorgeschlagen.

Description

Beschreibung Titel
Verfahren zum Überwachen eines Fahrzeugumfeldes Stand der Technik Die Erfindung betrifft ein Verfahren zum Überwachen eines Fahrzeugumfeldes. Zudem betrifft die Erfindung ein Fahrassistenzsystem und ein Computerprogrammprodukt zur Durchführung des Verfahrens.
Fahrassistenzsysteme sind Zusatzeinrichtungen in einem Fahrzeug, die der Unterstützung des Fahrers in bestimmten Fahrsituationen dienen. Dazu umfasst ein Fahrassistenzsystem mehrere Subsysteme wie einen Einparkassistenten, eine Totwinkelüberwachung oder einen Spurwechselassistenten. Typischerweise nutzen diese Subsysteme Daten von am Fahrzeug verbauter Umfeldsensorik, die durch Sensoren, wie optischen Sensoren, Ultraschallsensoren oder dergleichen das Umfeld des Fahrzeuges überwachen. Eine typische Funktionalität von Fahrassistenzsystemen besteht darin, dem Fahrer das Umfeld des Fahrzeuges auf der Basis von Daten der Umfeldsensorik auf einer Anzeige einer Mensch-Maschine-Schnittstelle darzustellen.
Aus DE 10 2009 020 328 A1 ist ein Verfahren bekannt, das unterschiedlich gut sichtbare Objekte aus der Umgebung des Fahrzeuges für einen Benutzer aus der Perspektive eines
Insassen darstellt. Dabei wird die Umgebung des Fahrzeuges mit einer
Objekterkennungsvorrichtung automatisch erfasst und angezeigt. Der Benutzer kann beispielsweise eine Person sein, die die Ausführung eines Manövers überwacht und drahtlos Informationen von dem Fahrzeug empfängt. Insbesondere kann die Anzeigevorrichtung Teil eines externen Geräts außerhalb des Fahrzeuges sein, wobei Informationen von dem
Fahrzeug an das externe Gerät übermittelt werden und der Benutzer seine eigene oder die Perspektive des Insassen wählen kann.
DE 10 2008 034 606 A1 beschreibt die Darstellung der Umgebung eines Fahrzeuges auf einer mobilen Einheit durch mindestens ein Bildsignal, welches die mobile Einheit vom Fahrzeug drahtlos empfängt. Hierbei wird durch das Bildsignal eine Darstellung auf der mobilen Einheit generiert, die eine perspektivisch angeordnete virtuelle Ebene enthält, auf der ein mit einem Aufnahmemittel des Fahrzeuges aufgenommenes Bild abgebildet ist. Insbesondere ist die mobile Einheit als Mobiltelefon ausgestaltet.
Bekannte Fahrassistenzsysteme stellen Bilddaten des Fahrzeugumfeldes auf einer mobilen Einheit dar. An diese Darstellung werden hohe Anforderungen gestellt, damit der Fahrer sein Umfeld intuitiv und schnell erfassen kann. Dabei können situationsbedingt Besonderheiten auftreten, beispielsweise Objekte in der Nähe des Fahrzeuges, die eine Anpassung der Umfelddarstellung erfordern.
Offenbarung der Erfindung
Erfindungsgemäß wird ein Verfahren zum Überwachen eines Fahrzeugumfeldes
vorgeschlagen, das folgende Schritte umfasst:
Erfassen von Umfelddaten mit einer Umfeldsensorik eines Senders;
Übertragen der Umfelddaten von dem Sender an einen Empfänger;
Anzeigen zumindest eines Ausschnitts des erfassten Fahrzeugumfeldes auf einer Anzeigevorrichtung des Empfängers, wobei der Sender oder der Empfänger als mobiles Gerät ausgestaltet ist und der angezeigte Ausschnitt durch eine Ausrichtung des mobilen Geräts bestimmt wird.
Im Allgemeinen bezeichnet Umfeldsensorik jegliche Sensormittel des Senders, die das Umfeld des Senders charakterisieren. In einer Implementierung des erfindungsgemäßen Verfahrens umfasst die Umfeldsensorik ein Kamerasystem mit einer oder mehreren
Kameras, das Videoansichten des Umfeldes aufnimmt. Zusätzlich oder alternativ kann die Umfeldsensorik auch ein System basierend auf mindestens einem Ultraschallsensor, mindestens eine Radarsensor oder mindestens einem LIDAR-Sensor umfassen.
Die Umfelddaten können somit Daten umfassen, die von der Umfeldsensorik, insbesondere einem Kamerasystem des Senders, erfasst werden. So können die Umfelddaten auf dem Kamerasystem basierende Videoansichten und/oder Visualisierungen von Ultraschall-, LIDAR- oder Radardaten darstellen. In einer weiteren Implementierung des erfindungsgemäßen Verfahrens werden die
Umfelddaten über eine Schnittstelle auf mindestens einem drahtlosen oder drahtgebundenen Datenübertragungsweg zwischen Sender und Empfänger übertragen. So kann die
Datenübertragung beispielsweise über eine Ethernet-, eine Media Oriented Systems Transport- (MOST), eine USB-, eine Firewire-, eine WLAN-, eine Bluetooth-, Infrarot- und/oder eine Near-Field-Communication(NFC)-Schnittstelle stattfinden. Weiterhin können die Daten drahtlos via Universal Mobile Telecommunications System (UMTS), Global System for Mobile Communications (GSM) und/oder Long Term Evolution (LTE) in das Internet übertragen, das heißt gesendet und/oder empfangen, werden.
In einer weiteren Implementierung des erfindungsgemäßen Verfahrens ist der Sender ein Fahrassistenzsystem, das Umfelddaten an ein mobiles Gerät als Empfänger sendet.
Alternativ kann der Sender ein mobiles Gerät sein, das Umfelddaten an ein
Fahrassistenzsystem als Empfänger sendet.
Ein Fahrassistenzsystem bezeichnet in diesem Zusammenhang eine Zusatzeinrichtung im Fahrzeug, die den Fahrer in unterschiedlichen Fahrsituationen unterstützt. Typischerweise umfasst ein Fahrassistenzsystem verschiedene Subsysteme, wie einen Ein- und
Ausparkassistenten, einen Assistenten zur Überwachung von Querverkehr („Cross-Traffic- Assistent") oder einen Rückfahrassistenten. Derartige Subsysteme erfordern die
Überwachung des Fahrzeugumfeldes, die im Allgemeinen mit Hilfe von am Fahrzeug verbauter Umfeldsensonk erfolgt. Hierbei liefert die Umfeldsensonk Umfelddaten betreffend das Fahrzeugumfeld. Dazu können einzelne Sensoren der Umfeldsensonk an
unterschiedlichen Orten am Fahrzeug verbaut sein, um jeweils einen anderen Ausschnitt des Fahrzeugumfeldes aufzunehmen beziehungsweise zu überwachen. So kann das
Fahrassistenzsystem als Sender fungieren und Umfelddaten bereitstellen, die zumindest teilweise über eine Schnittstelle an ein mobiles Gerät als Empfänger übertragen werden können. Zusätzlich kann dem Fahrassistenzsystem eine Mensch-Maschine-Schnittstelle (HMI) zugeordnet sein, die Informationen in optischer, akustischer und/oder haptischer Form an den Fahrer weitergibt. Dazu kann unter anderem eine Anzeigevorrichtung, wie ein Display, im Sichtfeld des Fahrers vorgesehen sein, das Informationen optisch wiedergibt.
Insbesondere kann das Fahrassistenzsystem mit einem dem HMI zugeordneten Display ausgebildet sein, von dem mobilen Gerät empfangene Umfelddaten anzuzeigen. Ein mobiles Gerät bezeichnet im vorliegenden Zusammenhang ein tragbares Gerät, das ortsunabhängig eingesetzt werden kann. In das mobile Gerät können unterschiedliche Komponenten integriert sein. Beispielsweise kann Umfeldsensorik, wie ein Kamerasystem mit mindestens einer Kamera in das mobile Gerät integriert sein. Zusätzliche Sensorik wie ein Kompasssystem mit mindestens einem Kompass, ein Bewegungssensorsystem mit mindestens einem Bewegungssensor und/oder ein Positionierungssystem mit mindestens einem Global Positioning System (GPS)-Sensor kann weiterhin die Position und die
Ausrichtung des mobilen Gerätes relativ zu dessen Umfeld bereitstellen. So kann das mobile Gerät Umfelddaten durch Umfeldsensorik und zusätzliche Sensorik erfassen, die das Umfeld des mobilen Gerätes charakterisieren und die zumindest teilweise von dem als Sender fungierenden mobilen Gerät über eine Schnittstelle an ein Fahrassistenzsystem als
Empfänger übertragen werden können. Zusätzlich kann dem mobilen Gerät zur Interaktion mit einem Benutzer ein HMI zugeordnet sein, das Informationen in optischer, akustischer und/oder haptischer Form an den Benutzer weitergibt. Dazu kann das HMI des mobilen Gerätes unter anderem eine Anzeigevorrichtung, wie ein Display, umfassen, das ausgebildet ist, von dem Fahrassistenzsystem empfangene Umfelddaten anzuzeigen. Zusätzlich oder alternativ kann dem HMI eine Eingabevorrichtung, wie eine Tastatur und/oder ein berührungsempfindliches Display zugeordnet sein, über die der Benutzer mit dem mobilen Gerät kommunizieren kann.
Typische mobile Geräte sind zum Beispiel einfache Mobiltelefone oder als Smartphone, Personal Digital Assistent (PDA), Tablet-Computer bzw. Tablet-PC mit zusätzlicher
Computerfunktionalität und -konnektivität ausgestattet sein. Auch mobile Kameras oder stationäre gegebenenfalls auch schwenkbare Kameras, die beispielsweise einer
Infrastruktureinrichtung, etwa einer Parkplatzüberwachung, zugordnet sind, können als mobile Geräte eingesetzt werden. Beispielsweise kann eine Kamera in einer Garage als mobiles Gerät genutzt werden, so installiert und ausgerichtet sein, dass die aufgenommenen und an das Kfz (bzw. das Fahrerassistenzsystems) übertragenen Videodaten den Fahrer visuell beim Einparkvorgang unterstützen.
In einer weiteren Ausführungsform des erfindungsgemäßen Verfahrens stimmt der angezeigte Ausschnitt auf der Anzeigevorrichtung des Empfängers mit dem Blickfeld des mobilen Gerätes in der momentanen Ausrichtung im Wesentlichen überein und umfasst zumindest einen Teil des Fahrzeugumfeldes. Hierbei bedeutet im Wesentlichen, dass der angezeigte Ausschnitt auf der Anzeigevorrichtung des Empfängers zumindest einen Teil des Blickfeldes des mobilen Gerätes umfasst. Beispielsweise kann die Ausdehnung des Blickfeldes variieren und je nach Funktion oder auch vom Nutzer einstellbar sein. So können die Informationen für den Benutzer leicht verständlich dargestellt werden (nicht zu klein, zu groß, zu verzerrt etc.). .). Die Ausrichtung des mobilen Gerätes kann damit ein Blickfeld definieren, das beispielsweise orthogonal zu der Anzeigevorrichtung des mobilen Display sein kann. Die Anzeigevorrichtung dient in dieser Ausführungsform als Bildebene einer virtuellen Kamera, die in Ihren Abbildungseigenschaften auch von der im mobilen Gerät integrierten, physikalischen Kamera abweichen kann.
Zur Anzeige eines Ausschnitts umfassen die Umfelddaten vorzugweise Daten, die von einem dem Fahrassistenzsystem oder dem mobilen Gerät zugeordneten Kamerasystem erfasst werden. Aus diesen Daten kann dann der jeweilige Ausschnitt entsprechend dem Blickfeld des mobilen Gerätes in der momentanen Ausrichtung ausgewählt und angezeigt werden. Hierbei wird das Blickfeld des mobilen Geräts im Wesentlichen durch die Umfeldsensorik bestimmt, wobei das Blickfeld im Wesentlichen dem Erfassungsbereich der Umfeldsensorik entspricht. Das Blickfeld kann somit insbesondere mit dem Erfassungsbereich einer in das mobile Gerät integrierten Kamera im Wesentlichen übereinstimmen. Die momentane Ausrichtung des mobilen Geräts wird durch den Benutzer bestimmt, der das mobile Gerät verwendet und die Ausrichtung des mobilen Gerätes relativ zum Umfeld bestimmt.
In einer Realisierung des erfindungsgemäßen Verfahrens können Umfelddaten, die mit Umfeldsensorik des mobilen Geräts erfasst werden, über eine Schnittstelle von dem mobilen Gerät zu dem Fahrassistenzsystem übertragen werden. Dabei kann das mobile Gerät insbesondere Videoansichten des Kamerasystems mit mindestens einer Kamera der Schnittstellen bereitstellen, wobei die Videoansichten einen Ausschnitt des Umfeldes des mobilen Geräts wiedergeben. Insbesondere kann der wiedergegebene Ausschnitt des Umfeldes des mobilen Geräts aufgrund von dessen Ortsunabhängigkeit beliebig gewählt werden. So kann der wiedergegebene Ausschnitt des Umfeldes des mobilen Geräts zumindest einen Teil des Fahrzeugumfeldes umfassen.
Umfelddaten, aufgenommen mit einem Kamerasystem des mobilen Gerätes, können somit an ein Fahrassistenzsystem des Fahrzeuges übertragen werden. Je nach Ausrichtung des mobilen Gerätes können die Umfelddaten, insbesondere Videoansichten, so gewählt werden, dass diese das Fahrzeugumfeld wiedergeben. Die Umfelddaten können weiterhin auf einer Anzeigevorrichtung des Fahrassistenzsystems, beispielsweise einem dem HMI zugeordneten Display, angezeigt werden. In einer anderen Realisierung des Verfahrens kann die Übertragung von Umfelddaten, die mit Umfeldsensorik des Fahrassistenzsystems erfasst werden, zu dem mobilen Gerät erfolgen. Dabei kann das Fahrassistenzsystem Umfelddaten der Schnittstelle bereitstellen, wobei die Umfelddaten einen Ausschnitt des Fahrzeugumfeldes wiedergeben. Insbesondere können mehrere Kameras, die an unterschiedlichen Orten am Fahrzeug verbaut sind, Videoansichten bereitstellen, die unterschiedliche Ausschnitte des Fahrzeugumfeldes wiedergeben.
Umfelddaten, aufgenommen mit einem Kamerasystem des Fahrassistenzsystems, können somit an das mobile Gerät übertragen werden. Je nach Ausrichtung des mobilen Gerätes können die Umfelddaten so gewählt werden, dass diese den Ausschnitt des
Fahrzeugumfeldes wiedergeben, der mit dem fiktiven Blickfeld des mobilen Gerätes in der momentanen Ausrichtung übereinstimmt. Dabei kann die Ausrichtung des mobilen Geräts beispielsweise über einen dem mobilen Gerät zugeordneten Bewegungssensor oder Kompass bestimmt werden.
Das Signal, das die Ausrichtung des mobilen Gerätes charakterisiert, kann an das
Fahrassistenzsystem übertragen werden, damit im Fahrassistenzsystem aus den
Umfelddaten eine Vorauswahl betreffend des zu übertragenden Ausschnitts getroffen werden kann. Alternativ kann das Fahrassistenzsystem Umfelddaten an das mobile Gerät übertragen und die Auswahl des Ausschnitts in dem mobilen Gerät stattfinden.
Dementsprechend können die Umfelddaten so gewählt werden, dass der Ausschnitt des Fahrzeugumfeldes auf dem mobilen Gerät einem fiktiven Blickfeld des mobilen Gerätes auf das Fahrzeugumfeld entspricht. Die Umfelddaten können weiterhin auf einer
Anzeigevorrichtung des mobilen Geräts, beispielsweise einem Display, angezeigt werden. Um der Ausrichtung des mobilen Gerätes einen entsprechenden Umfeldausschnitt zuzuordnen, kommen unterschiedliche Verfahren in Betracht. So kann die Ausrichtung des Fahrzeuges und somit auch der fest eingebauten Kameras des Fahrerassistenzsystems über ein im Fahrzeug verbautes GPS-System, beispielsweise über den Kurs
beziehungsweise das Heading, und/oder Kompasssensoren bekannt sein. Alternativ oder zusätzlich können die ein oder mehrere Kameras des mobile Geräts und des Fahrassistenzsystems herausragende, visuelle Merkmale erfassen. Über die Korrespondenz dieser Merkmale kann dann die relative Orientierung der Systeme zueinander rekonstruiert werden. Zusätzlich oder alternativ könnten die ein oder mehreren Kameras des mobilen Gerätes herausragende, visuelle Merkmale im Innenraum des Fahrzeuges erfassen.
Beispiele für derartige Merkmale können Spiegel- oder Konsolenteile im Innenraum des Fahrzeuges sein. Weiterhin können Marker im Innenraum des Fahrzeuges vorgesehen sein. Ist die Lage derartiger Merkmale im Fahrzeug bekannt, kann darüber die Orientierung des mobilen Gerätes relativ zu dem System Fahrzeug bestimmt werden. Weitere
Abwandelungen und Weiterbildungen der genannten Verfahren sind im Rahmen
fachmännischen Handelns möglich.
In einer weiteren Implementierung des erfindungsgemäßen Verfahrens ist auf dem mobilen Gerät und/oder dem Fahrassistenzsystem eine Applikation installiert, die Umfelddaten zum Anzeigen auf einer Anzeigevorrichtung verarbeitet. So kann die Verarbeitung der
Umfelddaten, aufgenommen mit Umfeldsensorik des Fahrassistenzsystems, entweder auf dem mobilen Gerät oder auf dem Fahrassistenzsystem stattfinden. Diese Verarbeitung beinhaltet den Abgleich zwischen der Ausrichtung des mobilen Geräts und dem sich daraus ergebenden, anzuzeigenden Ausschnitts des Fahrzeugumfeldes. Werden die Umfelddaten direkt auf dem Fahrassistenzsystem verarbeitet, so werden die Darstellungen unmittelbar zur Anzeige an das mobile Gerät übertragen. Alternativ können auch Umfelddaten von dem
Fahrassistenzsystem an das mobile Gerät übertragen werden, um dort zur Anzeige auf einer Anzeigevorrichtung verarbeitet zu werden. Umgekehrt können auch Umfelddaten, aufgenommen mit Umfeldsensorik des mobilen Gerätes, auf dem Fahrassistenzsystem oder dem mobilen Gerät zur Anzeige auf einer Anzeigevorrichtung verarbeitet werden.
Zum Anzeigen der Daten können weitere Anpassungen der Darstellung vorgenommen werden. Beispielsweise kann eine Anpassung der Helligkeit, die Auswahl eines
Bildausschnittes und/oder eine Überlagerung von beispielsweise Kameraumfelddaten mit Umfelddaten weiterer Komponenten, wie Ultraschallsensoren oder dergleichen, erfolgen. Daneben können weitere dem Fachmann bekannte Verfahren zur Bilderverarbeitung zur verständlichen Darstellung der Umfelddaten genutzt werden. Weiterhin können die
Umfelddaten erneut über einem Netzwerk, wie das Internet, zu Verfügung gestellt werden und dort in Webanwendungen oder Portalen publiziert werden. Erfindungsgemäß wird weiterhin ein Computerprogramm vorgeschlagen, gemäß dem eines der hierin beschriebenen Verfahren durchgeführt wird, wenn das Computerprogramm auf einer programmierbaren Computereinrichtung ausgeführt wird. Bei der Computereinrichtung kann es sich beispielsweise um ein Modul zur Implementierung eines Fahrassistenzsystems, oder eines Subsystems hiervon, in einem Fahrzeug handeln. Zusätzlich oder alternativ kann es sich bei der Computereinrichtung auch um ein Modul zur Implementierung eines mobilen Gerätes handeln. Das Computerprogramm kann auf einem maschinenlesbaren
Speichermedium gespeichert werden, etwa auf einem permanenten oder
wiederbeschreibbaren Speichermedium oder in Zuordnung zu einer Computereinrichtung oder auf einer entfernbaren CD-Rom-DVD oder einem USB-Stick. Zusätzlich oder alternativ kann das Computerprogramm auf einer Computereinrichtung wie etwa einem Server zum Herunterladen bereitgestellt werden, zum Beispiel über ein Datennetzwerk, wie etwa das Internet oder eine Kommunikationsverbindung wie etwa eine Telefonleitung oder eine drahtlose Verbindung.
Zudem wird erfindungsgemäß ein Fahrassistenzsystem vorgeschlagen, das ausgebildet ist, Umfelddaten von einer Komponente eines mobilen Gerätes zu empfangen und einen Ausschnitt eines Fahrzeugumfeldes in Abhängigkeit von einer Ausrichtung des mobilen Geräts anzuzeigen. Das Fahrassistenzsystem ist vorzugsweise ausgebildet, das zuvor beschriebene Verfahren auszuführen.
Letztlich wird erfindungsgemäß ein mobiles Gerät zum Überwachen eines
Fahrzeugumfeldes vorgeschlagen, das ausgebildet ist Umfelddaten von einer Komponente eines Fahrassistenzsystems zu empfangen und einen Ausschnitt eines Fahrzeugumfeldes in Abhängigkeit von einer Ausrichtung des mobilen Gerätes anzuzeigen.
Das erfindungsgemäße Fahrassistenzsystem und das erfindungsgemäße mobile Gerät sind vorzugsweise ausgebildet, das vorstehend beschriebene Verfahren in seinen jeweiligen Variationen auszuführen.
Vorteile der Erfindung
Die Erfindung ermöglicht es, dem Fahrer einen optimalen Überblick über das
Fahrzeugumfeld zu geben, indem nur ausgewählte Ausschnitte des Fahrzeugumfeldes dargestellt werden. Durch die Darstellung eines Ausschnitts des Fahrzeugumfeldes kann sich der Fahrer auf diesen Ausschnitt des Fahrzeugumfeldes fokussieren und potentielle Gefahrenquellen leicht identifizieren. Dadurch können insbesondere beim Ein- und
Ausparken des Fahrzeuges die Ausschnitte des Umfeldes angezeigt werden, in denen eine Kollision mit einem Hindernis droht.
So ist es beispielsweise möglich, dem Fahrer Umfeldausschnitte, aufgenommen mit einem mobilen Gerät, auf die Anzeige des Fahrassistenzsystems zu senden und ihm somit ein übersichtliches Bild der Fahrsituation zu vermittelten. Insbesondere beim Einparken ist diese Ausführungsform hilfreich, da der Benutzer des mobilen Gerätes Videoansichten des Fahrzeugumfeldes an den Fahrer senden kann. So kann zum Beispiel eine Kamera in einer Garage als mobiles Gerät genutzt werden, wobei die Kamera so installiert und ausgerichtet ist, dass die aufgenommenen und an das Kfz (bzw. das Fahrerassistenzsystems) übertragenen Videodaten den Fahrer visuell beim Einparkvorgang unterstützen. In der alternativen Ausführungsform kann der Fahrer, beispielsweise vor dem Ausparken, ein mobiles Gerät dazu verwenden, die Abstände zu Hindernissen unmittelbar aus den auf dem mobilen Gerät angezeigten Ausschnitten des Fahrzeugumfeldes einzuschätzen.
Insbesondere ergibt sich in dieser Ausführungsform ein„Röntgenblick" für den Fahrer, der vom Inneren des Fahrzeuges beispielsweise durch die Karosserie hindurch das
Fahrzeugumfeld bewerten kann.
Insgesamt kann so der Nutzwert des assistierten Fahrens erhöht werden und damit auch die Akzeptanz von entsprechenden Assistenten. Situationen, bei denen lediglich Ausschnitte des Fahrzeugumfeldes relevant sind, treten beispielsweise beim Ein- oder Ausparken häufig auf und ein erfindungsgemäß weiter gebildetes Fahrassistenzsystem kann in derartigen
Situationen zu einer relevanten Verbesserung beitragen.
Der erhöhten Systemverfügbarkeit steht dabei kein zusätzlicher Montageaufwand
gegenüber, da keine zusätzlichen Sensoren, Module oder sonstige Komponenten verbaut werden müssen. Die meisten Fahrzeuge verfügen heute über eine Umfeldsensorik mit optischen Sensoren in unterschiedlichen Positionen am Fahrzeug und Schnittstellen zur Datenübertragung. Auch mobile Geräte sind häufig mit derartiger Umfeldsensorik und Schnittstellen zur Datenübertragung ausgestattet. In der Regel sind daher Umfelddaten und insbesondere Videoansichten des Fahrzeugumfeldes einfach bereitstellbar oder sind ohnehin bereits verfügbar, so dass für die Erfindung im Wesentlichen zusätzliche Auswertungsalgorithmen zu implementieren sind. Das erfindungsgemäße Verfahren kann daher einfach und kostengünstig nachgerüstet werden.
Kurze Beschreibung der Zeichnungen
Weitere Aspekte und Vorteile der Erfindung werden nunmehr anhand der beigefügten Figuren eingehender beschrieben.
Hierbei zeigen: in schematischer Darstellung eine Fahrsituation, in der ein Fahrer beabsichtigt mit seinem Fahrzeug ausgerüstet mit erfindungsgemäßem Fahrassistenzsystem aus einer Parklücke zu manövrieren, Figur 2 in Form eines Flussdiagramms einer Arbeitsweise des Fahrassistenzsystems gemäß der Figur 1 ,
Figur 3 in schematischer Darstellung eine Parksituation, in der das Fahrzeug ausgerüstet mit erfindungsgemäßem Fahrassistenzsystem in eine Parklücke einparkt,
Figur 4 in Form eines Flussdiagramms einer Arbeitsweise des Fahrassistenzsystems gemäß der Figur 2.
Ausführungsformen der Erfindung
Figur 1 zeigt eine beispielhafte Fahrsituation, in der ein Fahrzeug 10 sich in einer Umgebung mit Hindernissen 12, beispielsweise Säulen, befindet. Diese Hindernisse 12 sind für den Fahrer 13 in der in Figur 1 gezeigten Situation nicht direkt sichtbar. Insbesondere bei der Rückwärtsfahrt, beispielsweise beim Rückwärtsausparken, kann es daher zur Kollision mit den Hindernissen 12 kommen.
Um derartige Kollisionen mit Hindernissen 12 zu verhindern und den Fahrer 13 in derartigen Situationen zu unterstützen, ist das Fahrzeug 10 mit einem Fahrassistenzsystem 14 ausgerüstet. Das Fahrassistenzsystem 14 umfasst unterschiedliche Subsysteme, beispielsweise ein Einparkassistenten und ein Überwachungssystem. In der gezeigten Ausgestaltung, umfasst das Fahrassistenzsystem 14 Umfeldsensorik, die ein System aus optischen Sensoren, insbesondere eine Frontkamera 18, Seitenkameras 20 und eine Rückfahrkamera 22 umfasst. Zusätzlich kann das Fahrassistenzsystem 14
Ultraschallsensoren, Radarsensoren und/oder Lidar-Sensoren umfassen, die in Figur 1 nicht gezeigt sind.
Weiterhin umfasst das Fahrassistenzsystem 14 ein Steuergerät 24, das die Kommunikation mit Subsystemen, etwa dem Einparkassistenten, und die Verarbeitung von Sensordaten, etwa Videoansichten des Kamerasystems 18, 20, 22, ermöglicht. Zusätzlich ist das
Steuergerät 24 mit einer Schnittstelle 26 ausgestaltet, die beispielsweise als drahtlose Datenübertragungsschnittstelle für den Datentransfer via Bluetooth, WLAN oder Firewire ausgebildet ist.
Bevor der Fahrer 13 des Fahrzeuges 10 zur Rückwärtsfahrt ansetzt, nimmt das
Kamerasystem 18, 20, 22 unterschiedliche Ausschnitte des Fahrzeugumfeldes auf. So stellt beispielsweise die Rückfahrkamera 22 Videoansichten des Fahrzeugumfeldes hinter dem Fahrzeug 10 bereit. In Figur 1 befinden sich hinter dem Fahrzeug 10 Objekte 12, mit denen das Fahrzeug 10 bei einer Rückwärtsfahrt kollidieren könnte. Die Videoansichten des Kamerasystems 18, 20, 22 werden an das Steuergerät 24 des Fahrassistenzsystems 14 weitergeleitet und dort beispielsweise zur Anzeige auf einer Anzeigevorrichtung, wie dem Display eines HMI, verarbeitet.
Um dem Fahrer 13 die für ihn relevanten Ausschnitte der Fahrzeugumgebung nach seiner Wahl bereitstellen zu können, werden die Videoansichten des Kamerasystems 18, 20, 22 von dem Steuergerät 24 des Fahrassistenzsystems 14 an ein mobiles Gerät 16, etwa ein
Mobiltelefon, gesendet. Das mobile Gerät 16 weist dazu eine
Datenübertragungsschnittstelle 28, die beispielsweise als drahtlose
Datenübertragungsschnittstelle für den Datentransfer via Bluetooth, WLAN oder Firewire ausgebildet ist, und einen Display zur Anzeige der Videoansichten des Fahrzeugumfeldes auf. Zur Auswahl des jeweiligen Ausschnitts des Fahrzeugumfeldes ist das mobile Gerät 16 weiterhin mit einem Bewegungssensor 31 ausgestattet. Auf diese Weise wird die
Ausrichtung des mobilen Geräts 16 bestimmt und aus den Videoansichten, die das
Fahrzeugumfeld darstellen, der jeweilige Ausschnitt entsprechend der Ausrichtung und damit dem Blickfeld 17 des mobilen Gerätes 16 ausgewählt. Die Ausrichtung des mobilen Gerätes 16 relativ zu dem Fahrzeug 10 kann dabei auf unterschiedliche Weisen identifiziert werden. Beispielsweise können Kameras des mobile Geräts 16 und des Fahrassistenzsystems 14 herausragende, visuelle Merkmale erfassen, die dann abgeglichen werden. Das mobile Gerät 16 dient dabei im Wesentlichen als virtuelle Kamera, die je nach Ausrichtung des mobilen Gerätes 16 ein Blickfeld 17 definiert.
Auf dem mobilen Gerät 16 können Applikationen mit vielfältigen Darstellungsvarianten installiert werden. So können die Applikationen beispielsweise auf einem Server zum
Herunterladen hinterlegt sein, wobei beim Ausführen der Applikation auf dem mobilen Gerät 16 die Darstellung der Videoansicht modifiziert wird. Beispielsweise können die Videodaten mit Informationen weiterer Umfeldsensoren, wie Abstandinformationen von
Ultraschallsensoren überlagert werden. Auch eine Überlagerung mit beispielsweise Points Of Interest (POIs), etwa Sehenswürdigkeiten, oder eine automatische Zuordnung und
Überlagerung von Fahrzeugkennzeichen und deren Verwaltungsbezirk ist denkbar.
Weiterhin könnten die Videoansichten erneut über ein Netzwerk, wie das Internet, zu
Verfügung gestellt werden und dort in Webanwendungen oder Portalen publiziert werden.
Wie in Figur 1 gezeigt, kann der Fahrer 13 in dieser Ausführungsform Ausschnitte des Fahrzeugumfeldes durch die Ausrichtung des mobilen Gerätes 16 auswählen und sich auf dem mobilen Gerät 16 durch die Karosserie hindurch anzeigen lassen. Dadurch kann der Fahrer 13 das Fahrzeugumfeld intuitiver erfassen und etwaige Hindernisse 12 erkennen. So kann der Fahrer 13 Hindernisse 12, die beispielsweise beim Rückwärtsfahren eine Kollision verursachen könnten, schon frühzeitig erkennen, obwohl diese sich außerhalb seines Sichtfeldes befinden.
In Figur 2 ist das Zusammenwirken der Komponenten des Fahrassistenzsystems aus Figur 1 anhand eines Flussdiagrams 30 illustriert. In Schritt 32 werden zum Überwachen des
Fahrzeugumfeldes zunächst Umfelddaten mit Umfeldsensorik 18, 20, 22 des im Fahrzeug 10 integrierten Fahrassistenzsystems 14 erfasst. Die Umfeldsensorik umfasst dabei ein
Kamerasystem mit mehreren Kameras, das Videoansichten des Umfeldes aufnimmt. Die Umfelddaten enthalten dementsprechend Videoansichten des Kamerasystems 18, 20, 22. Daneben können die Umfelddaten auch Visualisierungen von Ultraschall-, Radar oder
LIDAR-Daten umfassen.
In Schritt 34 werden die erfassten Umfelddaten von dem Fahrassistenzsystem 14 an ein mobiles Gerät 16 übertragen. In diesem Fall fungiert das Fahrassistenzsystem 14 als Sender, der die Umfelddaten an das als Empfänger fungierende mobile Gerät sendet. Dazu sind beide, also sowohl das Fahrassistenzsystem 14 als auch das mobile Gerät 16 mit einer drahtlosen Schnittstelle 26, 28 ausgestattet, die eine Datenübertragung via beispielsweise Bluetooth, Firewire oder WLAN ermöglicht. In Schritt 36 wird zumindest ein Ausschnitt des erfassten Fahrzeugumfeldes auf einem Display des mobilen Endgeräts angezeigt. Dabei verarbeitet eine auf der mobilen Einheit installierte Applikation die empfangenen Umfelddaten zur Anzeige auf dem Display der mobilen Einheit. Je nach Ausrichtung des mobilen Gerätes kann der angezeigte Ausschnitt von Umfelddaten so gewählt werden, dass diese den Ausschnitt des Fahrzeugumfeldes wiedergeben, der mit dem fiktiven Blickfeld des mobilen Gerätes in der momentanen Ausrichtung übereinstimmt. Folglich entspricht der Ausschnitt des Fahrzeugumfeldes, angezeigt auf dem mobilen Endgerät, einem fiktiven Blickfeld des mobilen Endgerätes auf das Fahrzeugumfeld. Das erfindungsgemäße Verfahren ermöglicht dem Fahrer 13 eine Art„Röntgenblick", mit dem der Fahrer 13 das gesamte Fahrzeugumfeld innerhalb des Fahrzeuges 10 überwachen kann. So kann der Fahrer 13 beispielsweise vor dem Ausparken das Fahrzeugumfeld, welches aus der Fahrerposition nicht sichtbar ist, einsehen und mögliche Gefahrenquellen aufspüren.
Figur 3 zeigt eine weitere beispielhafte Fahrsituation, in der ein Fahrer 13 mit seinem Fahrzeug 10 in eine enge Parklücke 1 1 , beispielsweise in einem Parkhaus, rückwärts einparken möchte. Dabei stellen die Parklückenbegrenzungen 12 beispielsweise Säulen oder Mauern ein potentielle Hindernis im Fahrzeugumfeld dar. Diese Hindernisse 12 erschweren dem Fahrer 13 in der in Figur 1 gezeigten Situation das Einparken, da beim
Manövrieren eine potentielle Kollisionsgefahr mit den Hindernissen 12 besteht.
Um derartige Kollisionen zu verhindern und den Fahrer 13 in derartigen Situationen zu unterstützen, ist das Fahrzeug 10 mit einem Fahrassistenzsystem 14 ausgerüstet. Das Fahrassistenzsystem 14 umfasst unterschiedliche Subsysteme, beispielsweise ein
Einparkassistenten und ein Überwachungssystem. In der gezeigten Ausgestaltung, umfasst das Fahrassistenzsystem 14 ein HMI mit einem Display 15 zur optischen Ausgabe von Informationen. Beispielsweise können Videoansichten des im Fahrassistenzsystem 14 integrierten Kamerasystems 18, 20, 22 auf dem Display dargestellt werden. In der vorliegenden Ausführungsform ist das Kamerasystem 18, 20, 22 allerdings fakultativ und nicht obligatorisch.
Weiterhin sieht das Fahrassistenzsystem 14 ein Steuergerät 24 vor, dass die Kommunikation mit Subsystemen, etwa dem Einparkassistenten und der Videoüberwachung, und die Verarbeitung von Sensordaten, etwa Videoansichten des Kamerasystems 18, 20, 22 ermöglicht. Zusätzlich ist das Steuergerät 24 mit einer Schnittstelle 26 ausgestaltet, die beispielsweise als drahtlose Datenübertragungsschnittstelle für den Datentransfer etwa via Bluetooth, WLAN oder Firewire ausgebildet ist.
Während der Fahrer 13 das Fahrzeug 10 in die Parklücke 1 1 manövriert, assistiert ihm ein Benutzer mit seinem mobilen Gerät 16, beispielsweise seinem Mobiletelefon. Das mobile Gerät 16 umfasst dazu eine Kamera 29, die je nach Ausrichtung des mobilen Gerätes 16 Videoansichten aufnimmt. So kann der Benutzer unterschiedliche Ausschnitte des
Fahrzeugumfeldes aufnehmen und über die Schnittstelle 28 des mobilen Geräts 16 dem Fahrassistenzsystem 14 bereitstellen. In der gezeigten Ausführungsform empfängt das Steuergerät 24 des Fahrassistenzsystems 14 diese Videoansichten und verarbeitet diese beispielsweise zur Anzeige auf einer Anzeigevorrichtung16. Aus der Darstellung eines Ausschnitts des Fahrzeugumfeldes wie in Figur 3 gezeigt, kann der Benutzer des mobilen Gerätes 16 den Fahrer 13 beim Manövrieren in eine Parklücke 1 1 unterstützen. Denn der Benutzer kann statt den Fahrer 13 per Handzeichen in die Parklücke 1 1 einzuweisen, dem Fahrer 13 eine Videoansicht des Fahrzeugumfeldes bereitstellen, die dem Fahrer 13 kritische Stellen, insbesondere Abstände zu der Parklückenbegrenzung 12, aufzeigen.
In Figur 4 ist das Zusammenwirken der Komponenten des Fahrassistenzsystems aus Figur 2 anhand eines Flussdiagrams 40 illustriert. In Schritt 42 werden zum Überwachen des Fahrzeugumfeldes Umfelddaten mit Umfeldsensorik eines mobilen Geräts 16 erfasst. Dazu wird eine in das mobile Gerät 16 integrierte Kamera 29 verwendet, die je nach Ausrichtung des mobilen Gerätes 16 unterschiedliche Ausschnitte aus dem Fahrzeugumfeld liefert.
In Schritt 44 werden die Umfelddaten des mobilen Endgeräts 16 an das
Fahrassistenzsystem 14 übertragen. In diesem Fall fungiert das mobile Gerät 16 als Sender, der die Umfelddaten an das als Empfänger fungierende Fahrassistenzsystem 14 sendet. Dazu sind beide, also sowohl das Fahrassistenzsystem 14 als auch das mobile Gerät 16, mit einer drahtlosen Schnittstelle 26, 28 ausgestattet, die eine Datenübertragung via
beispielsweise Bluetooth, Firewire oder WLAN ermöglicht. In Schritt 46 wird zumindest ein Ausschnitt des erfassten Fahrzeugumfeldes auf einem Display 15 des Fahrassistenzsystems 14 angezeigt. Dabei verarbeitet eine auf dem
Fahrassistenzsystem 14 installierte Applikation die empfangenen Umfelddaten zur Anzeige auf dem Display 15 des Fahrassistenzsystems 15. Je nach Ausrichtung des mobilen Gerätes 16 kann der angezeigte Ausschnitt von Umfelddaten so gewählt werden, dass dieser den Ausschnitt des Fahrzeugumfeldes wiedergibt, der mit dem Blickfeld des mobilen Gerätes 16 in der momentanen Ausrichtung übereinstimmt. Folglich entspricht der Ausschnitt des Fahrzeugumfeldes, angezeigt auf dem Fahrassistenzsystem, dem Blickfeld 27 des mobilen Gerätes 16 auf das Fahrzeugumfeld. Das erfindungsgemäße Verfahren ermöglicht es dem Benutzer eines mobilen Gerätes 16, dem Fahrer 13 Umfeldausschnitte, aufgenommen mit dem mobilen Gerät 16, auf die
Anzeige des Fahrassistenzsystems 14 zu senden und ihm somit ein übersichtliches Bild der Fahrsituation zu vermittelten. Insbesondere beim Einparken ist diese Ausführungsform hilfreich, da der Benutzer des mobilen Gerätes 16 Videoansichten des Fahrzeugumfeldes und insbesondere von kritischen Stellen an den Fahrer 13 senden kann.
Die Erfindung ist nicht auf die hier beschriebenen Ausführungsbeispiele und die darin hervorgehobenen Aspekte beschränkt. Vielmehr ist innerhalb des durch die anhängigen Ansprüche angegeben Bereiches ist eine Vielzahl von Abwandlungen möglich, die im Rahmen fachmännischen Handels liegen.

Claims

Ansprüche 1. Verfahren zum Überwachen eines Fahrzeugumfeldes mit folgenden Schritten:
Erfassen (32) von Umfelddaten mit Umfeldsensorik (18, 20, 22, 29) eines Senders (14, 16);
Übertragen (34) der Umfelddaten von dem Sender (14, 16) an einen Empfänger (14, 16);
Anzeigen (36) zumindest eines Ausschnitts des erfassten Fahrzeugumfeldes auf einer Anzeigevorrichtung des Empfängers (14, 16), wobei der Sender (14, 16) oder der Empfänger (14, 16) als mobiles Gerät (16) ausgestaltet ist und der angezeigte Ausschnitt durch eine Ausrichtung des mobilen Geräts (16) bestimmt wird.
2. Verfahren gemäß Anspruch 1 , dadurch gekennzeichnet, dass die Umfeldsensorik (18, 20, 22, 29) ein Kamerasystem mit einer oder mehreren Kameras umfasst, das
Videoansichten des Fahrzeugumfeldes aufnimmt.
3. Verfahren gemäß einem der Ansprüche 1 oder 2, dadurch gekennzeichnet, dass die Umfelddaten über eine Schnittstelle auf mindestens einem drahtlosen oder
drahtgebundenen Datenübertragungsweg zwischen Sender (14, 16) und Empfänger (14, 16) übertragen werden.
4. Verfahren gemäß einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass der
Sender (14, 16) ein Fahrassistenzsystem (14) ist, das Umfelddaten an ein mobiles Gerät (16) als Empfänger (14, 16) sendet, oder der Sender (14, 16) ein mobiles Gerät (16) ist, das Umfelddaten an ein Fahrassistenzsystem (14) als Empfänger (14, 16) sendet.
5. Verfahren gemäß einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass der
dargestellte Ausschnitt des Fahrzeugumfeldes mit dem Blickfeld (17) des mobilen Gerätes (16) in der momentanen Ausrichtung übereinstimmt und zumindest einen Teil des Fahrzeugumfeldes umfasst.
6. Verfahren gemäß einem der Ansprüche 1 bis 5, dadurch gekennzeichnet, dass der Ausschnitt des erfassten Umfeldes auf einer Anzeigevorrichtung eines dem
Fahrassistenzsystem (14) oder eines dem mobilen Gerät (16) zugeordneten HMIs angezeigt wird.
7. Verfahren gemäß einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass eine auf der mobilen Einheit (16) und/oder dem Fahrassistenzsystem (14) installierte Applikation die Umfelddaten zur Anzeige verarbeitet.
8. Computerprogramm zur Durchführung eines Verfahrens gemäß einem der vorstehenden Ansprüche, wenn das Computerprogramm auf einer programmierbaren
Computereinrichtung ausgeführt wird.
9. Fahrassistenzsystem (14) zum Überwachen eines Fahrzeugumfeldes, das ausgebildet ist, Umfelddaten von einer Komponente eines mobilen Gerätes (16) zu empfangen und einen Ausschnitt eines Fahrzeugumfeldes in Abhängigkeit von einer Ausrichtung des mobilen Gerätes (16) anzuzeigen.
10. Mobiles Gerät (16) zum Überwachen eines Fahrzeugumfeldes, das ausgebildet ist, Umfelddaten von einer Komponente eines Fahrassistenzsystems (14) zu empfangen und einen Ausschnitt eines Fahrzeugumfeldes in Abhängigkeit von einer Ausrichtung des mobilen Gerätes (16) anzuzeigen.
EP12810124.3A 2012-01-19 2012-11-29 Verfahren zum überwachen eines fahrzeugumfeldes Withdrawn EP2805210A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102012200721A DE102012200721A1 (de) 2012-01-19 2012-01-19 Verfahren zum Überwachen eines Fahrzeugumfeldes
PCT/EP2012/073981 WO2013107550A1 (de) 2012-01-19 2012-11-29 Verfahren zum überwachen eines fahrzeugumfeldes

Publications (1)

Publication Number Publication Date
EP2805210A1 true EP2805210A1 (de) 2014-11-26

Family

ID=47504838

Family Applications (1)

Application Number Title Priority Date Filing Date
EP12810124.3A Withdrawn EP2805210A1 (de) 2012-01-19 2012-11-29 Verfahren zum überwachen eines fahrzeugumfeldes

Country Status (4)

Country Link
EP (1) EP2805210A1 (de)
CN (1) CN104054033A (de)
DE (1) DE102012200721A1 (de)
WO (1) WO2013107550A1 (de)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014212819A1 (de) 2014-07-02 2016-01-07 Zf Friedrichshafen Ag Ortspositionsabhängige Darstellung von Fahrzeugumfelddaten auf einer mobilen Einheit
DE102014115521A1 (de) * 2014-10-24 2016-04-28 Deutsche Telekom Ag Fahrerunterstützung bei der Erfassung der Fahrzeugumgebung
DE102014222190A1 (de) 2014-10-30 2016-05-04 Volkswagen Aktiengesellschaft Vorrichtung und Verfahren zur Anbindung einer mobilen Kameraeinrichtung
DE102014017599B4 (de) * 2014-11-27 2017-01-05 Elektrobit Automotive Gmbh Tragbare Vorrichtung zur Verwendung durch einen Fahrer eines Kraftfahrzeugs sowie Verfahren zur Verwendung der Vorrichtung
DE102015201723A1 (de) * 2015-02-02 2016-08-04 Robert Bosch Gmbh Fahrerassistenzsystem für ein Kraftfahrzeug
DE102015004553B4 (de) * 2015-04-08 2017-02-16 Audi Ag Verfahren zum Betrieb eines Fahrzeugsystems eines Kraftfahrzeugs
DE102015210118B4 (de) * 2015-06-02 2019-03-21 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Unterstützung des Ausparkens eines Fahrzeugs
DE102015216920A1 (de) 2015-09-03 2017-03-23 Robert Bosch Gmbh Verfahren und Vorrichtung zur Überwachung der Umgebung eines Fahrzeugs
DE102016205867A1 (de) * 2016-04-08 2017-10-12 Robert Bosch Gmbh Verfahren zur Bestimmung einer Pose eines wenigstens teilautomatisiert fahrenden Fahrzeugs mittels verschiedener Landmarkentypen
DE102016212181A1 (de) * 2016-07-05 2018-01-11 Volkswagen Aktiengesellschaft Verfahren zur Bestimmung von Längen- und/oder Größenverhältnissen eines Anhängers
DE102016214477A1 (de) * 2016-08-04 2018-02-08 Bayerische Motoren Werke Aktiengesellschaft Anordnung, Fortbewegungsmittel und Verfahren zur Definition einer Farbe in einem Fortbewegungsmittel
EP3293667A1 (de) * 2016-09-08 2018-03-14 KNORR-BREMSE Systeme für Nutzfahrzeuge GmbH Vorrichtung zur bereitstellung von fahrzeugumgebungsinformationen
DE102016125319A1 (de) * 2016-12-22 2018-06-28 Vorwerk & Co. Interholding Gmbh Verfahren zum Betrieb eines sich selbsttätig fortbewegenden Fahrzeugs
DE102017209910A1 (de) * 2017-06-13 2018-12-13 Continental Teves Ag & Co. Ohg Fahrzeuglokalisierung mittels eines im Fahrzeug befindlichen Mobiltelefons
FR3070332B1 (fr) * 2017-08-31 2021-01-01 Valeo Vision Procédé d’analyse du comportement de conduite d’un utilisateur d’un véhicule automobile
US11592813B2 (en) * 2018-12-17 2023-02-28 Robert Bosch Gmbh Method and controller for the situational transmission of surroundings information of a vehicle
DE102020213962A1 (de) * 2020-11-06 2022-05-12 Volkswagen Aktiengesellschaft Verfahren zum Vollführen eines Parkmanövers eines Kraftfahrzeugs auf einen Parkplatz sowie Vorrichtung, insbesondere Kraftfahrzeug hierfür

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004004320A1 (en) * 2002-07-01 2004-01-08 The Regents Of The University Of California Digital processing of video images
ITTO20030662A1 (it) * 2003-08-29 2005-02-28 Fiat Ricerche Disposizione di visualizzazione virtuale per un quadro
KR100548420B1 (ko) * 2003-11-13 2006-02-02 엘지전자 주식회사 이동통신 단말기를 이용한 사각지대 감시 시스템 및 방법
US20060232670A1 (en) * 2004-10-19 2006-10-19 Fu-Lai Chu Vehicle monitoring apparatus
JP2009060499A (ja) * 2007-09-03 2009-03-19 Sanyo Electric Co Ltd 運転支援システム及び連結車両
CN201197181Y (zh) * 2008-04-30 2009-02-18 肖宽新 一种汽车监控系统
DE102008034606A1 (de) 2008-07-25 2010-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung der Umgebung eines Fahrzeugs auf einer mobilen Einheit
FR2938774A1 (fr) * 2008-11-27 2010-05-28 Parrot Dispositif de pilotage d'un drone
DE102009020328A1 (de) 2009-05-07 2010-11-11 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Darstellung von unterschiedlich gut sichtbaren Objekten aus der Umgebung eines Fahrzeugs auf der Anzeige einer Anzeigevorrichtung
FR2957266B1 (fr) * 2010-03-11 2012-04-20 Parrot Procede et appareil de telecommande d'un drone, notamment d'un drone a voilure tournante.
CN102098497A (zh) * 2010-12-23 2011-06-15 史立锦 多用途安防监控系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None *
See also references of WO2013107550A1 *

Also Published As

Publication number Publication date
CN104054033A (zh) 2014-09-17
WO2013107550A1 (de) 2013-07-25
DE102012200721A1 (de) 2013-07-25

Similar Documents

Publication Publication Date Title
EP2805210A1 (de) Verfahren zum überwachen eines fahrzeugumfeldes
EP3834189B1 (de) Verfahren und steuervorrichtung zum warnen eines fahrers eines kraftfahrzeugs sowie kraftfahrzeug mit einer derartigen steuervorrichtung
EP3512739B1 (de) Verfahren zum bereitstellen einer rückspiegelansicht einer fahrzeugumgebung eines fahrzeugs
EP3517409B1 (de) Verfahren zur detektion von garagenparkplätzen
DE102018114285A1 (de) Einleitung von ferngesteuertem parken eines fahrzeugs über eine mobile vorrichtung
DE102010034139A1 (de) Verfahren zur Unterstützung eines Parkvorgangs eines Kraftfahrzeugs, Fahrerassistenzsystem und Kraftfahrzeug
DE102010030463A1 (de) Verfahren zur Unterstützung eines Fahrers eines Kraftfahrzeugs
DE102008028303A1 (de) Anzeigesystem und Programm
EP3195186A1 (de) Verfahren und vorrichtung zum überwachen eines automatischen parkens eines fahrzeugs
DE102018120517A1 (de) Erfassen von Spurenbedingungen in adaptiven Geschwindigkeitsregelsystemen
DE102014222190A1 (de) Vorrichtung und Verfahren zur Anbindung einer mobilen Kameraeinrichtung
EP3167427A1 (de) Zusammenfügen von teilbildern zu einem abbild einer umgebung eines fortbewegungsmittels
DE102019123250A1 (de) Verfahren und vorrichtung zum unterstützen von ferngesteuerten fahrzeugmanövern und einer fergesteuerten fussgängererfassung
DE102012208288A1 (de) Verfahren zur Darstellung einer Fahrzeugumgebung auf einer Anzeige und Fahrassistenzsystem
DE102016002232B4 (de) Verfahren zum Betrieb eines Kraftfahrzeugs
DE102016208214A1 (de) Verfahren und Vorrichtung zur Unterstützung eines Manövriervorganges eines Fahrzeuges
DE102015214802A1 (de) Verfahren und Vorrichtung zum Leiten eines Fahrzeugs
DE102010033786A1 (de) Verfahren zur Erfassung und Anzeige seitlich neben und seitlich hinter einem Fahrzeug befindlicher Bereiche und Fahrzeug mit mehreren Bilderfassungseinheiten zur Erfassung seitlich neben und seitlich hinter dem Fahrzeug befindlicher Bereiche
WO2018206310A1 (de) Verfahren zum automatisierten parken eines kraftfahrzeugs
DE102019102201B4 (de) Verfahren und System zum Durchführen einer dynamischen Bandbreitenanpassung zwischenFahrzeugsensoren
DE112014005007T5 (de) Informationsmeldevorrichtung, Informationsmeldesystem, Informationsmeldeverfahren und Informationsmeldeprogramm
EP2528050B1 (de) Verfahren und Vorrichtung zur bildlichen Erfassung und Visualisierung von Umgebungsbedingungen an einem von einem Nutzfahrzeug anzufahrenden Hindernis
DE102016210088B3 (de) Verfahren und Vorrichtung zur Darstellung einer Umgebung eines Kraftfahrzeugs
DE102016217037B4 (de) Verfahren zum Betreiben einer Anzeigeeinrichtung eines Kraftfahrzeugs mit einer digitalen Anzeigefläche und Kraftfahrzeug
DE102020213862B4 (de) Verfahren, Umgebungserfassungssystem und Computerprogramm zum Bereitstellen von Umgebungsdaten

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20140819

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAX Request for extension of the european patent (deleted)
17Q First examination report despatched

Effective date: 20170918

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20180130