DE102019133976A1

DE102019133976A1 - Means of locomotion, device and method for assisting a user of a means of locomotion when opening a door

Info

Publication number: DE102019133976A1
Application number: DE102019133976.6A
Authority: DE
Inventors: Andreas Weber; Thomas Tille
Original assignee: Bayerische Motoren Werke AG
Current assignee: Bayerische Motoren Werke AG
Priority date: 2019-12-11
Filing date: 2019-12-11
Publication date: 2021-06-17

Abstract

Es werden eine Vorrichtung, ein Fortbewegungsmittel (10) sowie ein Verfahren zur Unterstützung eines Anwenders (1) eines Fortbewegungsmittels (10) vorgeschlagen. Das Verfahren umfasst die Schritte: Ermitteln eines bevorstehenden Öffnens einer Tür (2) des Fortbewegungsmittels (10) und im Ansprechen darauf Darstellen eines Livestreams in der Tür (2) repräsentierend einen Umgebungsbereich außerhalb der Tür (2).A device, a means of locomotion (10) and a method for supporting a user (1) of a means of locomotion (10) are proposed. The method comprises the steps of: determining an imminent opening of a door (2) of the means of locomotion (10) and, in response to this, displaying a live stream in the door (2) representing a surrounding area outside the door (2).

Description

Die vorliegende Erfindung betrifft ein Fortbewegungsmittel, eine Vorrichtung sowie ein Verfahren zur Unterstützung eines Anwenders eines Fortbewegungsmittels beim Öffnen einer Tür. Insbesondere betrifft die vorliegende Erfindung eine bestmögliche Vorbereitung eines Anwenders auf diejenige Situation, welche sich ihm nach dem Öffnen der Tür darstellen könnte bzw., welche es zu vermeiden gilt.The present invention relates to a means of locomotion, a device and a method for assisting a user of a means of locomotion when opening a door. In particular, the present invention relates to the best possible preparation of a user for the situation which could arise after opening the door or which should be avoided.

Im Stand der Technik sind unterschiedliche Assistenzsysteme für die Öffnung von Türen von Fortbewegungsmitteln bekannt. DE 10 2017 113 596 A1 offenbart ein Verfahren zum Erkennen von Gefahren in Erwartung sich öffnender Fahrzeugtüren, bei welchen ein Alarm ertönt, wenn ein Insasse trotz Kollisionsgefahr versucht, eine Tür eines Fortbewegungsmittels zu öffnen. Grundsätzlich können Alarme auch Anzeigen auf
Anzeigevorrichtungen/Monitoren umfassen.Various assistance systems for opening doors of means of locomotion are known in the prior art. DE 10 2017 113 596 A1 discloses a method for recognizing hazards in anticipation of opening vehicle doors, in which an alarm sounds if an occupant tries to open a door of a means of transport despite the risk of a collision. Basically, alarms can also display ads
Include display devices / monitors.

Ausgehend vom vorgenannten Stand der Technik ist es eine Aufgabe der vorliegenden Erfindung, dem Anwender eine verbesserte Informationslage über die Situation, welche sich vor der Tür bzw. außerhalb des Fahrzeugs darstellt, zu visualisieren.Based on the aforementioned prior art, it is an object of the present invention to visualize the user with an improved information situation about the situation that is in front of the door or outside of the vehicle.

Die vorstehend genannte Aufgabe wird erfindungsgemäß durch ein Verfahren zur Unterstützung eines Anwenders eines Fortbewegungsmittels gelöst. Der Anwender kann insbesondere ein Insasse des Fortbewegungsmittels sein. Das Fortbewegungsmittel kann ein PKW, Transporter, LKW, Luft- und/oder Wasserfahrzeug sein. In einem ersten Schritt wird ein bevorstehendes Öffnen der Tür des Fortbewegungsmittels ermittelt. Dies kann beispielsweise voraussetzen, dass sich das Fortbewegungsmittel in einem geparkten Zustand befindet oder zumindest nicht schneller als eine geringe Reisegeschwindigkeit fährt. Alternativ oder zusätzlich kann ein Ergreifen und/oder Erblicken eines Elementes innerhalb des Fortbewegungsmittels erkannt werden, anhand dessen der Wunsch des Anwenders, die Tür zu öffnen, ermittelt werden kann. Dieses Element kann beispielsweise ein Türgriff und/oder ein Türöffner (Türöffnungshebel) des Fortbewegungsmittels sein. Erfindungsgemäß kann alternativ oder zusätzlich jedoch auch ein Wunsch des Anwenders ermittelt werden, sich erfindungsgemäß über die Situation im Türöffnungsbereich bzw. außerhalb des Fortbewegungsmittels zu informieren. Hierzu kann der Anwender eine entsprechende Taste und/oder einen Touchscreen und/oder ein Sprachkommando verwenden, um die erfindungsgemäße Anzeige, welche nachfolgend beschrieben wird, zu veranlassen. Im Ansprechen auf eine oder eine beliebige Kombination der vorgenannten sensorisch ermittelbaren Ereignisse repräsentierend den bevorstehenden Öffnungsvorgang, wird ein Livestream in der Tür dargestellt, welcher einen Umgebungsbereich außerhalb der Tür repräsentiert. Als „Livestream“ wird nachfolgend eine Bewegtbildwiedergabe bezeichnet, welche mit geringstmöglicher Verzögerung die außerhalb der Tür bestehende Situation auf einer Anzeigeeinrichtung in der Tür wiedergibt. Die Darstellung des Livestreams erfolgt mit anderen Worten also auf einer Innenseite der Tür oder allgemein gesprochen auf einer fest mit der Tür verbundenen Oberfläche, welche mit der Tür im Zuge des Öffnungsvorgangs verschwenkt werden kann. Über den Livestream wird der Anwender also unverzüglich mit Bildmaterial bzw. Bewegtbildmaterial versorgt, welches ihm potentielle Gefahren und/oder Gefährdungen in Verbindung mit dem Aufschwenken der Tür des Fortbewegungsmittels veranschaulicht.The above-mentioned object is achieved according to the invention by a method for supporting a user of a means of locomotion. The user can in particular be an occupant of the means of locomotion. The means of locomotion can be a car, van, truck, aircraft and / or watercraft. In a first step, an imminent opening of the door of the means of transport is determined. This can presuppose, for example, that the means of transport is in a parked state or at least not traveling faster than a low cruising speed. Alternatively or additionally, grasping and / or looking at an element within the means of locomotion can be recognized, on the basis of which the user's wish to open the door can be determined. This element can be, for example, a door handle and / or a door opener (door opening lever) of the means of locomotion. According to the invention, however, a wish of the user can alternatively or additionally be determined to obtain information according to the invention about the situation in the door opening area or outside of the means of transport. For this purpose, the user can use a corresponding key and / or a touch screen and / or a voice command in order to initiate the display according to the invention, which is described below. In response to one or any combination of the aforementioned events that can be determined by sensors, representing the impending opening process, a live stream is displayed in the door, which represents a surrounding area outside the door. In the following, a “live stream” is a moving image reproduction which reproduces the situation outside the door on a display device in the door with the least possible delay. In other words, the live stream is displayed on the inside of the door or, generally speaking, on a surface that is firmly connected to the door and which can be pivoted with the door in the course of the opening process. Via the live stream, the user is immediately supplied with image material or moving image material, which illustrates potential dangers and / or dangers in connection with the opening of the door of the means of transport.

Die Unteransprüche zeigen bevorzugte Weiterbildungen der Erfindung.The subclaims show preferred developments of the invention.

Die Anzeigeeinrichtung, welche als Projektionseinrichtung und/oder Bildschirm und/oder Touchscreen ausgestaltet sein kann, kann sich in einer Türverkleidung der Tür befinden. Innerhalb der Türverkleidung kann die Anzeigeeinrichtung fest (insb. unbeweglich) oder schwenkbar (insb. ausklappbar) angeordnet sein. Die Anzeigeeinrichtung wird also mittels einer in der Tür vorhandenen Spannungsquelle mit Energie und über eine Datenschnittstelle (drahtgebunden oder drahtlos) mit Informationen repräsentierend den Livestream versorgt. Somit kann der Anwender, der zum Öffnen der Tür üblicherweise ohnehin in die Türinnenverkleidung greift und sein Augenmerk in diesem Zuge auf dieselbe richtet, unwillkürlich den Livestream erfassen und nachteilige Folgen des Öffnens der Tür vermeiden.The display device, which can be configured as a projection device and / or screen and / or touchscreen, can be located in a door panel of the door. The display device can be arranged in a fixed (especially immovable) or pivotable (especially fold-out) manner within the door lining. The display device is thus supplied with energy by means of a voltage source present in the door and with information representing the live stream via a data interface (wired or wireless). Thus, the user, who usually reaches into the inside door trim to open the door anyway and directs his attention to the same, can involuntarily record the live stream and avoid the adverse consequences of opening the door.

Der Umgebungsbereich, welcher im Livestream repräsentiert ist, kann einen Boden unmittelbar vor der Tür repräsentieren. In diesem Bereich, welcher auch als „Trittbereich“ bezeichnet werden könnte, können sich unterschiedliche Hindernisse befinden, welche zu Verschmutzungen/Beschädigungen oder anderen nachteiligen Folgen für den Anwender und/oder sein Schuhwerk führen können. Durch die Darstellung des Bodenbereiches, in welchem sich insbesondere auch eine Pfütze befinden kann, kann der Anwender seine Schritte im Voraus planen oder sogar eine andere Fahrzeugtür für den Ausstieg wählen. Alternativ oder zusätzlich kann der Umgebungsbereich einen herannahenden Verkehrsteilnehmer umfassen, welcher beispielsweise als rückwärtig herannahender Radfahrer, Fußgänger, Skateboardfahrer, o.ä., verkörpert sein kann. Durch die Ablichtung der vorgenannten Informationen und Darstellung im Livestream kann der Anwender eine Kollision mit dem herannahenden Verkehrsteilnehmer vermeiden. Die Darstellung des Livestreams vermittelt dem Anwender gegenüber ultraschall- und/oder radarbasierten Verfahren auch eine bestmögliche Informationslage über die Betriebsbereitschaft der verwendeten Sensorik. Ist der Sensor verschmutzt, sieht der Anwender diesen Umstand, anstatt mit einer Warnung konfrontiert zu werden, welche ihn verunsichert und die Akzeptanz einer derart ausgestalteten Vorrichtung verringert.The surrounding area, which is represented in the live stream, can represent a floor directly in front of the door. In this area, which could also be referred to as the “step area”, there can be various obstacles which can lead to soiling / damage or other adverse consequences for the user and / or his footwear. By showing the floor area, in which there can be a puddle in particular, the user can plan his steps in advance or even choose a different vehicle door for getting out of the vehicle. Alternatively or additionally, the surrounding area can include an approaching road user who can be embodied, for example, as a cyclist, pedestrian, skateboarder, or the like approaching backwards. By copying the aforementioned information and displaying it in the live stream, the user can avoid a collision with the approaching road user. The presentation of the live stream also provides the user with one compared to ultrasound and / or radar-based methods Best possible information about the operational readiness of the sensors used. If the sensor is dirty, the user sees this fact instead of being confronted with a warning which unsettles him and reduces the acceptance of a device designed in this way.

Die Ermittlung der bevorstehenden Öffnung der Tür kann insbesondere aufgrund einer Annäherung des Anwenders an ein vordefiniertes Sensorelement der Tür ermittelt werden. Beispielsweise kann hier eine kapazitive Erkennung des Ergreifens eines Türgriffes (Türöffnungshebel, Touchscreen, o.ä.) verwendet werden, um den Livestream zu starten.The determination of the imminent opening of the door can in particular be determined on the basis of the user approaching a predefined sensor element of the door. For example, a capacitive detection of grasping a door handle (door opening lever, touchscreen, etc.) can be used to start the live stream.

Optional kann das erfindungsgemäße Verfahren derart weitergebildet werden, dass eine automatische Ermittlung und Markierung eines im Livestream repräsentierten Gegenstandes erfolgt. Mit anderen Worten kann ein Hindernis im Bodenbereich und/oder ein herannahender Verkehrsteilnehmer und/oder ein feststehendes Hindernis, mit welchem die Tür des Fortbewegungsmittels im Falle eines Öffnens kollidieren könnte, sensorisch ermittelt werden. In Abhängigkeit dieser Erkennung wird im Livestream die Ablichtung des Gegenstandes/Verkehrsteilnehmers gegenüber anderen Elementen innerhalb des Livestreams hervorgehoben. Beispielsweise können Umrandungen des Gegenstandes eine jeweilige Abgrenzung des Gegenstandes gegenüber seiner Umgebung erleichtern. Der Anwender kann durch diese Ausgestaltung noch besser darüber informiert werden, welche Gefahren sich durch das Öffnen der Tür potentiell ergeben und eher geeignete Maßnahmen zur Vermeidung von nachteiligen Folgen ergreifen.Optionally, the method according to the invention can be developed in such a way that an object represented in the live stream is automatically determined and marked. In other words, an obstacle in the floor area and / or an approaching road user and / or a stationary obstacle with which the door of the means of transport could collide in the event of opening can be determined by sensors. Depending on this detection, the image of the object / road user is highlighted in the live stream compared to other elements within the live stream. For example, borders of the object can facilitate a respective delimitation of the object from its surroundings. With this configuration, the user can be better informed about the potential dangers that may result from opening the door and can take more suitable measures to avoid adverse consequences.

Optional kann eine Gefährdungsstufe für das momentane Öffnen der Tür automatisch ermittelt werden. Mit anderen Worten kann ermittelt werden, wie problematisch bzw. akut gefährdend das Öffnen der Tür im jeweiligen Augenblick wäre. Die Gefährdungsstufe kann hierbei automatisch aktualisiert werden. Anschließend bzw. zeitgleich wird die Gefährdungsstufe in der Darstellung des Livestreams gekennzeichnet. Insbesondere können bekannte farbliche Kodierungen der Gefährdungsstufe durch Einfärbung von Teilen der verwendeten Anzeigeeinrichtung (rot: höchste Gefahrenstufe, gelb: Obacht geboten, grün: keine Gefährdung erkennbar) vorgenommen werden, um die Informationslage des Anwenders rasch und umfassend zu verbessern.Optionally, a risk level for the momentary opening of the door can be determined automatically. In other words, it can be determined how problematic or acutely dangerous opening the door would be at the moment. The hazard level can be updated automatically. Subsequently or at the same time, the risk level is marked in the presentation of the live stream. In particular, known color coding of the risk level can be made by coloring parts of the display device used (red: highest risk level, yellow: caution required, green: no risk recognizable) in order to quickly and comprehensively improve the user's information.

Die Darstellung des erfindungsgemäßen Livestreams kann optional manuell durch die Fond-Passagiere aktiviert werden. Optional können auch eine Kameraperspektive und/oder zusätzliche Sensordaten vom Fondpassagier gewählt und zur Anzeige gebracht werden.The presentation of the live stream according to the invention can optionally be activated manually by the rear passengers. Optionally, a camera perspective and / or additional sensor data can also be selected by the rear passenger and displayed.

Gemäß einem zweiten Aspekt der vorliegenden Erfindung wird eine Vorrichtung zur Unterstützung eines Anwenders eines Fortbewegungsmittels vorgeschlagen. Die Vorrichtung kann auch als Datenverarbeitungseinrichtung verstanden werden, welche insbesondere im Automotivebereich als Steuergerät ausgeführt sein kann. Die Vorrichtung weist einen Dateneingang, einen Datenausgang und eine Auswerteeinheit auf. Der Dateneingang kann zur Entgegennahme sensorischer Signale sowie von Anwendereingaben eingerichtet sein. Hierzu kann eine Anwenderschnittstelle mit dem Dateneingang informationstechnisch verbunden sein. Die Auswerteeinheit kann als programmierbarer Prozessor, Mikrocontroller, o.ä., ausgestaltet sein. Mittels des Dateneingangs ist die Auswerteeinheit eingerichtet, ein bevorstehendes Öffnen einer Tür des Fortbewegungsmittels zu ermitteln. Mittels des Datenausgangs ist die Auswerteeinheit eingerichtet, einen Livestream in der Fahrzeugtür darzustellen, welcher einen Umgebungsbereich außerhalb der Tür, insbesondere vor der Tür, repräsentiert. Auf diese Weise ist die erfindungsgemäße Vorrichtung eingerichtet, die Merkmale, Merkmalskombinationen und die sich aus diesen ergebenden Vorteile des erfindungsgemäßen Verfahrens derart ersichtlich in entsprechender Weise zu verwirklich, so dass zur Vermeidung von Wiederholungen auf die obigen Ausführungen verwiesen wird.According to a second aspect of the present invention, a device for supporting a user of a means of locomotion is proposed. The device can also be understood as a data processing device which, in particular in the automotive sector, can be designed as a control device. The device has a data input, a data output and an evaluation unit. The data input can be set up to receive sensory signals as well as user inputs. For this purpose, a user interface can be connected to the data input using information technology. The evaluation unit can be designed as a programmable processor, microcontroller, or the like. The evaluation unit is set up by means of the data input to determine an imminent opening of a door of the means of locomotion. By means of the data output, the evaluation unit is set up to display a live stream in the vehicle door, which represents a surrounding area outside the door, in particular in front of the door. In this way, the device according to the invention is set up to implement the features, feature combinations and the advantages of the method according to the invention resulting therefrom in a corresponding manner, so that reference is made to the above statements to avoid repetition.

Gemäß einem dritten Aspekt der vorliegenden Erfindung wird ein Fortbewegungsmittel vorgeschlagen, welches eine Anzeigeeinrichtung in einer Türinnenverkleidung der Tür aufweist, welche mit einer erfindungsgemäßen Vorrichtung zur Ausführung des erfindungsgemäßen Verfahrens informationstechnisch verknüpft ist. Der Datenausgang der Vorrichtung ist hierbei informationstechnisch mit der Anzeigeeinrichtung in der Türinnenverkleidung verbunden. Das Fortbewegungsmittel kann als PKW, Transporter, LKW, Wasser- und/oder Luftfahrzeug ausgestaltet sein. Auch bezüglich des Fortbewegungsmittels wird für weiterführende Offenbarung auf die obigen Ausführungen verwiesen, die entsprechend gelten.According to a third aspect of the present invention, a means of locomotion is proposed which has a display device in a door inner lining of the door, which is linked in terms of information technology to a device according to the invention for performing the method according to the invention. The data output of the device is connected in terms of information technology to the display device in the inside door panel. The means of locomotion can be designed as a car, van, truck, watercraft and / or aircraft. With regard to the means of locomotion, reference is made to the above statements for further disclosure, which apply accordingly.

Nachfolgend werden mögliche Ausgestaltungen der vorliegenden Erfindung ohne einschränkende Wirkung beispielhaft beschrieben. Die vorliegende Erfindung ist auf Fond-Fahrzeugtüren bzw. Fahrzeugtüren in einer hinteren Sitzreihe anwendbar. Dort befindliche Insassen haben üblicherweise nur eingeschränkte Möglichkeiten, annähernd den rückwärtigen Verkehr (z.B. Radfahrer oder im Öffnungsbereich der Türe befindliche Gegenstände (z.B. Blumenkübel, Laternenmasten, etc.) sowie Hindernisse (Pfützen, Verunreinigungen)) zu erkennen. Dies ist insbesondere der Tatsache geschuldet, dass für die hinteren Sitzreihen keine Außenspiegel oder entsprechende Darstellungen auf Bildschirmen zur Verfügung stehen. Insbesondere wird den hinteren Sitzreihen im Stand der Technik keine pro-aktive Warnung ausgegeben, wie sie beispielsweise für die erste Sitzreihe, insbesondere den Fahrer, im Falle herannahenden Querverkehrs oder zur Totwinkelüberwachung, bekannt sind. Durch die grundsätzlich bereits in Fahrzeugen des Standes der Technik bereitgestellte Sensorik sowie die Kameras könnte ein in den Türen angeordnetes Display eine entsprechende Seitenansicht/Rückansicht anzeigen und der jeweilige Insasse sich eigenständig ein Bild über die Situation vor der Tür machen, bevor er die Tür öffnet. Im Falle einer drohenden Kollision mit einem Fahrzeug oder anderweitigen Gegenstand bzw. Erkennung anderer Hindernisse kann eine Mitteilung an den Anwender innerhalb des Livestreams oder dem Livestream überlagert ergehen, um zusätzlich die Informationslage des Anwenders zu verbessern. Ein Trigger für die Darstellung des Livestreams könnte das Entriegeln der jeweiligen Türe sein oder eine Annäherungssensorik, welche die Hand des Anwenders (z.B. im Bereich der Griffschale) detektiert. Zusätzlich kann der Anwender die Möglichkeit nutzen, jederzeit durch Betätigung einer vordefinierten Bedieneinrichtung (z.B. eine Touchfläche auf einem Display), die Umgebung des Fahrzeugs (z.B. in einer Vogelperspektive) und/oder in Echtzeit anzeigen zu lassen. Auch können Abstandsmarkierungen und/oder Trajektorien der umliegenden Gegenstände in die Darstellung des Livestreams eingebunden werden.Possible embodiments of the present invention are described below by way of example without restrictive effect. The present invention is applicable to rear vehicle doors or vehicle doors in a rear row of seats. Inmates located there usually have only limited opportunities to approximately recognize the traffic behind (e.g. cyclists or objects in the opening area of the door (e.g. flower pots, lamp posts, etc.) as well as obstacles (puddles, dirt)). This is due in particular to the fact that no exterior mirrors or corresponding displays on screens are available for the rear rows of seats. In particular, the rear one Rows of seats in the prior art do not issue a proactive warning, as is known, for example, for the first row of seats, in particular the driver, in the case of approaching cross traffic or for blind spot monitoring. Thanks to the sensors and the cameras, which are basically already provided in vehicles of the prior art, a display arranged in the doors could show a corresponding side view / rear view and the respective occupant could independently get an idea of the situation in front of the door before opening the door. In the event of an impending collision with a vehicle or other object or detection of other obstacles, a message to the user can be superimposed within the live stream or the live stream in order to additionally improve the information situation for the user. A trigger for the presentation of the live stream could be the unlocking of the respective door or a proximity sensor which detects the hand of the user (eg in the area of the handle). In addition, the user can use the option of displaying the surroundings of the vehicle (eg in a bird's eye view) and / or in real time at any time by actuating a predefined operating device (eg a touch surface on a display). Distance markings and / or trajectories of the surrounding objects can also be incorporated into the display of the live stream.

Weitere Einzelheiten, Merkmale und Vorteile der Erfindung ergeben sich aus der nachfolgenden Beschreibung und den Figuren. Es zeigen:

1 eine perspektivische Darstellung einer Situation, in welcher ein erfindungsgemäß ausgestaltetes Fortbewegungsmittel einen Anwender über Gefahren beim Öffnen einer Tür informiert;
2 eine perspektivische Darstellung eines erfindungsgemäß verwendbaren, in einer Türinnenverkleidung angeordneten Displays, in welchem eine Totwinkelansicht dargestellt wird;
3 eine perspektivische Darstellung eines erfindungsgemäß verwendbaren, in einer Türinnenverkleidung angeordneten Displays, in welchem eine durch Trajektorienmarkierungen angereicherte rückwärtige Darstellung angezeigt wird; und
4 ein Flussdiagramm veranschaulichend Schritte eines Ausführungsbeispiels eines erfindungsgemäßen Verfahrens.

Further details, features and advantages of the invention emerge from the following description and the figures. Show it:

1 a perspective view of a situation in which a means of locomotion designed according to the invention informs a user of the dangers when opening a door;
2 a perspective view of a display which can be used according to the invention and is arranged in an inner door panel, in which a blind spot view is shown;
3 a perspective representation of a display which can be used according to the invention and is arranged in a door lining, in which a rear representation enriched by trajectory markings is displayed; and
4th a flowchart illustrating steps of an exemplary embodiment of a method according to the invention.

1 zeigt einen PKW 10 als Ausführungsbeispiel eines erfindungsgemäßen Fortbewegungsmittels, in welchem ein Anwender 1 eine Tür 2 öffnet. Im Einstiegsbereich der Tür 2 befindet sich eine Pfütze 9 als Hindernis, welche mittels eines optischen Sensors 11 ebenso wie ein rückwärtig herannahender Radfahrer 12 sensorisch erfasst wird. Über eine Datenleitung ist der optische Sensor 11 mit einem Dateneingang 4a eines elektronischen Steuergerätes 4 als Auswerteeinheit informationstechnisch verbunden. Der Dateneingang 4a ist überdies mit einem in einem Türöffnungshebel 7 befindlichen kapazitiven Sensor 8 informationstechnisch verbunden, über welchen der Wunsch des Anwenders 1 zum Öffnen der Tür 2 automatisch erkannt wurde. Mittels eines Datenausgangs 4b ist das Steuergerät 4 eingerichtet, eine Darstellung eines Livestreams an einen Bildschirm 3 als Anzeigeeinrichtung zu senden, welcher sich in der Türinnenverkleidung der Tür 2 befindet. Insbesondere ist dieser Bildschirm 3 in räumlicher Nähe zum kapazitiven Sensor 8 angeordnet, so dass der Anwender 1 unwillkürlich die auf dem Bildschirm 3 dargestellten Informationen erfasst, wenn er seine Hand in Richtung des Sensors 8 führt, um die Tür 2 zu öffnen. Weiter sind am Heck des PKWs 10 vier Ultraschallsensoren 5 angeordnet, welche über einen Bus 6 mit dem Dateneingang 4a des elektronischen Steuergerätes 4 verbunden sind. Mittels der Ultraschallsensoren kann eine Überwachung der rückwärtigen Umgebung des PKWs 10 erfolgen und die hierbei ermittelten Informationen können in die Darstellung des Livestreams auf dem Bildschirm 3 einfließen. 1 shows a car 10 as an embodiment of a means of locomotion according to the invention, in which a user 1 a door 2 opens. In the entry area of the door 2 there is a puddle 9 as an obstacle, which by means of an optical sensor 11 just like a cyclist approaching backwards 12th is sensed. The optical sensor is via a data line 11 with a data input 4a an electronic control unit 4th information technology connected as an evaluation unit. The data input 4a is also with one in a door opening lever 7th located capacitive sensor 8th connected in terms of information technology, via which the request of the user 1 to open the door 2 was automatically recognized. By means of a data output 4b is the control unit 4th set up a representation of a live stream on a screen 3 to send as a display device, which is located in the inside door panel of the door 2 is located. In particular, this screen is 3 in close proximity to the capacitive sensor 8th arranged so that the user 1 involuntarily those on the screen 3 captured information when he moves his hand towards the sensor 8th leads to the door 2 to open. Next are at the rear of the car 10 four ultrasonic sensors 5 arranged which via a bus 6th with the data input 4a of the electronic control unit 4th are connected. The rear surroundings of the car can be monitored by means of the ultrasonic sensors 10 and the information determined in this way can be used in the presentation of the live stream on the screen 3 flow in.

2 zeigt eine perspektivische Detailansicht einer Türinnenverkleidung der Tür 2 des in 1 dargestellten PKWs, welche einen Bildschirm 3 aufweist. Der Bildschirm 3 zeigt einen Livestream 13 einer seitlichen Rücksicht (Totwinkelbereich) des Ego-Fahrzeugs. Ein Warnsymbol 15, welches dem Livestream 13 überlagert ist, warnt den Insassen vor dem in 1 dargestellten Radfahrer 12, dessen Abbild 12' ebenfalls im Livestream 13 enthalten ist. 2 shows a perspective detailed view of a door inner paneling of the door 2 of the in 1 depicted cars, which have a screen 3 having. The screen 3 shows a live stream 13th a lateral rear view (blind spot area) of the ego vehicle. A warning symbol 15th , which the livestream 13th is overlaid, warns the occupant of the in 1 depicted cyclists 12th , its image 12 ' also in the live stream 13th is included.

3 zeigt die in 2 dargestellte perspektivische Detailansicht nach einem Wechseln der Umgebungsbedingungen. Aufgrund eines Rangiervorgangs, während dessen keine Öffnungsabsicht der Tür erkennbar ist, wird eine rückwärtige Ansicht des Umgebungsbereiches auf dem Bildschirm 3 dargestellt. Auch diese Darstellung erfolgt als Livestream 13. Um den Anwender beim Rangieren zu unterstützen, werden Hilfslinien 14 zur Kennzeichnung aktueller Trajektorien dem Livestream 13 überlagert. Dies ist insbesondere dann ergonomisch, wenn die Rangierfahrt einen Blick aus dem Fenster des Fortbewegungsmittels erfordert, da der Anwender sich in diesem Fall nicht in Richtung des zentralen Informationsdisplay oder des Kombiinstrumentes umzudrehen braucht, um die Bilder der Kamera zu erfassen. 3 shows the in 2 Detailed perspective view shown after a change in the environmental conditions. Due to a maneuvering process during which no intention to open the door can be recognized, a rear view of the surrounding area is shown on the screen 3 shown. This is also shown as a live stream 13th . Auxiliary lines are used to support the user when maneuvering 14th to identify current trajectories in the live stream 13th superimposed. This is particularly ergonomic when the maneuvering requires a look out of the window of the means of locomotion, since in this case the user does not need to turn in the direction of the central information display or the instrument cluster in order to capture the images from the camera.

4 zeigt Schritte eines Ausführungsbeispiels eines erfindungsgemäßen Verfahrens zur Unterstützung eines Anwenders eines Fortbewegungsmittels beim Öffnen einer Tür. In Schritt 100 wird ein bevorstehendes Öffnen einer Tür des Fortbewegungsmittels sensorisch ermittelt. Hierzu können kapazitive Sensoren oder der explizit mittels einer Anwenderschnittstelle geäußerte Wunsch des Anwenders zum Öffnen der Tür verwendet werden. In Schritt 200 wird im Ansprechen darauf eine Darstellung eines Livestreams in der Tür veranlasst, welcher einen Umgebungsbereich außerhalb der Tür repräsentiert. Dies erfolgt im Ansprechen auf eine sensorische Erkennung eines Verkehrsteilnehmers, welcher sich einem Kollisionsbereich der Tür annähert. In Schritt 300 wird fortwährend der Livestream dargestellt. In Schritt 400 wird eine Gefährdungsstufe für das Öffnen der Tür automatisch sensorgestützt ermittelt. In Schritt 500 wird die Gefährdungsstufe in der Darstellung des Livestreams gekennzeichnet und farblich codiert. Im Falle einer hohen Gefährdungsstufe kann zusätzlich eine akustische Warnung ausgegeben werden, wie dies bereits im Stand der Technik bekannt ist. In Schritt 600 wird überdies der herannahende Verkehrsteilnehmer sensorisch geortet und seine Repräsentation im Livestream optisch markiert, um dem Anwender die Interpretation des Livestreams zu erleichtern. 4th shows steps of an exemplary embodiment of a method according to the invention for supporting a user of a means of locomotion when opening a door. In step 100 an imminent opening of a door of the means of locomotion is determined by sensors. For this purpose, capacitive sensors or the explicitly by means of a User interface expressed wish of the user to open the door can be used. In step 200 In response to this, a display of a live stream is initiated in the door, which represents a surrounding area outside the door. This takes place in response to a sensory detection of a road user who is approaching a collision area of the door. In step 300 the live stream is continuously displayed. In step 400 a risk level for opening the door is automatically determined with the help of sensors. In step 500 the level of risk is identified and color-coded in the presentation of the live stream. In the case of a high risk level, an acoustic warning can also be output, as is already known in the prior art. In step 600 In addition, the approaching road user is located using sensors and their representation in the live stream is optically marked to make it easier for the user to interpret the live stream.

Mittels der vorliegenden Erfindung kann einem Anwender eine bestmögliche Informationslage über Hindernisse oder Unwägbarkeiten, welche sich nach dem Öffnen der Tür darstellen, verbessert werden. Insbesondere können Schlamm, Pfützen, Randsteine oder starkes Gefälle, Fremdkörper, Verschmutzungen, Feuchtigkeit oder Glatteis sensorisch ermittelt und im Livestream dargestellt, insbesondere markiert, werden.By means of the present invention, the best possible information situation about obstacles or imponderables that arise after opening the door can be improved for a user. In particular, mud, puddles, curbs or steep inclines, foreign bodies, dirt, moisture or black ice can be determined by sensors and displayed, in particular marked, in the live stream.

BezugszeichenlisteList of reference symbols

11: Anwenderuser
22: Türdoor
33: Bildschirmscreen
44th: elektronisches Steuergerätelectronic control unit
4a4a: DateneingangData input
4b4b: DatenausgangData output
55: UltraschallsensorenUltrasonic sensors
66th: Bus-LeitungBus line
77th: TüröffnungshebelDoor opening lever
88th: kapazitiver Sensorcapacitive sensor
99: Pfützepuddle
1010: PKWCar
1111: optischer Sensoroptical sensor
1212th: RadfahrerCyclist
12'12 ': optische Repräsentation des Radfahrersoptical representation of the cyclist
1313th: LivestreamLivestream
1414th: HilfslinieAuxiliary line
1515th: WarnsymbolWarning symbol
100 bis 600100 to 600: VerfahrensschritteProcedural steps

ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturPatent literature cited

DE 102017113596 A1 [0002]

Claims

Method for supporting a user (1) of a means of locomotion (10) comprising the steps: - Determination (100) of an imminent opening of a door (2) of the means of locomotion (10) and in response to this - Displaying (300) a live stream (13) in the door (2) representing a surrounding area outside the door (2).

Procedure according to Claim 1 , the display being carried out on a display device (3) which is fastened in an inner door panel of the door (2).

Procedure according to Claim 1 or 2 , wherein the surrounding area comprises - a floor directly in front of the door (2) and / or - an approaching road user (12).

A method according to any preceding claim further comprising - Starting (200) the presentation of the live stream in response to a sensory recognition - A road user (12) and / or - An obstacle (9) located on the floor directly in front of the door (2) of the means of locomotion (10).

Method according to one of the preceding claims, wherein the imminent opening of the door (2) is determined on the basis of the user (1) approaching a predefined element of the door (2).

A method according to any one of the preceding claims further comprising: - automatic determination and marking (600) of an object represented in the live stream.

Method according to one of the preceding claims, further comprising: - Determining (400) a risk level for opening the door (2) and - Identify (500) the risk level in the presentation of the live stream.

Device for assisting a user of a means of locomotion (10) comprising: - a data input (4a), - An evaluation unit (4) and - A data output (4b), the evaluation unit (4) being set up, - To determine in connection with the data input (4a) an imminent opening of a door (2) of the means of locomotion (10) and in response to this - Using the data output (4b) to display a live stream in the door (2) representing an area outside the door (2).

Device according to Claim 8 , which is set up, a method according to one of the preceding Claims 1 to 7th to execute.

Means of locomotion comprising a display device (3) in a door inner lining of the door (2) and a device according to one of the preceding Claims 8 or 9 , wherein the data output (4b) of the device is connected to the display device (3) in terms of information technology.