DE102013211005A1

DE102013211005A1 - A method for determining a condition of a vehicle after use of the vehicle and corresponding system

Info

Publication number: DE102013211005A1
Application number: DE102013211005.7A
Authority: DE
Inventors: Young-Jae Cho; Maximilian Graf; Dirk Kaule; Klaas Klasing; Dominik Schnieders
Original assignee: Bayerische Motoren Werke AG
Current assignee: Bayerische Motoren Werke AG
Priority date: 2013-06-13
Filing date: 2013-06-13
Publication date: 2014-12-18

Abstract

Die Erfindung betrifft ein Verfahren zum Ermitteln eines aktuellen Zustands eines Fahrzeugs (12) durch Aufnehmen eines aktuellen Bilds (19) eines Bereichs (13) des Fahrzeugs (12) mittels einer tragbaren Bilderfassungseinrichtung (2); durch Vergleichen des aktuellen Bilds (19) mit einem abgelegten Referenzbild (18) durch eine Recheneinrichtung (4), wobei das Referenzbild (18) den Bereich (13) des Fahrzeugs (12) in einem Soll-Zustand darstellt; und durch Ermitteln des Zustands durch die Recheneinrichtung (4) abhängig von dem Vergleich. Durch die Bilderfassungseinrichtung (2) werden vor dem Aufnehmen des aktuellen Bilds (19) eine aktuelle Lage des zu erfassenden Bereichs (13) des Fahrzeugs (12) innerhalb eines Sichtfelds (14) der Bilderfassungseinrichtung (2) sowie eine Abweichung der aktuellen Lage von einer vorgegebenen Soll-Lage bestimmt, wobei das aktuelle Bild (19) zur Ermittlung des Zustands des Fahrzeugs (12) erst aufgenommen wird, wenn die Abweichung eine vorgegebene Schwelle unterschreitet.The invention relates to a method for determining a current state of a vehicle (12) by taking a current image (19) of an area (13) of the vehicle (12) by means of a portable image capture device (2); by comparing the current image (19) with a stored reference image (18) by a computing device (4), the reference image (18) representing the area (13) of the vehicle (12) in a desired state; and by determining the state by the computing device (4) depending on the comparison. Before the current image (19) is captured, the image capture device (2) detects a current position of the area (13) of the vehicle (12) to be captured within a field of view (14) of the image capture device (2) and a deviation of the current position from one predetermined target position, the current image (19) for determining the state of the vehicle (12) being recorded only when the deviation falls below a predetermined threshold.

Description

Die Erfindung betrifft ein Verfahren zum Ermitteln eines Zustands eines Fahrzeugs, insbesondere nach einer Benutzung des Fahrzeugs, mithilfe einer tragbaren Bilderfassungseinrichtung, mittels welcher ein aktuelles Bild eines Bereichs des Fahrzeugs aufgenommen wird, wobei eine Recheneinrichtung das aktuelle Bild mit einem abgelegten Referenzbild vergleicht, welches den Bereich des Fahrzeugs in einem Soll-Zustand darstellt und den Zustand des Fahrzeugs abhängig von diesem Vergleich ermittelt. Die Erfindung betrifft außerdem ein System, welches zum Durchführen eines solchen Verfahrens ausgebildet ist.The invention relates to a method for determining a state of a vehicle, in particular after a use of the vehicle, by means of a portable image capture device, by means of which a current image of a region of the vehicle is recorded, wherein a computing device compares the current image with a stored reference image, which Range of the vehicle in a desired state and determines the state of the vehicle depending on this comparison. The invention also relates to a system which is designed to carry out such a method.

Es ist häufig erforderlich, den technischen Zustand eines Fahrzeugs nach dessen Benutzung ermitteln und hierbei insbesondere Schäden, Mängel und Veränderungen an der Außenfläche des Fahrzeugs feststellen und gegebenenfalls dokumentieren zu können. Vorliegend richtet sich das Interesse vorzugsweise auf die Ermittlung des Zustands von Mietfahrzeugen, welche durch eine Vielzahl von Personen im Rahmen einer Autovermietung oder aber im Rahmen des so genannten „Car-Sharing” genutzt werden. „Car-Sharing” bedeutet dabei die organisierte gemeinschaftliche Nutzung eines oder mehrerer Fahrzeuge, wobei im Unterschied zur Autovermietung die Fahrzeugnutzung auch für kürzere Zeit, zum Beispiel stundenweise, möglich ist. Die Ermittlung von Schäden bzw. Mängeln an Mietfahrzeugen erfolgt heute üblicherweise durch ein zuständiges Personal, indem das Fahrzeug bei der Übergabe manuell auf Schäden überprüft wird. Eine derartige manuelle Vorgehensweise ist dabei lediglich bei einer herkömmlichen Autovermietung, nicht jedoch bei dem Car-Sharing möglich, da hier ein entsprechendes Personal für die technische Überprüfung des Fahrzeugs nach jeder Benutzung in der Regel nicht zur Verfügung steht. Andererseits erweist sich auch die manuelle Überprüfung der Mietfahrzeuge bei einer herkömmlichen Autovermietung als besonders aufwändig und wenig praktikabel. Es wäre wünschenswert, dass es eine Möglichkeit gäbe, die Überprüfung auf Mängel und insbesondere auch die Dokumentation des Fahrzeugzustands nach jeder Benutzung des Fahrzeugs zumindest teilweise automatisiert durchzuführen.It is often necessary to determine the technical condition of a vehicle after its use and in particular determine damage and defects and changes to the outer surface of the vehicle and if necessary to document. In the present case, the interest is preferably directed to the determination of the status of rental vehicles, which are used by a large number of persons in the context of a car rental or in the context of the so-called "car sharing". "Car sharing" means the organized joint use of one or more vehicles, which, in contrast to the car rental vehicle use for shorter time, for example, by the hour, is possible. The determination of damage or defects in rental vehicles is usually carried out today by a responsible personnel by the vehicle is manually checked for damage during the transfer. Such a manual procedure is only possible in a conventional car rental, but not in the car sharing, since a corresponding staff for the technical inspection of the vehicle after each use is usually not available. On the other hand, the manual verification of rental vehicles proves to be particularly complex and impractical in a conventional car rental. It would be desirable if there were a way to at least partially automate the inspection for deficiencies and, in particular, the documentation of the vehicle condition after each use of the vehicle.

Eine Abhilfe schafft hier ein Verfahren, wie es in der EP 1 321 876 A2 beschrieben ist. Bei diesem Verfahren kann ein Defekt eines Leihgegenstands anhand eines Bilds detektiert werden, welches zu diesem Zwecke mit einem abgelegten Referenzbild verglichen wird. Durch diesen Vergleich kann auch das Ausmaß des Defekts bestimmt werden. Insbesondere bei der Ermittlung des technischen Zustands eines Fahrzeugs im Rahmen einer herkömmlichen Autovermietung oder aber des Car-Sharing erweist sich dieses Verfahren jedoch nur als unzureichend. Der Benutzer des Fahrzeugs, der dazu aufgefordert wird, ein Bild des Fahrzeugs aufzunehmen, wird möglicherweise versuchen, das Bild aus einer solchen Perspektive zu erfassen, dass gegebenenfalls vorhandene Schäden bzw. Kratzer am Fahrzeug nicht erkannt werden können. Dies führt wiederum dazu, dass trotz der Automatisierung der Zustandsermittlung doch ein Personal erforderlich ist, das für eine korrekte Bildaufnahme sorgen muss. Werden Bilder aus einer beliebigen Perspektive aufgenommen, so ist auch der Vergleich des aufgenommenen Bilds mit dem Referenzbild nicht ohne Weiteres möglich oder es bedarf einer zusätzlichen nachträglichen und besonders aufwändigen Bildverarbeitung durch die Recheneinrichtung, um überhaupt einen sinnvollen Vergleich durchführen zu können. Eine zuverlässige und wirkungsvolle Automatisierung der Zustandsermittlung ist somit nicht möglich.A remedy here creates a procedure, as it in the EP 1 321 876 A2 is described. In this method, a defect of a loan item can be detected from an image, which is compared for this purpose with a stored reference image. By this comparison, the extent of the defect can also be determined. In particular, in the determination of the technical condition of a vehicle in the context of a conventional car rental or car sharing, however, this method proves to be inadequate. The user of the vehicle, who is requested to take a picture of the vehicle, may attempt to capture the image from such a perspective that any damage or scratches on the vehicle can not be detected. This in turn means that despite the automation of the state determination but requires a staff that must ensure proper image acquisition. If images are taken from any perspective, then the comparison of the recorded image with the reference image is not readily possible or it requires an additional subsequent and particularly complex image processing by the computing device to even make a meaningful comparison can. A reliable and effective automation of state determination is therefore not possible.

Aus der Druckschrift EP 1 958 148 B1 ist ein Verfahren zur Aufnahme von digitalen Abbildungen darzustellender Gegenstände, wie insbesondere Fahrzeuge, bekannt. Die digitalen Abbildungen werden aus unterschiedlichen Betrachtungswinkeln aufgenommen, wobei der darzustellende Gegenstand auf einer Drehscheibe angeordnet wird und die Drehscheibe kontinuierlich gedreht wird. In vorbestimmten Winkelstellungen der Drehscheibe werden dann elektronische Triggersignale erzeugt und an eine Steuervorrichtung für eine digitale Kamera übermittelt, welche bei Empfang eines Triggersignals eine einzelne Abbildung aufnimmt. Ein derartiges Verfahren ist für die Ermittlung des technischen Zustands einer Vielzahl von Fahrzeugen – wie etwa bei einer Autovermietung oder aber einem Car-Sharing – grundsätzlich unbrauchbar, da einerseits ein solches Verfahren relativ lange Zeit in Anspruch nehmen würde und andererseits dem Entleiher des Fahrzeugs nicht zugemutet werden kann, dass er das Fahrzeug auf einer speziellen Drehscheibe platziert. Dies wiederum würde ein entsprechendes Personal erforderlich machen.From the publication EP 1 958 148 B1 is a method for receiving digital images of objects to be displayed, in particular vehicles known. The digital images are taken from different viewing angles, wherein the object to be displayed is arranged on a turntable and the turntable is rotated continuously. In predetermined angular positions of the turntable electronic trigger signals are then generated and transmitted to a control device for a digital camera, which receives a single image upon receipt of a trigger signal. Such a method is for the determination of the technical condition of a variety of vehicles - such as in a car rental or car sharing - basically unusable, because on the one hand such a procedure would take a relatively long time and on the other hand not expected the hirer of the vehicle can be placed on a special turntable. This in turn would require a corresponding staff.

Aus der Druckschrift DE 10 2011 112 411 A1 ist ein Verfahren zum Kosten-Nutzen-optimierten Disponieren und Ausführen von Service-Leistungen an Fahrzeugen bekannt. Durch einen Disponenten-Server werden fortlaufend Zustands-Informationen spezifisch für jedes Fahrzeug empfangen, welche einerseits servicerelevante Daten bzw. Messwerte (zum Beispiel Ölstand) sowie andererseits auch Nutzerbewertungen wie „Fahrzeug ist schmutzig” beinhalten können. Aus den Zustands-Informationen jedes Fahrzeugs werden dann Service-Anfragen zur Ausführung von Service-Leistungen an dem Fahrzeug identifiziert. An diesem Stand der Technik ist als nachteilig der Umstand anzusehen, dass der eigentliche Zustand des Fahrzeugs nicht erfasst werden kann.From the publication DE 10 2011 112 411 A1 A method for cost-benefit optimized scheduling and execution of services on vehicles is known. A dispatcher server continuously receives status information specific to each vehicle, which may include, on the one hand, service-related data or metrics (eg, oil level) and, on the other hand, user ratings such as "vehicle is dirty." From the status information of each vehicle, service requests are then identified to perform service on the vehicle. At this state of the art is to be regarded as a disadvantage of the fact that the actual state of the vehicle can not be detected.

Es ist Aufgabe der Erfindung, einen Weg aufzuzeigen, wie bei einem Verfahren der eingangs genannten Gattung der aktuelle Zustand des Fahrzeugs ohne viel Aufwand besonders zuverlässig ermittelt werden kann, insbesondere ohne dass dazu ein geschultes Personal erforderlich ist. It is an object of the invention to show a way, as in a method of the type mentioned, the current state of the vehicle without much effort can be determined particularly reliable, especially without the need for trained personnel is required.

Diese Aufgabe wird erfindungsgemäß durch ein Verfahren sowie durch ein System mit den Merkmalen gemäß den jeweiligen unabhängigen Patentansprüchen gelöst. Vorteilhafte Ausführungen der Erfindung sind Gegenstand der abhängigen Patentansprüche, der Beschreibung und der Figuren.This object is achieved by a method and by a system having the features according to the respective independent claims. Advantageous embodiments of the invention are the subject of the dependent claims, the description and the figures.

Ein erfindungsgemäßes Verfahren dient zum Ermitteln eines aktuellen Zustands eines Fahrzeugs, insbesondere eines Kraftfahrzeugs, bevorzugt eines Personenkraftwagens, mithilfe einer tragbaren Bilderfassungseinrichtung, mittels welcher ein aktuelles Bild eines Bereichs des Fahrzeugs aufgenommen wird. Das aktuelle Bild wird dann an eine Recheneinrichtung übermittelt, welche dieses aktuelle Bild mit einem abgelegten Referenzbild vergleicht, welches den Bereich des Fahrzeugs in einem Soll-Zustand darstellt. Die Recheneinrichtung ermittelt dann den aktuellen Zustand des Fahrzeugs abhängig von diesem Vergleich. Erfindungsgemäß ist vorgesehen, dass durch die Bilderfassungseinrichtung vor dem Aufnehmen des aktuellen Bilds eine aktuelle Lage des zu erfassenden Bereichs des Fahrzeugs innerhalb eines Sichtfelds der Bilderfassungseinrichtung sowie eine Abweichung der aktuellen Lage von einer vorgegebenen Soll-Lage bestimmt werden und das aktuelle Bild zur Ermittlung des aktuellen Zustands erst aufgenommen wird, wenn die Abweichung eine vorgegebene Schwelle unterschreitet und somit die aktuelle Lage der vorgegebenen Soll-Lage entspricht oder in einem vorgegebenen Toleranzbereich um die Soll-Lage liegt. Mit anderen Worten wird zur Ermittlung des aktuellen Zustands des Fahrzeugs ein Bild genutzt, welches dann aufgenommen wird, wenn die genannte Abweichung die vorgegebene Schwelle unterschreitet.An inventive method is used to determine a current state of a vehicle, in particular of a motor vehicle, preferably a passenger car, by means of a portable image capture device, by means of which a current image of a region of the vehicle is taken. The current image is then transmitted to a computing device which compares this current image with a stored reference image representing the region of the vehicle in a desired state. The computing device then determines the current state of the vehicle depending on this comparison. According to the invention, a current position of the area of the vehicle to be detected within a field of view of the image capture device and a deviation of the current position from a predetermined desired position are determined by the image capture device prior to taking the current image and the current image for determining the current State is only recorded when the deviation falls below a predetermined threshold and thus corresponds to the current position of the predetermined desired position or is within a predetermined tolerance range to the target position. In other words, an image is used to determine the current state of the vehicle, which is recorded when the said deviation falls below the predetermined threshold.

Der erfindungsgemäße Effekt wird also dadurch erzielt, dass das aktuelle Bild, welches zur Ermittlung des aktuellen Zustands des Fahrzeugs mit dem abgelegten Referenzbild verglichen werden soll, nicht aus einer beliebigen Perspektive bzw. nicht in einer beliebigen Lage des Fahrzeugs relativ zur Bilderfassungseinrichtung erfasst wird, sondern in einer ganz bestimmten, konkreten und vorgegeben Soll-Lage. Diese Perspektive entspricht dabei insbesondere derjenigen, aus welcher auch das abgelegte Referenzbild bereitgestellt bzw. aufgenommen wurde. Auf diese Art und Weise kann der Vorgang der Ermittlung des aktuellen Zustands zumindest teilweise automatisiert erfolgen, und der aktuelle Zustand des Fahrzeugs kann ohne viel Aufwand besonders zuverlässig und realitätsgetreu bestimmt werden. Es ist dabei keine aufwändige nachträgliche Bildverarbeitung durch die Recheneinrichtung erforderlich, weil das aufgenommene aktuelle Bild unmittelbar mit dem abgelegten Referenzbild verglichen werden kann, ohne dass eine nachträgliche Verschiebung und Ausrichtung von Bildbereichen durch die Recheneinrichtung erforderlich ist. Insbesondere bei einer Autovermietung oder einem Car-Sharing können somit Situationen vermieden werden, in denen der Entleiher des Fahrzeugs das Bild aus einer solchen Perspektive aufnimmt, dass am Fahrzeug vorhandene und insbesondere durch ihn verursachte Kratzer bzw. Schäden in dem aufgenommenen Bild nicht erkannt werden können.The effect according to the invention is thus achieved in that the current image, which is to be compared with the stored reference image to determine the current state of the vehicle, is not detected from any perspective or not in any position of the vehicle relative to the image capture device, but instead in a very specific, concrete and given target position. This perspective corresponds in particular to that from which the stored reference image was also provided or recorded. In this way, the process of determining the current state can be at least partially automated, and the current state of the vehicle can be determined very reliably and realistically without much effort. In this case, no complicated subsequent image processing by the computing device is necessary because the recorded current image can be directly compared with the stored reference image, without a subsequent shift and alignment of image areas by the computing device is required. In particular, in a car rental or car sharing situations can thus be avoided in which the borrower of the vehicle receives the image from such a perspective that existing on the vehicle and in particular caused by him scratches or damage in the captured image can not be detected ,

Mit der Erfindung ist insbesondere eine Zustandsänderung, die im Zeitraum zwischen der Aufnahme des Referenzbildes und der Aufnahme des aktuellen Bildes an dem Fahrzeug eingetreten ist, zuverlässig, objektiv, nachweisbar und/oder zumindest teilweise automatisiert erfassbar und dokumentierbar.With the invention, in particular, a change of state that has occurred in the period between the recording of the reference image and the recording of the current image on the vehicle, reliable, objective, verifiable and / or at least partially automated detected and documented.

Die Bilderfassungseinrichtung bestimmt also die aktuelle Lage des zu erfassenden Bereichs des Fahrzeugs innerhalb des Sichtfelds. Der Begriff „Lage” umfasst vorliegend insbesondere eine Position des zu erfassenden Bereichs des Fahrzeugs relativ zur Bilderfassungseinrichtung – etwa in einem Koordinatensystem der Bilderfassungseinrichtung – und/oder eine Winkelausrichtung bzw. Orientierung des Fahrzeugs relativ zur Bilderfassungseinrichtung.The image capture device thus determines the current position of the region of the vehicle to be detected within the field of view. In the present case, the term "position" encompasses, in particular, a position of the region of the vehicle to be detected relative to the image capture device-such as in a coordinate system of the image capture device-and / or an angular orientation or orientation of the vehicle relative to the image capture device.

Demnach kann in einer Ausführungsform vorgesehen sein, dass das Bestimmen der aktuellen Lage und der Abweichung von der vorgegebenen Soll-Lage umfasst, dass eine aktuelle Winkelausrichtung des zu erfassenden Bereichs des Fahrzeugs relativ zu der Bilderfassungseinrichtung sowie eine Abweichung dieser Winkelausrichtung von einer vorgegebenen Soll-Winkelausrichtung bestimmt werden. Das aktuelle Bild zur Ermittlung des aktuellen Zustands des Fahrzeugs kann erst aufgenommen werden, wenn die Abweichung der Winkelausrichtung eine vorgegebene Winkelschwelle unterschreitet. Die aktuelle Winkelausrichtung kann dabei insgesamt durch zwei Winkelwerte definiert werden, nämlich um zwei senkrecht zueinander verlaufende Referenzachsen des Bilds.Accordingly, in one embodiment it can be provided that the determination of the current position and the deviation from the predefined target position comprises an actual angular orientation of the region of the vehicle to be detected relative to the image capture device and a deviation of this angular orientation from a predetermined target angular orientation be determined. The current image for determining the current state of the vehicle can be recorded only if the deviation of the angular orientation falls below a predetermined angle threshold. The current angular orientation can be defined in total by two angle values, namely by two reference axes of the image running perpendicular to one another.

Ergänzend oder alternativ kann das Bestimmen der aktuellen Lage und der Abweichung von der Soll-Lage auch umfassen, dass eine aktuelle Position des zu erfassenden Bereichs des Fahrzeugs relativ zu der Bilderfassungseinrichtung sowie eine Abweichung dieser Position von einer vorgegebenen Soll-Position bestimmt werden. Das aktuelle Bild zur Ermittlung des aktuellen Zustands wird hier erst dann aufgenommen, wenn die Abweichung der Position eine vorgegebene Positionsschwelle unterschreitet. Die Position des Fahrzeugs innerhalb des Sichtfelds der Bilderfassungseinrichtung kann beispielsweise durch drei Koordinatenwerte in einem Koordinatensystem der Bilderfassungseinrichtung definiert werden, wobei zwei der Koordinatenwerte die Position in der Bildebene und ein Koordinatenwert die Position in Richtung senkrecht zur Bildebene beschreiben. Die Position in Richtung senkrecht zur Bildebene kann zunächst durch die Entfernung der Bilderfassungseinrichtung von dem Fahrzeug beeinflusst werden. Optional kann jedoch auch vorgesehen sein, dass diese Position durch einen Zoom-Faktor der Bilderfassungseinrichtung beeinflusst wird, falls die Bilderfassungseinrichtung über eine entsprechende Zoom-Funktion verfügt.Additionally or alternatively, the determination of the current position and the deviation from the desired position may also include determining a current position of the region of the vehicle to be detected relative to the image capture device and a deviation of this position from a predetermined desired position. The current image for determining the current state is recorded here only when the deviation of the position falls below a predetermined position threshold. The position of the vehicle within the field of view of the image capture device can be defined, for example, by three coordinate values in a coordinate system of the image capture device, wherein two of the coordinate values describe the position in the image plane and a coordinate value the position in the direction perpendicular to the image plane. The position in the direction perpendicular to the image plane can first be influenced by the distance of the image capture device from the vehicle. Optionally, however, it can also be provided that this position is influenced by a zoom factor of the image capture device if the image capture device has a corresponding zoom function.

Das Bild zur Ermittlung des aktuellen Zustands des Fahrzeugs wird also insgesamt aus einer invarianten „Pose” aufgenommen, welche sowohl eine vorbestimmte Position als auch eine vorgegebene Orientierung beinhalten kann. Die Auswertung der Winkelausrichtung und der Position erfolgt dabei vorzugsweise fortlaufend und gleichzeitig, sodass der eine Parameter durch den anderen Parameter beeinflusst wird und umgekehrt.The image for determining the current state of the vehicle is thus taken as a whole from an invariant "pose", which may include both a predetermined position and a predetermined orientation. The evaluation of the angular orientation and the position is preferably carried out continuously and simultaneously, so that one parameter is influenced by the other parameter and vice versa.

Es erweist sich als besonders vorteilhaft, wenn mittels der Bilderfassungseinrichtung Anweisungen an einen Benutzer ausgegeben werden, gemäß denen die Bilderfassungseinrichtung zur Verringerung der Abweichung der aktuellen Lage von der Soll-Lage zu bewegen ist. Der Benutzer erhält somit Hinweise, in welche Richtung er die Bilderfassungseinrichtung bewegen und hierbei verschieben und/oder drehen soll, um die Abweichung der aktuellen Lage von der Soll-Lage zu minimieren und somit die gewünschte Perspektive bzw. „Pose” zu erreichen. Diese Ausführungsform hat den Vorteil, dass bei der Ermittlung des aktuellen Zustands grundsätzlich kein Personal benötigt wird. An den Benutzer können auch Hinweise ausgegeben werden, das Sichtfeld zu verändern, beispielsweise, dass er den optischen Zoomfaktor der Bilderfassungseinrichtung verändern soll.It proves to be particularly advantageous if by means of the image capture device instructions are issued to a user, according to which the image capture device to reduce the deviation of the current position is to move from the desired position. The user thus receives information in which direction he should move the image capture device and thereby shift and / or rotate in order to minimize the deviation of the current position of the target position and thus to achieve the desired perspective or "pose". This embodiment has the advantage that, in principle, no personnel is needed when determining the current state. Also hints may be given to the user to change the field of view, for example, to change the optical zoom factor of the image capture device.

Ein Entleiher des Fahrzeugs kann bei der Übergabe des Fahrzeugs beispielsweise dazu aufgefordert werden, mehrere Bilder des Fahrzeugs aus unterschiedlichen Perspektiven aufzunehmen. Hierbei wird er durch die Bilderfassungseinrichtung dahingehend unterstützt, dass entsprechende Hinweise bzw. Anweisungen so lange ausgegeben werden, bis das jeweilige Bild aus der gewünschten, vorbestimmten „Pose” aufgenommen werden kann.For example, when the vehicle is handed over, a borrower of the vehicle may be requested to take several pictures of the vehicle from different perspectives. In this case, he is supported by the image capture device to the extent that appropriate instructions or instructions are issued until the respective image from the desired, predetermined "pose" can be recorded.

Die genannten Anweisungen können insbesondere optisch auf einem Display der Bilderfassungseinrichtung ausgegeben werden. Hierbei können so genannte „Augmented-Reality”-Techniken genutzt werden, d. h. die so genannte erweiterte Realität. Die Anweisungen können dabei in Form von visuellen Objekten bzw. Symbolen bereitgestellt werden, welche auf dem Display der Bilderfassungseinrichtung in Echtzeit angezeigt und hierbei beispielsweise den aktuellen Bildern auf dem Display überlagert werden.The instructions mentioned can be issued in particular optically on a display of the image capture device. Here, so-called "augmented reality" techniques can be used, d. H. the so-called augmented reality. The instructions can be provided in the form of visual objects or symbols, which are displayed on the display of the image capture device in real time and in this case, for example, the current images are superimposed on the display.

Ganz allgemein kann vorgesehen sein, dass die aktuelle Lage sowie ihre Abweichung von der Soll-Lage durch die Bilderfassungseinrichtung fortlaufend in Echtzeit bestimmt und insbesondere die Anweisungen ebenfalls fortlaufend in Echtzeit ausgegeben werden.In general, it can be provided that the current position and its deviation from the desired position by the image capture device continuously determined in real time and in particular the instructions are also issued continuously in real time.

Das Bestimmen der aktuellen Lage erfolgt in einer Ausführungsform anhand zumindest eines durch die Bilderfassungseinrichtung erfassten Bilds, insbesondere fortlaufend anhand einer zeitlichen Sequenz von Bildern bzw. anhand eines Videos. Somit kann ein ohnehin bereits vorhandener Bildsensor auch zur Bestimmung der aktuellen Lage genutzt werden. Außerdem kann die aktuelle Lage anhand des zumindest einen Bilds auch besonders präzise und hochgenau ermittelt werden. So kann anhand des zumindest einen Bilds nicht nur die aktuelle Winkelausrichtung der Bilderfassungseinrichtung relativ zum Fahrzeug, sondern zusätzlich auch die Entfernung von dem Fahrzeug ermittelt werden.In one embodiment, the current position is determined on the basis of at least one image captured by the image capture device, in particular continuously on the basis of a temporal sequence of images or on the basis of a video. Thus, an already existing image sensor can also be used to determine the current situation. In addition, the current position can be determined with the help of the at least one image also very precise and highly accurate. Thus, based on the at least one image not only the current angular orientation of the image capture device relative to the vehicle, but also the distance from the vehicle can be determined.

Dies kann beispielsweise so erfolgen, dass in dem zumindest einen Bild ein Abbild des Bereichs des Fahrzeugs identifiziert wird und charakteristische Merkmale des Abbilds detektiert werden. Die aktuelle Lage des Fahrzeugs innerhalb des Sichtfelds der Bilderfassungseinrichtung kann dann anhand der charakteristischen Merkmale ermittelt werden. Ein solches Verfahren, bei welchem die aktuelle Lage mithilfe von markanten visuellen Merkmalen des Fahrzeugs bestimmt wird, sorgt einerseits für eine hochpräzise Bestimmung der aktuellen Lage. Andererseits kann die aktuelle Lage auf diesem Wege auch ohne viel Rechenaufwand in Echtzeit bestimmt werden.This can be done, for example, such that an image of the area of the vehicle is identified in the at least one image and characteristic features of the image are detected. The current position of the vehicle within the field of view of the image capture device can then be determined on the basis of the characteristic features. On the one hand, such a method, in which the current position is determined by means of distinctive visual features of the vehicle, ensures a highly precise determination of the current position. On the other hand, the current situation can be determined in this way even without much computational effort in real time.

Optional kann auch eine Sensorfusion vorgesehen sein: Bei der Bestimmung der aktuellen Lage und/oder bei dem Ausgeben der Anweisungen können Sensordaten zumindest eines von dem Bildsensor unterschiedlichen Sensors der Bilderfassungseinrichtung berücksichtigt werden, wie insbesondere eines Beschleunigungssensors und/oder eines Drehratensensors (Gyroskop). Durch diese Sensordaten kann nämlich bestimmt werden, in welche Richtung die Bilderfassungseinrichtung aktuell bewegt und welcher Weg hierbei durch die Bilderfassungseinrichtung zurückgelegt wird. Diese Informationen können in die Bestimmung der aktuellen Lage mit einfließen und/oder es können gegebenenfalls Anweisungen ausgegeben werden, dass die Bilderfassungseinrichtung in eine andere Richtung bewegt oder in ihrer Ausrichtung gedreht werden soll. Somit erfolgt die Bestimmung der aktuellen Lage noch präziser bzw. die Anweisungen können an den Benutzer situationsabhängig und bedarfsgerecht ausgegeben werden.Optionally, a sensor fusion may also be provided: When determining the current position and / or outputting the instructions, sensor data of at least one sensor of the image capture device different from the image sensor may be taken into account, such as in particular an acceleration sensor and / or a yaw rate sensor (gyroscope). Namely, it can be determined by this sensor data in which direction the image capture device is currently moving and which path is covered by the image capture device. This information can be included in the determination of the current situation and / or instructions can be issued if necessary, that the image capture device moves in a different direction or to be rotated in their orientation. Thus, the determination of the current situation is even more precise or the instructions can be output to the user depending on the situation and needs.

Unterschreitet die Abweichung der aktuellen Lage von der Soll-Lage die vorgegebene Schwelle – wenn insbesondere die aktuelle Lage der Soll-Lage entspricht –, so kann das aktuelle Bild zur Ermittlung des aktuellen Zustands optional auch automatisch mittels der Bilderfassungseinrichtung aufgenommen und insbesondere auch direkt an die Recheneinrichtung übermittelt werden. Der Benutzer braucht somit keine Eingabe vorzunehmen, um die Aufnahme des Bilds auszulösen, sondern es genügt lediglich, dass er die Bilderfassungseinrichtung in die entsprechende Soll-Lage bewegt. Ein ungewolltes Bewegen der Bilderfassungseinrichtung aus der Soll-Lage – bedingt durch die Betätigung eines Auslöseknopfs – kann somit verhindert werden.If the deviation of the current position from the desired position falls below the predetermined threshold-if, in particular, the current position corresponds to the desired position-then the current image for determining the current state can optionally also be recorded automatically by the image capture device and, in particular, directly to the Computing be transmitted. The user thus need not make any input to trigger the recording of the image, but it is sufficient only that he moves the image capture device in the appropriate desired position. An unwanted movement of the image capture device from the desired position - due to the operation of a release button - can thus be prevented.

Bevorzugt wird als aktuelles Bild ein Bild von außerhalb des Fahrzeugs aufgenommen, sodass dieses aktuelle Bild eine Außenfläche des Fahrzeugs darstellt. Auf diesem Wege gelingt es, den aktuellen Zustand der Außenfläche des Fahrzeugs zu ermitteln, was sich insbesondere bei einer Autovermietung bzw. einem Car-Sharing als besonders vorteilhaft erweist, da gegebenenfalls vorhandene Schäden am Fahrzeug dokumentiert werden können.Preferably, an image is taken from outside the vehicle as the current image, so that this current image represents an outer surface of the vehicle. In this way, it is possible to determine the current state of the outer surface of the vehicle, which proves to be particularly advantageous in a car rental or car sharing, as possibly existing damage to the vehicle can be documented.

Es kann auch vorgesehen sein, dass als aktuelles Bild ein Bild eines Bereichs innerhalb des Fahrzeugs – also ein Bild des Innenraums – aufgenommen wird, sodass dieses aktuelle Bild beispielsweise eine Fahrzeugkomponente innerhalb des Fahrzeugs darstellt.It may also be provided that a picture of an area within the vehicle-that is, an image of the interior-is taken as the current image, so that this current image represents, for example, a vehicle component within the vehicle.

Auf diesem Wege gelingt es, den aktuellen Zustand des Innenraums des Fahrzeugs zu ermitteln und somit gegebenenfalls Schäden und/oder eine Verschmutzung und/oder zurückgelassene Gegenstände zu detektieren.In this way, it is possible to determine the current state of the interior of the vehicle and thus possibly detect damage and / or pollution and / or left behind objects.

Das Ermitteln des aktuellen Zustands des Fahrzeugs kann dabei umfassen, dass eine Differenz zwischen dem aktuellen Bild und dem Referenzbild bestimmt wird. Der aktuelle Zustand des Fahrzeugs kann dabei anhand der Differenz beurteilt werden. Wird eine signifikante Differenz festgestellt, so kann dies als ein möglicher Schaden am Fahrzeug gewertet werden.Determining the current state of the vehicle may include determining a difference between the current image and the reference image. The current state of the vehicle can be assessed based on the difference. If a significant difference is detected, this can be considered as a possible damage to the vehicle.

Wird durch die Recheneinrichtung eine solche Abweichung des ermittelten aktuellen Zustands von dem Soll-Zustand – also insbesondere wenn die genannte Differenz einen vorgegebenen Grenzwert überschreitet – festgestellt, so kann mittels der Bilderfassungseinrichtung ein Aufforderungssignal an den Benutzer ausgegeben werden, durch welches der Benutzer zur Aufnahme einer Eingabe aufgefordert wird, über welche die Abweichung von dem Soll-Zustand durch den Benutzer kommentiert wird. Diese Eingabe bzw. der Kommentar wird dann an die Recheneinrichtung übermittelt und kann zusammen mit dem aktuellen Bild zur Dokumentation abgespeichert werden. Eine solche Vorgehensweise ist besonders vorteilhaft, weil nach Detektion einer signifikanten Abweichung von dem Soll-Zustand grundsätzlich nicht zwischen Kratzern am Fahrzeug einerseits und einer Verschmutzung des Fahrzeugs andererseits unterschieden werden kann bzw. eine derartige Unterscheidung eine zusätzliche und besonders aufwändige Bildverarbeitung erforderlich machen würde.If such a deviation of the ascertained current state from the desired state-that is to say in particular when the difference exceeds a predetermined limit-is determined by the computing device, then a request signal can be output to the user by means of the image capture device, by which the user can record a Input is asked about which the deviation from the target state is commented by the user. This input or the comment is then transmitted to the computing device and can be stored together with the current image for documentation. Such a procedure is particularly advantageous because, after detection of a significant deviation from the desired state, it is fundamentally not possible to distinguish between scratches on the vehicle on the one hand and contamination of the vehicle on the other hand, or such a distinction would necessitate additional and particularly complex image processing.

Bevorzugt ist die Recheneinrichtung durch einen Internet-Server gebildet, sodass das aktuelle Bild von der Bilderfassungseinrichtung über das Internet an die Recheneinrichtung übertragen wird. Auf diese Art und Weise kann die Recheneinrichtung eine zentrale Einrichtung darstellen, in welcher der jeweilige Zustand einer Vielzahl von Fahrzeugen dokumentiert werden kann. Die Recheneinrichtung kann nämlich Bilder von vielen verschiedenen Bilderfassungseinrichtungen empfangen und so den technischen Zustand unterschiedlicher Fahrzeuge ermitteln. Es ist somit auch eine räumliche Trennung der Recheneinrichtung von dem Ort der Übergabe des Fahrzeugs möglich, was sich insbesondere bei dem Car-Sharing als vorteilhaft erweist.Preferably, the computing device is formed by an Internet server, so that the current image is transmitted from the image capture device via the Internet to the computing device. In this way, the computing device can represent a central device in which the respective state of a plurality of vehicles can be documented. Namely, the computing device can receive images from many different image capture devices and thus determine the technical condition of different vehicles. It is thus also a spatial separation of the computing device of the place of transfer of the vehicle possible, which proves to be particularly advantageous in the car sharing.

In einer Ausführungsform ist vorgesehen, dass nach dem Vergleich das aktuelle Bild als neues Referenzbild in der Recheneinrichtung abgespeichert wird. Wird ein solches Bild nach jeder Benutzung des Fahrzeugs, etwa nach jedem Vermieten des Fahrzeugs, zur Ermittlung des jeweils aktuellen Zustands aufgenommen, so wird somit der Zustand nach der Benutzung mit dem Zustand vor der Benutzung verglichen. Somit werden ausschließlich diejenigen Differenzen festgestellt, welche durch den aktuellen Benutzer tatsächlich verursacht wurden.In one embodiment, it is provided that after the comparison, the current image is stored as a new reference image in the computing device. If such an image is taken after each use of the vehicle, for example after each rental of the vehicle, to determine the current state, so the state after use is compared with the state before use. Thus, only the differences actually caused by the current user are determined.

Die Bilderfassungseinrichtung kann insbesondere eine Digitalkamera umfassen. Sie kann in einem mobilen Endgerät wie z. B. einem mobilen Computer wie einem Laptop oder einem Tablet PC integriert oder mit diesem verbunden sein. Das Endgerät kann insbesondere dazu ausgebildet sein, eine Internetverbindung herzustellen. Vorzugsweise ist die Bilderfassungseinrichtung ein tragbares Kommunikationsendgerät, insbesondere ein Mobiltelefon (Smartphone). Das aktuelle Bild wird dabei mittels eines Bildsensors des Kommunikationsendgeräts aufgenommen. Diese Ausführungsform macht sich die Tatsache zunutze, dass heutzutage nahezu jeder über ein Mobiltelefon mit einem Bildsensor und einem Display verfügt, sodass sich der Einsatz von zusätzlichen Bilderfassungseinrichtungen mit den damit verbundenen Nachteilen erübrigt. Dies kann beispielsweise so aussehen, dass auf dem Kommunikationsendgerät des Benutzers eine entsprechende Applikation installiert wird, welche mit der Recheneinrichtung des Fahrzeugvermieters kommuniziert. Nach der Benutzung des Fahrzeugs bzw. nach Ablauf der Mietzeit kann der Benutzer durch diese Applikation dazu aufgefordert werden, mehrere Bilder des Fahrzeugs aus unterschiedlichen Perspektiven aufzunehmen. Hierbei wird der Benutzer vorzugsweise durch die oben genannten Anweisungen unterstützt.The image capture device may in particular comprise a digital camera. It can be used in a mobile device such. B. a mobile computer such as a laptop or a tablet PC integrated or connected to this. The terminal may in particular be designed to establish an Internet connection. Preferably, the image capture device is a portable communication terminal, in particular a mobile phone (smartphone). The current image is recorded by means of an image sensor of the communication terminal. This embodiment takes advantage of the fact that today almost everyone has a mobile phone with an image sensor and a display, so that the use of additional image capture devices with the associated disadvantages. This may for example be such that a corresponding application is installed on the communication terminal of the user, which communicates with the computing device of the vehicle rental company. After using the vehicle or after expiry of the rental period, the user can be requested by this application to take several pictures of the vehicle from different perspectives. In this case, the user is preferably supported by the above-mentioned instructions.

Die Erfindung betrifft außerdem ein System mit einer Bilderfassungseinrichtung und einer Recheneinrichtung, wobei das System zum Durchführen eines erfindungsgemäßen Verfahrens ausgebildet ist. Die mit Bezug auf das erfindungsgemäße Verfahren vorgestellten bevorzugten Ausführungsformen und deren Vorteile gelten entsprechend für das erfindungsgemäße System.The invention also relates to a system having an image capture device and a computing device, wherein the system is designed for carrying out a method according to the invention. The preferred embodiments presented with reference to the method according to the invention and their advantages apply correspondingly to the system according to the invention.

Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, den Figuren und der Figurenbeschreibung. Alle vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder aber in Alleinstellung verwendbar.Further features of the invention will become apparent from the claims, the figures and the description of the figures. All the features and feature combinations mentioned above in the description as well as the features and feature combinations mentioned below in the description of the figures and / or shown alone in the figures can be used not only in the respectively indicated combination but also in other combinations or alone.

Die Erfindung wird nun anhand eines bevorzugten Ausführungsbeispiels sowie unter Bezugnahme auf die beigefügten Zeichnungen näher erläutert.The invention will now be described with reference to a preferred embodiment and with reference to the accompanying drawings.

Es zeigen:Show it:

1 in schematischer und abstrakter Darstellung ein System gemäß einer Ausführungsform der Erfindung; 1 a schematic and abstract representation of a system according to an embodiment of the invention;

2 ein Flussdiagramm eines Verfahrens gemäß einer Ausführungsform der Erfindung; 2 a flowchart of a method according to an embodiment of the invention;

3 in schematischer und perspektivischer Darstellung ein Fahrzeug, wobei ein aktuelles Bild des Fahrzeugs aus einer vorgegebenen Pose aufgenommen wird; 3 a schematic and perspective view of a vehicle, wherein a current image of the vehicle is taken from a predetermined pose;

4 und 5 jeweils eine Darstellung auf einem Display einer Bilderfassungseinrichtung, wobei ein Verfahren gemäß einer Ausführungsform näher erläutert wird; und 4 and 5 in each case a representation on a display of an image capture device, wherein a method according to an embodiment is explained in more detail; and

6 und 7 ein Referenzbild und ein aktuelles Bild, wobei das aktuelle Bild mit dem Referenzbild verglichen wird. 6 and 7 a reference image and a current image, wherein the current image is compared with the reference image.

Ein in 1 dargestelltes und insgesamt mit 1 bezeichnetes System umfasst eine Bilderfassungseinrichtung 2, welche im Ausführungsbeispiel als Mobiltelefon 3 ausgebildet ist, sowie eine als Internet-Server ausgebildete Recheneinrichtung 4, welche an das Internet 5 angebunden ist. Die Recheneinrichtung 4 ist zum Beispiel bei einem Autovermieter bereitgestellt, welcher eine Vielzahl von Fahrzeugen zur Anmietung anbietet. Es kann sich hier um eine herkömmliche Autovermietung handeln, bei welcher eine Vielzahl von Fahrzeugen, insbesondere Kraftfahrzeugen, an einem gemeinsamen Ort bereitgestellt werden. Die Recheneinrichtung 4 kann dabei auch an einem anderen Ort angeordnet sein.An in 1 shown and in total with 1 designated system comprises an image capture device 2 , which in the embodiment as a mobile phone 3 is formed, and designed as an Internet server computing device 4 which connected to the internet 5 is connected. The computing device 4 is provided for example by a car rental company offering a variety of vehicles for rental. This may be a conventional car rental, in which a plurality of vehicles, in particular motor vehicles, are provided at a common location. The computing device 4 can also be arranged at a different location.

Das Mobiltelefon 3 weist ein Display 6 auf und umfasst des Weiteren einen schematisch dargestellten Bildsensor 7 zur Aufnahme von Bildern, zumindest einen weiteren Sensor 8, insbesondere einen Beschleunigungssensor und/oder Drehratensensor, wie auch eine Kommunikationseinrichtung 9, über welche das Mobiltelefon 3 an das Internet 5 angebunden werden kann und hierdurch mit der Recheneinrichtung 4 kommunizieren kann. Das Mobiltelefon 3 beinhaltet außerdem eine Steuereinheit 10, welche beispielsweise einen digitalen Signalprozessor umfasst und zur Verarbeitung der Bilder des Bildsensors 7 sowie der Sensordaten des Sensors 8 ausgebildet ist.The mobile phone 3 has a display 6 and further includes a schematically illustrated image sensor 7 for taking pictures, at least one further sensor 8th , in particular an acceleration sensor and / or yaw rate sensor, as well as a communication device 9 over which the mobile phone 3 to the internet 5 can be connected and thereby with the computing device 4 can communicate. The mobile phone 3 also includes a control unit 10 which comprises, for example, a digital signal processor and for processing the images of the image sensor 7 as well as the sensor data of the sensor 8th is trained.

Das Display 6 kann auch ein so genanntes Touch-Display sein, sodass eine Anzeigefläche des Displays 6 berührungssensitiv ausgebildet ist und zur Vornahme von Eingaben an dem Mobiltelefon 3 dient.the display 6 can also be a so-called touch display, so that a display area of the display 6 is formed touch-sensitive and for making inputs to the mobile phone 3 serves.

In einem Speicher 11 des Mobiltelefons 3 ist eine Applikation abgelegt, welche durch den Benutzer des Mobiltelefons 3 aktiviert werden kann und deren Funktion weiter unten näher erläutert wird.In a store 11 of the mobile phone 3 is an application filed by the user of the mobile phone 3 can be activated and their function is explained in more detail below.

Bezug nehmend nun auf 2 wird nachfolgend ein Verfahren gemäß einer Ausführungsform der Erfindung näher erläutert. In einem ersten Schritt S1 mietet der Benutzer des Mobiltelefons 3 ein Kraftfahrzeug von dem Autovermieter an, bei welchem die Recheneinrichtung 4 bereitgestellt ist. Gemäß einem weiteren Schritt S2 wird das Fahrzeug benutzt und hierbei beispielsweise über mehrere Kilometer gefahren. Gemäß einem weiteren Schritt S3 möchte der Benutzer nach Ablauf der Mietzeit – etwa nach ein paar Tagen – das Fahrzeug bei dem Autovermieter wieder zurückgeben und stellt fest, dass kein entsprechendes Personal bei dem Autovermieter zur Verfügung steht. Der Benutzer stellt das Fahrzeug auf einem dazu vorgesehenen Parkplatz ab und aktiviert gemäß Schritt S4 die oben genannte Applikation auf dem Mobiltelefon 3.Referring now to 2 a method according to an embodiment of the invention will be explained in more detail below. In a first step S1, the user rents the mobile phone 3 a motor vehicle from the car rental company, in which the computing device 4 is provided. According to a further step S2, the vehicle is used and in this example driven over several kilometers. According to a further step S3, the user would like to return the vehicle to the car rental company after expiry of the rental period - for example after a few days - and notes that no corresponding personnel are available from the car rental company. The user places the vehicle on a designated parking space and activates the above-mentioned application on the mobile phone according to step S4 3 ,

In einem weiteren Schritt S5 wird der Benutzer durch die Applikation dazu aufgefordert, mit seinem Mobiltelefon 3 ein Bild eines Bereichs des Fahrzeugs 12 aus einer vorgegebenen, invarianten Perspektive aufzunehmen. Es handelt sich zunächst beispielsweise um ein Bild der Seitenflanke des Fahrzeugs, wie dies schematisch in 3 veranschaulicht ist. 3 zeigt dabei in schematischer Darstellung das gemietete Fahrzeug 12 sowie eine aktuelle Position I des Mobiltelefons 3 relativ zum Fahrzeug 12.In a further step S5, the user is prompted by the application with his mobile phone 3 an image of an area of the vehicle 12 to take from a given, invariant perspective. For example, it is initially an image of the side edge of the vehicle, as shown schematically in FIG 3 is illustrated. 3 shows in a schematic representation of the rented vehicle 12 and a current position I of the mobile phone 3 relative to the vehicle 12 ,

Die Steuereinheit 10 des Mobiltelefons 3 ermittelt anhand von aktuell erfassten Bildern des Fahrzeugs 12 in Echtzeit die aktuelle Lage eines zu erfassenden Bereichs 13 des Fahrzeugs 12 innerhalb eines Sichtfelds 14 des Bildsensors 7. Dies beinhaltet einerseits, dass die relative Position des Fahrzeugs 12 bezüglich des Mobiltelefons 3 in einem Koordinatensystem des Mobiltelefons 3 bestimmt wird. Andererseits wird auch eine Winkelausrichtung bzw. Orientierung des Fahrzeugs 12 relativ zum Mobiltelefon 3 bestimmt. Diese aktuelle Lage des Fahrzeugs 12 innerhalb des Sichtfelds 14 bestimmt die Steuereinheit 10 anhand von charakteristischen Merkmalen, welche an einem Abbild des Bereichs 13 des Fahrzeugs 12 detektiert werden. Die jeweils augenblickliche Lage wird dabei fortlaufend und in Echtzeit ermittelt. Hierzu können auch die Sensordaten des Sensors 8 genutzt werden.The control unit 10 of the mobile phone 3 determined on the basis of currently captured images of the vehicle 12 in real time the current position of an area to be detected 13 of the vehicle 12 within a field of view 14 of the image sensor 7 , This includes, on the one hand, that the relative position of the vehicle 12 concerning the mobile phone 3 in a coordinate system of the mobile phone 3 is determined. On the other hand, an angular orientation or orientation of the vehicle 12 relative to the mobile phone 3 certainly. This current location of the vehicle 12 within the field of view 14 determines the control unit 10 on the basis of characteristic features which are attached to an image of the area 13 of the vehicle 12 be detected. The current situation is determined continuously and in real time. This can also be the sensor data of the sensor 8th be used.

Die aktuelle Lage vergleicht die Steuereinheit 10 dann fortlaufend mit einer vorgegebenen Soll-Lage, bei welcher das Bild zur Ermittlung des aktuellen Zustands des Fahrzeugs 12 aufgenommen werden soll. Es werden auf dem Display 6 Anweisungen ausgegeben, gemäß denen der Benutzer das Mobiltelefon 3 bewegen soll, um die Soll-Lage zu erreichen bzw. eine Abweichung der aktuellen Lage von der Soll-Lage zu minimieren. Wie in 3 schematisch angedeutet ist, wird das Mobiltelefon 3 durch den Benutzer gemäß der Pfeildarstellung 15 von der aktuellen Position I in eine weitere Position II bewegt, in welcher die Soll-Lage des Fahrzeugs 12 bezüglich des Mobiltelefons 3 innerhalb des Sichtfelds 14 erreicht wird.The current situation compares the control unit 10 then continuously with a predetermined target position, in which the image for determining the current state of the vehicle 12 should be included. It will be on the display 6 Instructions issued according to which the user's mobile phone 3 to move to reach the desired position or to minimize a deviation of the current position of the target position. As in 3 is indicated schematically, the mobile phone 3 by the user according to the arrow 15 moved from the current position I to another position II, in which the target position of the vehicle 12 concerning the mobile phone 3 within the field of view 14 is reached.

Beispielhafte Anweisungen, welche den Benutzer bei der Bewegung des Mobiltelefons 3 unterstützen, sind in 4 schematisch dargestellt. 4 zeigt dabei das Display 6 des Mobiltelefons 3, auf welchem in Echtzeit die von dem Bildsensor 7 jeweils erfasste Szene dargestellt wird. Wie aus 4 hervorgeht, wird zum aktuellen Zeitpunkt das Fahrzeug 12' abgebildet. Die Steuereinheit 10 gibt gleichzeitig Anweisungen 16 – beispielsweise in Form eines Pfeils – aus, sodass der Benutzer eindeutige Hinweise erhält, wie er das Mobiltelefon 3 bewegen soll, um die Soll-Lage des Fahrzeugs 12 innerhalb des Sichtfelds 14 zu erreichen. Wird die Soll-Lage erreicht, so wird ein entsprechender Hinweis gemäß 5 auf dem Display 6 angezeigt.Exemplary instructions directing the user to the movement of the mobile phone 3 support, are in 4 shown schematically. 4 shows the display 6 of the mobile phone 3 on which in real time that of the image sensor 7 each captured scene is displayed. How out 4 is apparent at the current time the vehicle 12 ' displayed. The control unit 10 gives instructions at the same time 16 - For example, in the form of an arrow - off, so that the user receives clear evidence, as he the mobile phone 3 should move to the target position of the vehicle 12 within the field of view 14 to reach. If the desired position is reached, then a corresponding note in accordance with 5 on the display 6 displayed.

Wird die Soll-Lage erreicht, so wird in einem weiteren Schritt S6 gemäß 2 das aktuelle Bild des Bereichs 13 des Fahrzeugs 12 aufgenommen und über eine Internet-Verbindung 17 (vgl. 1) an die Recheneinrichtung 4 übermittelt. Diese Aufnahme und Übermittlung können auch automatisch durch die Steuereinheit 10 bewirkt werden.If the desired position is reached, then in a further step S6 according to 2 the current picture of the area 13 of the vehicle 12 recorded and via an internet connection 17 (see. 1 ) to the computing device 4 transmitted. This recording and transmission can also be done automatically by the control unit 10 be effected.

Mit weiterem Bezug auf 2 überprüft die Steuereinheit 10 gemäß Schritt S7, ob Bilder des Fahrzeugs 12 aus allen vorgegebenen Perspektiven aufgenommen wurden oder nicht. Ist dies nicht der Fall, so kehrt das Verfahren zu dem Schritt S5 zurück, in welchem weitere Anweisungen 16 an den Benutzer ausgegeben werden und ein weiteres Bild aufgenommen und an die Recheneinrichtung 4 übermittelt wird. Stellt die Steuereinheit 10 fest, dass keine weiteren Bilder aufzunehmen sind, so endet das Verfahren gemäß Schritt S8.With further reference to 2 checks the control unit 10 according to step S7, whether images of the vehicle 12 were taken from all given perspectives or not. If this is not the case, then the method returns to step S5, in which further instructions 16 are output to the user and another image is taken and sent to the computing device 4 is transmitted. Represents the control unit 10 determines that no further pictures are to be taken, the method ends in step S8.

Die Recheneinrichtung 4 überprüft anhand der übermittelten Bilder den aktuellen Zustand der Außenfläche des Fahrzeugs 12. In der Recheneinrichtung 4 sind dabei Referenzbilder abgelegt, welche das Fahrzeug 12 in einem Soll-Zustand darstellen. Ein beispielhaftes Referenzbild 18 eines Bereichs 13 des Fahrzeugs 12 ist in 6 dargestellt. Ein beispielhaftes aktuelles Bild 19 desselben Bereichs 13 des Fahrzeugs 12 ist wiederum in 7 gezeigt. Die Recheneinrichtung 4 berechnet eine Differenz zwischen dem aktuellen Bild 19 und dem Referenzbild 18 und stellt beispielsweise fest, dass sich das aktuelle Bild 19 in einem Bereich 20 von dem Referenzbild 18 unterscheidet. Diese Differenz kann beispielsweise mit vorgegebenen Grenzwerten verglichen werden. Wird eine signifikante Differenz festgestellt, so übermittelt die Recheneinrichtung 4 an das Mobiltelefon 3 einen Steuerbefehl, dass der Benutzer die Abweichung von dem Soll-Zustand durch entsprechende Eingaben an dem Mobiltelefon 3 kommentieren soll. Der Kommentar wird dann an die Recheneinrichtung 4 übermittelt und gemeinsam mit den aufgenommenen Bildern zur Dokumentation abgespeichert.The computing device 4 checks the current state of the vehicle's exterior surface using the images provided 12 , In the computing device 4 while reference images are stored, which the vehicle 12 in a desired state. An exemplary reference picture 18 of an area 13 of the vehicle 12 is in 6 shown. An exemplary current picture 19 same area 13 of the vehicle 12 is in turn in 7 shown. The computing device 4 calculates a difference between the current image 19 and the reference picture 18 and, for example, notes that the current image 19 in one area 20 from the reference picture 18 different. This difference can be compared, for example, with predetermined limits. If a significant difference is detected, the computing device transmits 4 to the mobile phone 3 a control command that the user the deviation from the desired state by corresponding inputs to the mobile phone 3 to comment. The comment is then sent to the computing device 4 transmitted and stored together with the recorded images for documentation.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

EP 1321876 A2 [0003]
EP 1958148 B1 [0004]
DE 102011112411 A1 [0005]

Claims

Method for determining a current state of a vehicle ( 12 ), with the steps: - taking a current picture ( 19 ) of an area ( 13 ) of the vehicle ( 12 ) by means of a portable image capture device ( 2 ), - comparing the current image ( 19 ) with a stored reference image ( 18 ) by a computing device ( 4 ), the reference image ( 18 ) the area ( 13 ) of the vehicle ( 12 ) in a desired state, and - determining the current state by the computing device ( 4 ) depending on the comparison, characterized in that by the image capture device ( 2 ) before taking the current picture ( 19 ) a current position of the area to be detected ( 13 ) of the vehicle ( 12 ) within a field of view ( 14 ) of the image capture device ( 2 ) as well as a deviation of the current position from a predetermined desired position, the current image ( 19 ) for determining the current state of the vehicle ( 12 ) is recorded only when the deviation falls below a predetermined threshold.

A method according to claim 1, characterized in that the determination of the current position and the deviation comprises: - a current angular orientation of the area to be detected ( 13 ) of the vehicle ( 12 ) relative to the image capture device ( 2 ) and a deviation of the angular orientation from a predetermined target angular orientation are determined, wherein the current image ( 19 ) for determining the current state of the vehicle ( 12 ) is recorded only when the deviation of the angular orientation falls below a predetermined angle threshold, and / or - a current position of the area to be detected ( 13 ) of the vehicle ( 12 ) relative to the image capture device ( 2 ) and a deviation of the position from a predetermined nominal position are determined, wherein the current image ( 19 ) for determining the current state of the vehicle ( 12 ) is only recorded when the deviation of the position falls below a predetermined position threshold.

Method according to claim 1 or 2, characterized in that by means of the image capture device ( 2 ) Instructions ( 16 ) are output to a user according to which the image capture device ( 2 ) to reduce the deviation of the current position from the target position is to move.

Method according to one of the preceding claims, characterized in that the determination of the current position on the basis of at least one image acquisition device ( 2 ), in particular continuously on the basis of a temporal sequence of images.

Method according to claim 4, characterized in that the determination of the current position comprises that in the at least one image an image of the region ( 13 ) of the vehicle ( 12 ) is identified and characteristic features of the image are detected, wherein the current position is determined on the basis of the characteristic features.

Method according to one of the preceding claims, characterized in that when determining the current position and / or when issuing the instructions ( 16 ) Sensor data at least one of an image sensor ( 7 ) different sensor ( 8th ) of the image capture device ( 2 ), in particular an acceleration sensor and / or a yaw rate sensor, are taken into account.

Method according to one of the preceding claims, characterized in that after falling below the predetermined threshold, the current image ( 19 ) for determining the current state automatically by means of the image capture device ( 2 ) is recorded.

Method according to one of the preceding claims, characterized in that as a current image ( 19 ) an image of an outer surface of the vehicle ( 12 ) from outside the vehicle ( 12 ) is recorded.

Method according to one of the preceding claims, characterized in that as a current image ( 19 ) an image of an interior of the vehicle ( 12 ) is recorded.

Method according to one of the preceding claims, characterized in that the determination of the current state of the vehicle ( 12 ) includes that a difference between the current image ( 19 ) and the reference image ( 18 ) is determined.

Method according to one of the preceding claims, characterized in that if by the computing device ( 4 ) a deviation of the determined current state from the desired state is determined by means of the image acquisition device ( 2 ) a prompt signal is issued by which the user is prompted to make an input by which the deviation from the target state is commented by the user.

Method according to one of the preceding claims, characterized in that the computing device ( 4 ) is formed by an internet server and the current image ( 19 ) of the Image capture device ( 2 ) via the internet ( 5 ) to the computing device ( 4 ) is transmitted.

Method according to one of the preceding claims, characterized in that after the comparison the current image ( 19 ) as a new reference image ( 18 ) in the computing device ( 4 ) is stored.

Method according to one of the preceding claims, characterized in that the current image ( 19 ) by means of an image sensor ( 7 ) portable communication terminal ( 3 ) as an image capture device ( 2 ) is recorded.

System ( 1 ) with an image capture device ( 2 ) and a computing device ( 4 ), whereby the system ( 1 ) is adapted to perform a method according to any one of the preceding claims.