DE102009058142A1 - Method for outputting control information for e.g. car radio of passenger car via mobile phone, involves outputting image on display device of portable device together with part of control information for recognized car radio - Google Patents
Method for outputting control information for e.g. car radio of passenger car via mobile phone, involves outputting image on display device of portable device together with part of control information for recognized car radio Download PDFInfo
- Publication number
- DE102009058142A1 DE102009058142A1 DE200910058142 DE102009058142A DE102009058142A1 DE 102009058142 A1 DE102009058142 A1 DE 102009058142A1 DE 200910058142 DE200910058142 DE 200910058142 DE 102009058142 A DE102009058142 A DE 102009058142A DE 102009058142 A1 DE102009058142 A1 DE 102009058142A1
- Authority
- DE
- Germany
- Prior art keywords
- information
- vehicle
- portable device
- image
- objects
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
- B60R16/0231—Circuits relating to the driving or the functioning of the vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
Die Erfindung betrifft ein Verfahren zum Ausgeben von Bedieninformationen für Objekte eines Fahrzeugs über eine tragbare Vorrichtung sowie eine solche tragbare Vorrichtung und ein Computerprogrammprodukt, welches eine Ausführung eines solchen Verfahrens auf einer solchen tragbaren Vorrichtung ermöglicht. Insbesondere ist das Verfahren vorgesehen, eine Bedienungsanleitung für ein Fahrzeug auf einem mobilen Gerät, beispielsweise einem Mobiltelefon oder digitalen persönlichen Assistenten, auszugeben.The invention relates to a method for outputting operating information for objects of a vehicle via a portable device, as well as to such a portable device and to a computer program product which makes it possible to carry out such a method on such a portable device. In particular, the method is provided to output a user manual for a vehicle on a mobile device, for example a mobile telephone or digital personal assistant.
Moderne Fahrzeuge, insbesondere Kraftfahrzeuge, umfassen heutzutage eine Vielzahl von Bedieneinrichtungen und Funktionen, deren korrekte Bedienung ohne Hinzuziehung einer Bedienungsanleitung meist nicht möglich ist. Im Stand der Technik ist es bekannt, Bedienungsanleitungen für Fahrzeuge in Papierform zu erstellen und auszudrucken. Es ist bekannt, dass das Zurateziehen von gedruckten Bedienungsanleitungen nur sehr widerwillig vorgenommen wird.Modern vehicles, especially motor vehicles, today include a variety of controls and functions whose correct operation without consulting a manual is usually not possible. In the prior art, it is known to create manuals for vehicles in paper form and print. It is well known that it is very reluctant to consult printed manuals.
Ebenso sind im Stand der Technik Systeme bekannt, bei denen die Bedienungsanleitung des Fahrzeugs auf einem Datenträger gespeichert wird und über eine Funktionseinheit des Fahrzeugs selbst, beispielsweise eine Multifunktionsanzeige- und Bedienvorrichtung im Kraftfahrzeug ausgegeben werden kann. Hierbei werden in der Regel grafische Informationen auf einer Anzeigefläche einer Anzeigevorrichtung, beispielsweise der Anzeige- und Bedienvorrichtung, ausgegeben. Ein solches System ist beispielsweise in der
Aus der
Aus der
In allen bekannten Fällen ist es notwendig, die absolute Position des Objekts, über das Zusatzinformationen ausgegeben werden sollen, zu ermitteln. Hierfür ist es im Stand der Technik notwendig, sowohl die Position der mobilen Vorrichtung als auch deren Orientierung im Raum (Richtung und Neigung) zu ermitteln. Dieses erfordert einen hohen Bestimmungsaufwand und eine Vielzahl komplizierter Sensoren.In all known cases, it is necessary to determine the absolute position of the object over which additional information is to be output. For this purpose, it is necessary in the prior art to determine both the position of the mobile device and its orientation in space (direction and inclination). This requires a high determination effort and a variety of complicated sensors.
Der Erfindung liegt somit die Aufgabe zugrunde, ein Ausgeben von Informationen über Objekte eines Fahrzeugs mittels mobiler Vorrichtung deutlich zu vereinfachen.The invention is thus based on the object of outputting information about objects a vehicle using a mobile device significantly simplify.
Die Aufgabe wird erfindungsgemäß durch ein Verfahren mit den Merkmalen des Patentanspruchs 1, eine Vorrichtung mit den Merkmalen des Patentanspruchs 7 sowie ein Computerprogrammprodukt mit den Merkmalen des Patentanspruchs 10 erfindungsgemäß gelöst. Vorteilhafte Ausgestaltungen der Erfindung ergeben sich aus den Unteransprüchen.The object is achieved by a method having the features of claim 1, a device having the features of
Der Erfindung liegt der Gedanke zugrunde, eine mobile Vorrichtung, welche eine Abbildung ihrer Umgebung erfassen und wiedergeben kann, zu nutzen, um die Wiedergabe durch zusätzliche Bedieninformationen zu erweitern, so dass der Nutzer eine Bedienungsanleitung für die Objekte erhält, die mit der mobilen Vorrichtung grafisch erfasst und auf der Wiedergabevorrichtung grafisch dargestellt werden.The invention is based on the idea of using a mobile device, which can capture and reproduce an image of its surroundings, in order to expand the reproduction by additional operating information so that the user receives a user manual for the objects that are displayed graphically with the mobile device recorded and graphed on the playback device.
Als Objekt werden hier sowohl beliebige physikalische bauliche Einheit als auch andere grafisch darstellbare Einheit, beispielsweise Kontrollanzeigen, Piktogramme, Texte oder Ähnliches, verstanden. Objekte eines Fahrzeugs sind somit beispielsweise Bedieneinrichtungen und Bedienelemente, Kontrollanzeigen, grafische Anzeigeflächen und darauf abgebildete einzelne Ikons, Grafiken, Zeigerinstrumente oder Ähnliches. Jeder Einheit des Fahrzeugs, der Bedien- und/oder Erläuterungsinformationen zugeordnet werden können, werden somit hier als Objekte aufgefasst. Notwendig ist lediglich, dass diese Objekte durch einen Nutzer grafisch wahrnehmbar sind oder durch eine grafische Repräsentation wahrnehmbar sind.As an object here are any physical structural unit as well as other graphically representable unit, for example, control displays, pictograms, texts or the like understood. Objects of a vehicle are thus, for example, operating devices and operating elements, control displays, graphic display surfaces and individual icons, graphics, pointer instruments or the like depicted thereon. Each unit of the vehicle, to which operating and / or explanatory information can be assigned, are thus understood here as objects. All that is necessary is that these objects are graphically perceptible by a user or are perceptible by a graphical representation.
Unter einer tragbaren Vorrichtung wird eine Vorrichtung verstanden, die unabhängig von dem Fahrzeug funktionsfähig ist und von einem Nutzer mitgeführt werden kann. Beispiele für tragbare Vorrichtungen sind Mobiltelefone, Digitalkameras, persönliche digitale Assistenten. Tragbare Vorrichtungen werden auch als mobile Vorrichtungen bezeichnet.A portable device is understood to mean a device which is functional independently of the vehicle and can be carried by a user. Examples of portable devices are mobile phones, digital cameras, personal digital assistants. Portable devices are also referred to as mobile devices.
Als Fahrzeuge werden hier alle Land-, Wasser- und Luftfahrzeuge verstanden, insbesondere jedoch Kraftwagen und besonders Personenkraftwagen.As vehicles are understood here all land, water and air vehicles, but especially cars and especially passenger cars.
Als Bedieninformationen werden alle Erläuterungsinformationen verstanden, die ein Objekt und dessen Betätigung erläutern und/oder eine Handhabung unterstützen.As operator information, all explanatory information is understood that explain an object and its operation and / or support handling.
Insbesondere wird ein Verfahren zum Ausgeben von Bedieninformationen für Objekte eines Fahrzeugs über eine tragbare Vorrichtung geschaffen, welches die Schritte umfasst: Erfassen einer Abbildung mit der tragbaren Vorrichtung, die mindestens eines der Objekte des Fahrzeugs zumindest teilweise abbildet und die die Abbildung repräsentierenden Abbildungsdaten bereitstellt; Auswerten der Abbildungsdaten unter Heranziehung von Sätzen grafischer Charakterisierungsinformationen, um das mindestens eine zumindest teilweise abgebildete Objekt zu erkennen, wobei zu jedem der Objekte, für welches Bedieninformationen ausgebbar sind, mindestens ein Satz von grafischen Charakterisierungsinformationen existiert und die grafischen Charakterisierungsinformationen ein natürliches grafisches Aussehen des jeweiligen Objekts charakterisieren; und ein Ausgeben der Abbildung auf einer Anzeigevorrichtung der tragbaren Vorrichtung gemeinsam mit zumindest einem Teil der Bedieninformationen für das mindestens eine erkannte Objekt. Das oder die abgebildeten Objekte oder teilweise abgebildeten Objekte werden anhand von Charakterisierungsinformationen, die diesen Objekten zugeordnet sind, durch ein grafisches Verfahren in der Abbildung erkannt bzw. identifiziert. Somit ist es nicht notwendig, die Position des Objekts selbst oder die Position der tragbaren Vorrichtung zu ermitteln. Notwendig ist es lediglich, in den Abbildungsdaten anhand der Charakterisierungsinformationen die einzelnen Objekte zu identifizieren und anschließend die den Objekten zugeordneten Bedieninformationen gemeinsam mit der Abbildung des oder der Objekte auszugeben.In particular, there is provided a method of outputting operation information for objects of a vehicle via a portable device, comprising the steps of: acquiring an image with the portable device that at least partially images at least one of the objects of the vehicle and provides the image data representing the image; Evaluating the mapping data using sets of graphical characterization information to identify the at least one at least partially mapped object, wherein each of the objects for which operator information is outputable has at least one set of graphical characterization information and the graphical characterization information is a natural graphical appearance of the respective one Characterize the object; and outputting the image on a display device of the portable device together with at least part of the operation information for the at least one recognized object. The imaged objects or partially imaged objects are identified or identified by characterization information associated with those objects by a graphical method in the figure. Thus, it is not necessary to determine the position of the object itself or the position of the portable device. It is only necessary to identify the individual objects in the image data on the basis of the characterization information and then to output the operating information associated with the objects together with the image of the object or objects.
Eine entsprechende tragbare Vorrichtung zum Ausgeben von Bedieninformationen für Objekte eines Fahrzeugs umfasst somit eine Bilderfassungseinrichtung zum Erfassen mindestens einer Abbildung, die mindestens eines der Objekte des Fahrzeugs zumindest teilweise abbildet, und zum Bereitstellen von die Abbildung repräsentierenden Abbildungsdaten, eine Speichereinrichtung, wobei in der Speichereinrichtung Sätze grafischer Charakterisierungsinformationen abgelegt sind, wobei zu jedem der Objekte, für welches Bedieninformationen ausgebbar sind, mindestens ein Satz von grafischen Charakterisierungsinformationen existiert und die grafischen Charakterisierungsinformationen ein natürliches grafisches Aussehen des jeweiligen zugeordneten Objekts charakterisieren, eine Auswerteeinrichtung, die ausgebildet ist, die Abbildungsdaten auszuwerten und anhand der grafischen Charakterisierungsinformationen das mindestens eine zumindest teilweise abgebildete Objekt zu erkennen und Erkennungsinformationen auszugeben, und eine grafische Darstellungseinrichtung sowie eine Anzeigevorrichtung, die mit der grafischen Darstellungseinrichtung gekoppelt ist, wobei die grafische Darstellungseinrichtung eine grafische Darstellung der erfassten Abbildung auf der Anzeigevorrichtung steuert und ausgebildet ist, anhand der Erkennungsinformationen die dem mindestens einen zumindest teilweise in der Abbildung dargestellten Objekt zugeordneten Bedieninformationen zusätzlich (vorzugsweise zumindest teilweise auf der Anzeigevorrichtung grafisch) auszugeben.A corresponding portable device for outputting operating information for objects of a vehicle thus comprises an image capture device for capturing at least one image that at least partially maps at least one of the objects of the vehicle, and for providing imaging data representing the image, a storage device, wherein sets in the storage device at least one set of graphical characterization information exists and the graphic characterization information characterizes a natural graphical appearance of the respective associated object, an evaluation device that is designed to evaluate the image data and based on the graphical characterization information to recognize the at least one at least partially imaged object and recognition information and a graphical display device and a display device coupled to the graphical display device, wherein the graphical display device controls and is configured to display the captured image on the display device based on the recognition information that the at least one object shown at least partially in the image associated operating information in addition (preferably at least partially graphically output on the display device).
Ferner wird ein Computerprogrammprodukt zum Ausgeben von Bedieninformationen für Objekte eines Fahrzeugs vorgeschlagen, welches auf einer Prozessoreinheit einer tragbaren Vorrichtung mit einer Abbildungserfassungseinheit und mindestens einer Anzeigevorrichtung ausführbar ist, um ein Verfahren, wie es oben beschrieben ist, auszuführen.Furthermore, a computer program product for outputting operating information for objects of a vehicle is proposed, which is executable on a processor unit of a portable device with an image acquisition unit and at least one display device in order to carry out a method as described above.
Vorteilhafterweise handelt es sich bei der tragbaren Vorrichtung beispielsweise um ein Mobiltelefon mit einer integrierten Kamera oder einen persönlichen digitalen Assistenten, in den eine Kamera integriert ist. Voraussetzung ist zusätzlich jeweils, dass die elektronische Einrichtung, beispielsweise das mobile Telefon oder der persönliche digitale Assistent, eine Anzeigefläche aufweist, auf der die mit der Kamera erfasste Abbildung grafisch darstellbar ist.Advantageously, the portable device is, for example, a mobile phone with an integrated camera or a personal digital assistant, in which a camera is integrated. In each case, it is also a prerequisite that the electronic device, for example the mobile telephone or the personal digital assistant, has a display area on which the image recorded with the camera can be displayed graphically.
Bevorzugt wird auf einer solchen tragbaren Vorrichtung, beispielsweise einem Mobiltelefon mit Kamera (Kamerahandy) oder einem persönlichen digitalen Assistenten mit einer Kamera, eine als Software ausgeführte Anwendung geladen. Eine solche Anwendung stellt ein Computerprogrammprodukt dar. Diese Anwendung wird beispielsweise einmalig auf die tragbare Vorrichtung übertragen.Preferably, on such a portable device, such as a mobile phone with camera (camera phone) or a personal digital assistant with a camera, loaded as a software application loaded. Such an application is a computer program product. For example, this application is transferred once to the portable device.
In dieser Anwendung sind bei einer bevorzugten Ausführungsform sowohl Charakterisierungsinformationen über die einzelnen Objekte des Fahrzeugs, über die Bedienungsinformationen ausgebbar sind, als auch vorzugsweise die Bedieninformationen selbst enthalten.In this application, in a preferred embodiment, both characterization information about the individual objects of the vehicle, via which operating information can be output, and preferably also the operating information itself are contained.
Die grafischen Charakterisierungsinformationen umfassen solche Informationen, die es einem grafischen Verfahren ermöglichen, in einer Abbildung abgebildete Objekte des Fahrzeugs zu erkennen, d. h. zu identifizieren.The graphical characterization information includes such information that enables a graphical method to recognize vehicle imaged objects of the vehicle, i. H. to identify.
Insbesondere Personen, die häufig wechselnde Fahrzeuge nutzen, können jeweils die Anwendung auf ihre tragbare Vorrichtung übertragen, die zu dem Fahrzeug oder Fahrzeugmodell gehört, welches sie als nächstes benutzen werden. In dem Fahrzeug selbst aktiviert der Benutzer auf der tragbaren Vorrichtung die Anwendung, die zum Ausgeben der Bedieninformationen über die Objekte des Fahrzeugs vorgesehen ist.In particular, people who frequently use changing vehicles may each transfer the application to their portable device associated with the vehicle or vehicle model they will use next. In the vehicle itself, the user on the portable device activates the application provided for outputting the operation information about the objects of the vehicle.
Bei einer Ausführungsform ist vorgesehen, dass die tragbare Vorrichtung mit einem System des Fahrzeugs gekoppelt wird und hierbei Daten ausgetauscht werden, die das Fahrzeug und/oder die darin verbauten Objekte identifizieren. Somit liegen in der tragbaren Vorrichtung die notwendigen Informationen vor, die notwendig sind, um zu ermitteln, welche grafischen Charakterisierungsinformationen/Bedieninformationen notwendig sind, um die Objekte des entsprechenden Fahrzeugs erkennen zu können und die zugehörigen Bedieninformationen auszugeben. Es kann somit auch geprüft werden, ob diese bereits in der tragbaren Vorrichtung gespeichert sind.In one embodiment, it is provided that the portable device is coupled to a system of the vehicle and in this case data is exchanged that identify the vehicle and / or the objects installed therein. Thus, in the portable device, the necessary information is necessary to determine which graphical characterization information / operation information is necessary to recognize the objects of the corresponding vehicle and to output the associated operation information. It can thus also be checked whether they are already stored in the portable device.
Bei einer Ausführungsform ist darüber hinaus vorgesehen, dass die Anwendung, welche das Ausgeben von Bedieninformationen ermöglicht, automatisch gestartet wird, wenn die tragbare Vorrichtung mit dem Fahrzeugsystem gekoppelt wird. Bei dem Fahrzeugsystem kann es sich beispielsweise um eine Freisprecheinrichtung des Fahrzeugs handeln, mit der die tragbare Vorrichtung, welche beispielsweise ein Mobilfunktelefon mit Kamera ist, gekoppelt wird. Die Kopplung erfolgt im Stand der Technik beispielsweise über eine Bluetooth-Schnittstelle. Es kann jedoch auch jede beliebige andere drahtlose oder drahtgebundene Schnittstelle verwendet werden.In one embodiment, it is further contemplated that the application that enables the issuance of operator information is automatically started when the portable device is coupled to the vehicle system. By way of example, the vehicle system may be a hands-free device of the vehicle, with which the portable device, which is for example a mobile telephone with camera, is coupled. The coupling takes place in the prior art, for example via a Bluetooth interface. However, any other wireless or wired interface may be used.
Bei einer Weiterbildung der Erfindung ist vorgesehen, dass die Charakterisierungsinformationen automatisch, sofern sie nicht in einem Speicher der tragbaren Vorrichtung abgelegt sind, von dem Fahrzeug oder einer externen Datenbank abgerufen und in der tragbaren Vorrichtung gespeichert werden. Eine externe Datenbank kann beispielsweise über eine weitere Kommunikationsschnittstelle, welche beispielsweise als Mobilfunkschnittstelle ausgebildet ist, von einer zentralen Datenbank des Fahrzeugherstellers abgerufen werden. Dies kann beispielsweise über ein Mobilfunknetz automatisch erfolgen, nachdem die tragbare Vorrichtung das Fahrzeug und/oder die Objekte identifiziert hat, die in dem Fahrzeug verbaut und/oder vorhanden sind. Die Übertragung der Daten kann nach jedem beliebigen Protokoll und/oder Standard vorzugsweise drahtlos erfolgen.In a development of the invention, it is provided that the characterization information is automatically retrieved from the vehicle or an external database and stored in the portable device, if they are not stored in a memory of the portable device. An external database can be retrieved from a central database of the vehicle manufacturer, for example via a further communication interface, which is designed, for example, as a mobile radio interface. This may be done automatically over a cellular network, for example, after the portable device has identified the vehicle and / or the objects installed and / or present in the vehicle. The transmission of the data can preferably be carried out wirelessly according to any protocol and / or standard.
Sobald der Nutzer des Fahrzeugs eine Komponente, d. h. ein Objekt, des Fahrzeugs betätigen will oder über diese Komponente Bedieninformationen erhalten möchte, nimmt er diese mit der Bilderfassungseinrichtung, beispielsweise der Kamera seines Mobilfunktelefons, auf. Die hierbei erzeugten Abbildungsdaten werden bei einer bevorzugten Ausführungsform der Erfindung anhand eines grafischen Verfahrens zum Auffinden von grafischen Merkmalen ausgewertet. Die grafischen Merkmale können beispielsweise Merkmalspunkte und/oder Merkmalskonturen umfassen. Diese Merkmalskonturen und/oder Merkmalspunkte sind so gewählt, dass sie einzelne Objekte des Fahrzeugs eindeutig identifizieren. Dies bedeutet, dass die Abbildungsdaten auf das Vorhandensein der Merkmalspunkte und/oder Merkmalskonturen sowie sonstiger grafischer Merkmale untersucht werden. Liegen bestimmte Merkmalspunkte in einer bestimmten relativen Anordnung oder bestimmte Merkmalskonturen in der Abbildung vor, so kann hieraus darauf geschlossen werden, dass die Abbildung dasjenige Objekt zeigt, dem die Charakterisierungsinformationen zugeordnet sind.As soon as the user of the vehicle wants to actuate a component, ie an object, of the vehicle or would like to receive operating information about this component, he takes it with the image capture device, for example the camera of his mobile phone. The image data generated in this case are evaluated in a preferred embodiment of the invention using a graphical method for finding graphical features. The graphical features may include, for example, feature points and / or feature contours. These feature contours and / or feature points are selected so that they uniquely identify individual objects of the vehicle. This means that the image data are examined for the presence of the feature points and / or feature contours and other graphical features. Are certain feature points in a particular relative arrangement or certain feature contours in the figure, it can be concluded that the image shows the object to which the characterization information is assigned.
Um die Erkennungssicherheit zu steigern, ist bei einer Ausführungsform vorgesehen, dass zum Auffinden und Erkennen des mindestens einen Objekts Abbildungseigenschaften unterschiedlicher möglicher Aufnahmegeometrien der Abbildung durch das tragbare Gerät berücksichtigt und ermittelt werden und die grafische Darstellung der Bedieninformation für das mindestens eine erkannte Objekt angepasst an die ermittelten Abbildungseigenschaften vorgenommen wird. Beispielsweise skaliert eine Darstellungsgröße eines Objekts in der aufgenommenen Abbildung abhängig von dem Abstand der Bilderfassungsvorrichtung von dem entsprechenden Objekt bei der Aufnahme der Abbildung. Darüber hinaus wird über die Betrachtungsrichtung des Objekts bei dem Erfassen der Abbildung eine Verzerrung in der Abbildungsebene festgelegt. Ein kreisförmiges Objekt wird beispielsweise bei lotrechter Betrachtung zu der Kreisebene auch als Kreis abgebildet. Wird die Betrachtungsrichtung jedoch gegenüber der Lotrechten auf den Kreis verschwenkt, so wird der Kreis als Ellipse abgebildet. Ferner ist zu berücksichtigen, dass eine Reihe von Objekten eine dreidimensionale Gestalt aufweisen, die aus unterschiedlichen Aufnahmerichtungen verschieden in eine zweidimensionale Abbildung überführt wird.In order to increase the reliability of detection, it is provided in one embodiment that for detecting and recognizing the at least one object imaging properties of different possible recording geometries of the image by the portable device are considered and determined and the graphical representation of the control information for the at least one detected object adapted to the determined imaging properties is made. For example, a display size of an object in the captured image scales depending on the distance of the image capture device from the corresponding object when taking the image. In addition, the viewing direction of the object when capturing the image defines a distortion in the imaging plane. For example, a circular object is also depicted as a circle when viewed perpendicular to the circle plane. However, if the viewing direction is pivoted relative to the perpendicular to the circle, the circle is imaged as an ellipse. Furthermore, it should be noted that a series of objects have a three-dimensional shape, which is different from different recording directions in a two-dimensional image transferred.
Beim Auswerten wird ferner vorzugsweise ermittelt, wo das entsprechende Objekt in der grafischen Abbildung dargestellt wird. Hierdurch ist es möglich, die entsprechenden dem Objekt zugeordneten Bedieninformationen relativ zu der Darstellungsposition des Objekts in der Abbildung die zugehörigen Bedieninformationen grafisch darzustellen.During the evaluation, it is also preferably determined where the corresponding object is displayed in the graphic illustration. This makes it possible to display the corresponding operating information associated with the object relative to the representation position of the object in the figure, the associated operating information.
Es versteht sich, dass zusätzlich zu den grafischen Informationen auch akustische Informationen ausgegeben werden können. Die grafischen Informationen, die zusätzlich ausgegeben werden, können in einzelnen Ausführungsformen animiert sein und/oder grafische Videosequenzen oder Ähnliches umfassen.It is understood that in addition to the graphic information also acoustic information can be output. The graphical information that is additionally output may be animated in individual embodiments and / or include graphic video sequences or the like.
Sofern die Speicherkapazität in der tragbaren Vorrichtung nicht ausreichend groß ist, kann es vorgesehen sein, dass nur die Charakterisierungsinformationen in einer Speichereinrichtung der tragbaren Vorrichtung abgelegt werden. Die Bedieninformationen können dann für die erkannten Objekte über eine Kommunikationsschnittstelle, die mit dem Fahrzeug gekoppelt ist, aus einer Speichereinrichtung des Fahrzeugs abgerufen werden und/oder über eine weitere Kommunikationsschnittstelle, beispielsweise über ein Mobilfunknetz, von einem externen Server heruntergeladen werden, bevor sie gemeinsam mit der Abbildung des Objekts ausgegeben werden.If the storage capacity in the portable device is not sufficiently large, it may be provided that only the characterization information is stored in a storage device of the portable device. The operating information can then be retrieved for the detected objects via a communication interface, which is coupled to the vehicle, from a storage device of the vehicle and / or downloaded via an additional communication interface, for example via a mobile network, from an external server before sharing with the image of the object are output.
Es versteht sich, dass auch ein Teil der Bedieninformationen, sofern der Speicher auf der tragbaren Vorrichtung ausreichend ist, auf der tragbaren Vorrichtung gespeichert sein kann und nur einzelne ergänzende Bedieninformationen oder Bedieninformationen, die selten abgerufen werden, von dem externen Datenbankserver abgerufen werden.It will be understood that some of the operating information, if the memory on the portable device is sufficient, may also be stored on the portable device and only individual supplementary operating information or operating information that is rarely retrieved is retrieved from the external database server.
Die Merkmale der erfindungsgemäßen Vorrichtung und des Computerprogrammprodukts weisen dieselben Vorteile wie die entsprechenden Merkmale des erfindungsgemäßen Verfahrens auf.The features of the device according to the invention and of the computer program product have the same advantages as the corresponding features of the method according to the invention.
Nachfolgend wird die Erfindung unter Bezugnahme auf eine Zeichnung näher erläutert. Hierbei zeigen:The invention will be explained in more detail with reference to a drawing. Hereby show:
In
Die Bilderfassungseinrichtung
In der dargestellten Ausführungsform umfasst die tragbare Vorrichtung
Das Computerprogrammprodukt
Die Objekte
Wird die tragbare Vorrichtung
Im Zusammenhang mit
Bei einer bevorzugten Ausführungsform wird nun abgeprüft, ob die für das identifizierte Fahrzeug notwendigen Charakterisierungsinformationen in der tragbaren Vorrichtung vorhanden sind
Wie durch die Anfrage
Zeitgleich zum Aktualisieren der Anwendung und/oder der Charakterisierungsinformationen und/oder der Bedieninformationen oder anschließend wird die Bilderfassung über die Bilderfassungseinheit, beispielsweise die Kamera des Mobilfunktelefons, aktiviert. Der Nutzer erfasst eine Abbildung, die zumindest ein Objekt
Die Abbildungsdaten werden anschließend ausgewertet
In einer Abfrage
Wurde bei dem grafischen Vergleich das zu dem Satz Charakterisierungsinformationen gehörende Objekt nicht erkannt, so schließt sich an die Abfrage
Ist auch unter Berücksichtigung der unterschiedlichen möglichen Abbildungsgeometrien keine Übereinstimmung zwischen den grafischen Merkmalen, die der Satz Charakterisierungsinformationen enthält, und den Abbildungsdaten festzustellen, so kann das durch die Charakterisierungsinformationen charakterisierte Objekt in der Abbildung nicht aufgefunden werden. Da das Fahrzeug in der Regel unterschiedliche Objekte umfasst, für welches Bedieninformationen ausgebbar sind, wird die Auswertung anschließend sukzessive für die verschiedenen Sätze von Charakterisierungsinformationen, d. h. für die unterschiedlichen möglichen abgebildeten Objekte, ausgeführt. In einer vereinfachten Darstellung wird dies dadurch ausgedrückt, dass überprüft wird, ob ein weiterer Satz Charakterisierungsinformationen vorliegt
Bei einer bevorzugten Ausführungsform wird das Verfahren anschließend mit einer erneuten Bilderfassung fortgesetzt
Es versteht sich für den Fachmann, dass das Verfahren nicht nur bei Einzelbildern, sondern auch bei einer fortlaufenden Bildaufnahme ausgeführt werden kann.It will be understood by those skilled in the art that the method can be practiced not only for still images but also for continuous image acquisition.
Bei dem beschriebenen Beispiel wird davon ausgegangen, dass das Absuchen der Abbildung auf ein Vorhandensein charakteristischer grafischer Merkmale in Form von Merkmalspunkten oder Merkmalskonturen nacheinander für die den einzelnen Objekten zugeordneten Sätze von Charakterisierungsinformationen ausgeführt wird.In the example described, it is assumed that the screening of the image for a presence of characteristic graphic features in the form of feature points or feature contours is carried out in succession for the sets of characterization information assigned to the individual objects.
Es sind aber Ausführungsformen denkbar, bei denen die Darstellung gleichzeitig auf grafische Merkmale abgesucht wird, die unterschiedlichen Objekten zugeordnet sind.However, embodiments are conceivable in which the display is simultaneously searched for graphical features that are assigned to different objects.
Ferner ist es möglich, Bildbearbeitungsverfahren anzuwenden, die charakteristische Merkmale, Kanten, Kontrastunterschiede usw. ermitteln und die so ermittelten charakteristischen Merkmale der Abbildung gegen die in den Charakterisierungsinformationen angegebenen grafischen Merkmale abgleichen und so die einzelnen Objekte bei einer Übereinstimmung erkennen. Die Auswertung der Abbildungsdaten erfolgt in einer Auswertungseinrichtung
Sowohl die Auswerteeinrichtung
Insgesamt bildet die Prozessoreinrichtung
Die Anwendung (das Computerprogramm), einschließlich der Charakterisierungsinformationen und/oder der Bedieninformationen, und/oder die Charakterisierungsinformationen und/oder die Bedieninformationen können auch über ein Speichermedium
BezugszeichenlisteLIST OF REFERENCE NUMBERS
- 11
- tragbare Vorrichtungportable device
- 22
- BilderfassungseinrichtungImage capture device
- 33
- Anzeigevorrichtungdisplay device
- 44
- haptische Bedieneinrichtunghaptic control device
- 55
- Prozessoreinrichtungprocessor means
- 66
- Speichereinrichtungmemory device
- 77
- MobilfunkschnittstelleMobile interface
- 88th
- Sende- und EmpfangsantenneTransmitting and receiving antenna
- 99
- Mobilfunknetzmobile network
- 1010
- Sende- und EmpfangsmastTransmitting and receiving mast
- 11 11
- NetzwerkschnittstelleNetwork Interface
- 1212
- InfrarotschnittstelleInfrared interface
- 1313
- drahtgebundene Schnittstellewired interface
- 1414
- Objektobject
- 14-114-1
- LenkstockhebelPitman arm
- 14-214-2
- Lenkradsteering wheel
- 14-3, 14-3'14-3, 14-3 '
- WarnblinkerbedienelementHazard warning lights control element
- 14-4, 14-4'14-4, 14-4 '
- Autoradiocar radio
- 14-514-5
- Freisprecheinrichtungspeakerphone
- 1515
- Fahrzeugvehicle
- 1616
- Cockpitcockpit
- 1717
- ComputerprogrammproduktA computer program product
- 1818
- Computercomputer
- 1919
- Datenkabeldata cable
- 2020
- DatenverbindungData Connection
- 2121
- FahrzeugschnittstelleVehicle interface
- 2222
- Datendates
- 2323
- zentrale Datenbankcentral database
- 2424
- ComputerprogrammproduktA computer program product
- 2525
- Charakterisierungsinformationcharacterization information
- 26, 26'26, 26 '
- Bedieninformationoperating information
- 2727
- Auswerteeinrichtungevaluation
- 2828
- Darstellungseinrichtungdisplay means
- 2929
- Steuereinrichtungcontrol device
- 3030
- Speichermediumstorage medium
- 3131
- SpeichermediumlesegerätStorage medium reader
- 3232
- FahrzeugdatenspeicherVehicle data storage
- 101101
- Übertragen eines Computerprogrammprodukts auf eine tragbare VorrichtungTransmitting a computer program product to a portable device
- 102102
- Einbinden des ComputerprogrammproduktsIntegration of the computer program product
- 103103
- Aktivierung des ComputerprogrammproduktsActivation of the computer program product
- 104104
- automatische Aktivierungautomatic activation
- 105105
- manuelle Aktivierungmanual activation
- 106106
- Identifikation des FahrzeugsIdentification of the vehicle
- 107107
- Abfrage: Charakterisierungsinformationen vorhanden?Query: Characterization information available?
- 108108
- Charakterisierungsinformationen ladenLoad characterization information
- 109109
- Abfrage: Bedieninformationen vorhanden?Query: operating information available?
- 110110
- Bedieninformationen ladenLoad operating information
- 111111
- Bilderfassung/Bereitstellung von AbbildungsdatenImage capture / provision of image data
- 112112
- Auswerten der AbbildungsdatenEvaluation of the image data
- 113113
- Einlesen eines Satzes CharakterisierungsinformationenReading in a set of characterization information
- 114114
- Vergleichcomparison
- 115115
- Bestimmen einer Position und von AbbildungseigenschaftenDetermining a position and imaging properties
- 116116
- Abfrage: Objekt erkannt?Query: object detected?
- 117117
- Abfrage: Bedieninformationen vorhanden?Query: operating information available?
- 118118
- Bedieninformationen ladenLoad operating information
- 119119
- Bedieninformationen für erkanntes Objekt einlesenRead operating information for recognized object
- 120120
- Ausgeben der Abbildung mit den BedieninformationenOutput of the illustration with the operating information
- 121121
- Bedieninformationen grafisch anpassen/positionierenGraphically adjust / position operating information
- 122122
- Abfrage: weitere zu berücksichtigende Abbildungsgeometrien vorhanden?Query: further mapping geometries to be considered available?
- 123123
- Verändern der berücksichtigten AbbildungsgeometrieChanging the considered imaging geometry
- 124124
- Abfrage: weiterer Satz Charakterisierungsinformationen vorhanden?Query: further set of characterization information available?
- 125125
- Ausgabe einer Mitteilung ”kein Objekt erkannt”Output of a message "no object recognized"
- 126126
- Deaktivierung der AnwendungDeactivation of the application
- 127127
- automatische Deaktivierungautomatic deactivation
- 128128
- manuelle Deaktivierungmanual deactivation
- 129129
- Abfrage: Ist ein Objekt erkannt?Query: Is an object recognized?
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- DE 102006049965 A1 [0003] DE 102006049965 A1 [0003]
- US 2009/0216446 A1 [0004] US 2009/0216446 A1 [0004]
- US 2005/0206654 A1 [0005] US 2005/0206654 A1 [0005]
Claims (11)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE200910058142 DE102009058142A1 (en) | 2009-12-12 | 2009-12-12 | Method for outputting control information for e.g. car radio of passenger car via mobile phone, involves outputting image on display device of portable device together with part of control information for recognized car radio |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE200910058142 DE102009058142A1 (en) | 2009-12-12 | 2009-12-12 | Method for outputting control information for e.g. car radio of passenger car via mobile phone, involves outputting image on display device of portable device together with part of control information for recognized car radio |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102009058142A1 true DE102009058142A1 (en) | 2011-06-16 |
Family
ID=43992889
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE200910058142 Ceased DE102009058142A1 (en) | 2009-12-12 | 2009-12-12 | Method for outputting control information for e.g. car radio of passenger car via mobile phone, involves outputting image on display device of portable device together with part of control information for recognized car radio |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102009058142A1 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102012008284A1 (en) | 2012-04-25 | 2012-11-15 | Daimler Ag | Method for outputting information with respect to object of vehicle over mobile communication terminal, involves arranging communication connection between mobile communication terminal and computing unit of vehicle |
DE102011108475A1 (en) * | 2011-07-24 | 2013-01-24 | Jasmin Laub | Method for controlling electrically operable devices or equipments like furniture, through mobile communication device, involves sending a portion of software component to communication device and control program to selected equipment |
US9550419B2 (en) | 2014-01-21 | 2017-01-24 | Honda Motor Co., Ltd. | System and method for providing an augmented reality vehicle interface |
EP3598397A1 (en) * | 2018-07-19 | 2020-01-22 | Fahrzeugwerk Bernard Krone GmbH & Co. KG | Computer-implemented method for checking a vehicle |
DE102018218790A1 (en) | 2018-11-05 | 2020-05-07 | Audi Ag | Method for outputting at least text information on an associated information symbol in a vehicle, and an information system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050206654A1 (en) | 2003-12-12 | 2005-09-22 | Antti Vaha-Sipila | Arrangement for presenting information on a display |
DE102006049965A1 (en) | 2006-02-11 | 2007-10-18 | Volkswagen Ag | Device and method for interactive information output and / or assistance for the user of a motor vehicle |
US20090216446A1 (en) | 2008-01-22 | 2009-08-27 | Maran Ma | Systems, apparatus and methods for delivery of location-oriented information |
-
2009
- 2009-12-12 DE DE200910058142 patent/DE102009058142A1/en not_active Ceased
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050206654A1 (en) | 2003-12-12 | 2005-09-22 | Antti Vaha-Sipila | Arrangement for presenting information on a display |
DE102006049965A1 (en) | 2006-02-11 | 2007-10-18 | Volkswagen Ag | Device and method for interactive information output and / or assistance for the user of a motor vehicle |
US20090216446A1 (en) | 2008-01-22 | 2009-08-27 | Maran Ma | Systems, apparatus and methods for delivery of location-oriented information |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102011108475A1 (en) * | 2011-07-24 | 2013-01-24 | Jasmin Laub | Method for controlling electrically operable devices or equipments like furniture, through mobile communication device, involves sending a portion of software component to communication device and control program to selected equipment |
DE102012008284A1 (en) | 2012-04-25 | 2012-11-15 | Daimler Ag | Method for outputting information with respect to object of vehicle over mobile communication terminal, involves arranging communication connection between mobile communication terminal and computing unit of vehicle |
US9550419B2 (en) | 2014-01-21 | 2017-01-24 | Honda Motor Co., Ltd. | System and method for providing an augmented reality vehicle interface |
EP3598397A1 (en) * | 2018-07-19 | 2020-01-22 | Fahrzeugwerk Bernard Krone GmbH & Co. KG | Computer-implemented method for checking a vehicle |
DE102018117538A1 (en) * | 2018-07-19 | 2020-01-23 | Fahrzeugwerk Bernard Krone GmbH & Co. KG | Computer-implemented method for checking a vehicle |
DE102018218790A1 (en) | 2018-11-05 | 2020-05-07 | Audi Ag | Method for outputting at least text information on an associated information symbol in a vehicle, and an information system |
DE102018218790B4 (en) | 2018-11-05 | 2024-03-21 | Audi Ag | Method for outputting at least one piece of text information about an associated information symbol in a vehicle, and an information system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102017223863A1 (en) | Use on-board monitoring (mode 6) misfire data stream and physical addressing tests | |
DE102015108498A1 (en) | PROVIDING A VEHICLE MANUAL INFORMATION USING AN OBJECT DETECTION TO A MOBILE DEVICE | |
DE102011013760B4 (en) | Method, device and computer program product for conveying information by means of augmented reality in connection with a road vehicle | |
DE112012001174T5 (en) | Enhance vehicle infotainment systems by adding remote sensors from a portable device | |
DE102013000068A1 (en) | Method for synchronizing display devices of a motor vehicle | |
DE102015217081A1 (en) | Touch-sensitive holographic display system and method of using the display system | |
DE102010002928A1 (en) | Motor vehicle configuration system | |
DE102008011876A1 (en) | display device | |
DE102009058142A1 (en) | Method for outputting control information for e.g. car radio of passenger car via mobile phone, involves outputting image on display device of portable device together with part of control information for recognized car radio | |
DE102015213362A1 (en) | METHOD FOR EXPANDING A VEHICLE INTERFACE | |
DE102015207337B4 (en) | Method and device for entertaining at least one occupant of a motor vehicle | |
DE102017215161A1 (en) | Method and device for selecting an environment object in the environment of a vehicle | |
DE102016225746A1 (en) | Establishing a direct communication connection with a foreign vehicle in an environment of a motor vehicle | |
DE102010033883B4 (en) | Method for data transfer between a mobile device and a motor vehicle | |
DE102013000071A1 (en) | Method for synchronizing data between devices integrated in motor car and mobile terminal, involves transmitting synchronization data for detecting predetermined gesture command comprised in free space by running movement of operator hand | |
DE102014216661A1 (en) | Device and method for operating multimedia content in a means of transportation | |
DE102014001182A1 (en) | A system for operating a combination instrument of a vehicle and a mobile electronic device, which can be releasably supported by a vehicle-mounted bracket | |
DE102013201624A1 (en) | Method for transmitting data from mobile terminal to function of vehicle, involves determining data, which is transmitted to function of vehicle, where position of mobile terminal is determined with respect to location | |
DE102012208733A1 (en) | Method for determining location of object e.g. shop by user of vehicle, involves determining direction vector and object position data with respect to predetermined reference point and absolute position in geographic coordinate system | |
DE102015008448A1 (en) | Method for detecting a driving situation of a motor vehicle | |
DE102005061698B4 (en) | Method for automatic entry in an address book | |
DE102020216492A1 (en) | Storage arrangement for stowing a mobile device in a vehicle, vehicle with the storage arrangement and method for stowing a mobile device and for displaying screen contents of the mobile device using a storage arrangement | |
DE102016013696A1 (en) | Method and device for parking recognition | |
DE102011050847A1 (en) | An image forming device | |
DE102008014627B4 (en) | Method for operating a mobile data processing device in a motor vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OR8 | Request for search as to paragraph 43 lit. 1 sentence 1 patent law | ||
R163 | Identified publications notified | ||
R012 | Request for examination validly filed | ||
R002 | Refusal decision in examination/registration proceedings | ||
R003 | Refusal decision now final |